使用 Struts2 + Freemarker 生成大文件

Question

我需要使用Struts2 和Freemarker 将数据转储到一个大的xml（50 ~ 500 Mb）中：

<?xml version="1.0" encoding="UTF-8"?>
<documents>
    <#list collection as document>
        <document>
        ...
        </document>
        <#if document_index % 100 == 0> 
           <#flush/>
        </#if>
    </#list>
</document>

由于collection 可能很大，它已经实现了一个内部逻辑来获取部分数据，只要有可用数据，就可以使用它并再次获取。

问题似乎与 XML 的缓冲区有关：有时应用程序崩溃（java.lang.OutOfMemoryError）。

每 100 个文档调用一次 Freemarker flush，但我不知道是否真的发生了刷新，根据 documentation，这只是嵌入软件的指示 (Strut2 + Tomcat7)。

关于如何强制刷新有什么建议吗？

JVM 处理了大约 1~2 Gb 的堆内存，也许只是内存问题？

也许org.apache.struts2.views.freemarker.FreemarkerManager 可以为此目的适当调整？

Answer 1

在这个用例中不需要调用#flush。当Writer（或它后面的OutputStream）被缓冲以提高性能时，缓冲区无论如何都有一个相当低的大小限制（几十千字节等），之后它将自动刷新。如果输出由于某种功能原因被缓冲，例如，为了确保输出可以在任何时候完全回滚，或者输出可以作为单个 String 返回，那么无论如何你都应该修复（这就是#flush 也可能被忽略的地方）。因此，尝试在freemarker.template.Template.createProcessingEnvironment 上设置一个断点并检查调试器中的out Writer 参数（以及Writer/OutputStream 表示Writer 写入等）。也许某处会有StringWriter。

Answer 2

我找到了解决办法。

问题在于 Struts2 FreemarkerResult 以及这个类如何让您处理输出写入器的刷新。

基本上，如果您使用TemplateExceptionHandler.RETHROW_HANDLER 作为异常处理程序（就像我一样），则整个模板都会在执行任何刷新之前被处理。 （这是所需的行为，因为如果有任何模板错误，您希望在将任何输出发送到响应之前在更高级别引发和处理异常）

但TemplateExceptionHandler 是嵌入在FreemarkerManager 中的固定配置，不能根据给定请求的需要进行切换。

我决定扩展 FreemarkerResult 重写方法 doExecute(...) 以包含一个参数，即使全局配置为 @987654329，该参数也会强制单个请求使用标准 flushing-during-template-process @。