输入流读取大文件很慢，为什么？

Question

我正在尝试提交一个 500 MB 的文件。 我可以加载它，但我想提高性能。 这是慢代码：

File dest = getDestinationFile(source, destination);
if(dest == null) return false;

in = new BufferedInputStream(new  FileInputStream(source));
out = new BufferedOutputStream(new  FileOutputStream(dest));
byte[] buffer = new byte[1024 * 20];
int i = 0;

// this while loop is very slow
while((i = in.read(buffer)) != -1){
   out.write(buffer, 0, i); //<-- SLOW HERE
   out.flush();
}

我怎样才能找到它慢的原因？
字节数组大小/缓冲区大小不够吗？ 您有什么提高性能的想法吗？

提前感谢您的帮助

Answer 1

您不应该在循环中刷新。 您正在使用 BufferedOutputStream。这意味着在“缓存”一些数据后，它会将数据刷新到文件中。 您的代码会在写入少量数据后刷新数据，从而降低性能。

尝试这样做：

while((i = in.read(buffer)) != -1){
out.write(buffer, 0, i); <-- SLOW HERE
}
out.flush();

..:: 编辑：回应下面的评论 ::..
在我看来，您根本不应该使用缓冲区。您正在使用 Buffered(Output/Input)Stream 这意味着他们有自己的缓冲区来从磁盘读取“包”数据并保存“包”数据。我不能 100% 确定使用额外缓冲区的性能，但我希望您展示我将如何做到这一点：

File dest = getDestinationFile(source, destination);
if(dest == null) return false;

in = new BufferedInputStream(new  FileInputStream(source));
out = new BufferedOutputStream(new  FileOutputStream(dest));

int i;
while((i = in.read()) != -1){
   out.write(i);
}
out.flush();

在我的版本中，您只会读取一个 BYTE（没有 int。阅读文档：
http://docs.oracle.com/javase/7/docs/api/java/io/InputStream.html#read()
此方法返回 int 但这只是一个 BYTE）但无需读取整个缓冲区（因此您不必担心它的大小）。

或许您应该阅读有关流的更多信息，以更好地了解如何处理它们。