【问题标题】:An efficient way to read ASCII files一种读取 ASCII 文件的有效方法
【发布时间】:2012-08-17 15:08:14
【问题描述】:

我正在开发一个处理相当大 (4-5 MB)、矩阵形状(存储为 N*M 行和列的数值)ASCII 文件的小程序:

1 2 3
4 5 6
7 8 9
etc.

我注意到老式的 C 文件输入法:

csFile = fopen("file.dat","r");
while(fscanf(csFile, "%lf", &Point)!=EOF) {
}
fclose(csFile);

比最基本的 C++ 实现快得多(230 毫秒,而 3MB 文件存储大约 230k 数值大约需要 1500 毫秒):

ifstream myfile ("file.dat");
while(myfile >> Point) {
}
myfile.close();

为简单起见,我省略了循环内的数据操作函数,但即使是这些“简单”的示例也显示了 C 类型 I/O 的几乎七倍增强。为什么会有如此巨大的性能差异?有没有更快的方法来使用 C++ 流/函数来读取这些类型的文件?

【问题讨论】:

标签: c++ c


【解决方案1】:

如果您发现 C 和 C++ 代码之间存在如此巨大的差异,我怀疑您没有进行优化编译。尝试使用-O3 或编译器启用优化所需的任何标志。衡量未优化代码的速度通常是没有意义的,因为它比代码的复杂性更能告诉你语言的复杂性。尤其是 C++,非常依赖优化来获得合理的性能。

【讨论】:

    【解决方案2】:

    可能与缓冲区有关,请尝试通过函数为您的ifstream设置足够的缓冲区:

    file.rdbuf()->pubsetbuf()

    这将减少磁盘 IO 和系统调用。 (批量读取)

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2019-06-16
      • 1970-01-01
      • 2017-03-06
      • 2018-04-15
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多