从 Asp.net MVC 中 50000 行的查询结果集中下载 csv 文件

Question

我的控制器中有一个函数，可以为 Linq 查询结果集下载 csv 文件。 linq 查询只是从数据库中获取用户提供的日期范围的数据。

var dataForDateRange = obj.table.Where(m => m.id== id && m.CreatedDateTime >= start && m.CreatedDateTime<= end);
string csv = string.Empty;
foreach(var csvData in dataForDateRange)
{
    csv = csvData.col1 + "," + csvData.col2 + "," + csvData.col3......;
    csv += "\r\n";
}
Response.Clear();
Response.Buffer = true;
Response.AddHeader("content-disposition", "attachment;filename="+engineName+"_CSV.csv");
Response.Charset = "";
Response.ContentType = "application/text";
Response.Output.Write(csv);
Response.Flush();
Response.End();

上面的代码成功地适用于较少数量的数据行。如果记录超过 10000，则浏览器超时。调试显示代码在 foreach 循环处挂起。 为大约 500000 条记录完成这项工作的最佳方法是什么？

Answer 1

您可以使用 StringBuilder 类和 FileStream 来生成 csv。 试试下面的代码。 您可以为 StringBuilder 和 System.IO 命名空间包含 System.Text 以使用 FileStream 类。

var dataForDateRange = obj.table.Where(m => m.id== id && m.CreatedDateTime >= start && m.CreatedDateTime<= end);
StringBuilder csvBuilder = new StringBuilder();

//Adding column header
csvBuilder.AppendLine("Col1","Col2", "Col3", ....);

//Adding row data
for(int i = 0; i < dataForDateRange.Rows.Count; i++)
{
    csvBuilder.Append(dataForDateRange.Rows[i] + ",");
    csvBuilder.Append("\n");
}

//Save your file
public void SaveFileReport()
{
    try
    {
        if(File.Exists("yourfilepath") == false) //eg @"c:\test.csv"
        {
            FileStream fstream = File.Create("yourfilepath"); 
            fstream.Close();
        }
        File.WriteAllText("yourfilepath", csvBuilder.ToString());
    }
    catch(Exception)
    {
        throw;
    }
}

//注意：我已经给出了实现的基本逻辑，请您添加您的代码 并调试以获得所需的结果。