使用 C# 读取 CSV 文件

Question

我正在编写一个简单的导入应用程序，需要读取一个 CSV 文件，在 DataGrid 中显示结果，并在另一个网格中显示 CSV 文件的损坏行。例如，在另一个网格中显示短于 5 个值的行。我正在尝试这样做：

StreamReader sr = new StreamReader(FilePath);
importingData = new Account();
string line;
string[] row = new string [5];
while ((line = sr.ReadLine()) != null)
{
    row = line.Split(',');

    importingData.Add(new Transaction
    {
        Date = DateTime.Parse(row[0]),
        Reference = row[1],
        Description = row[2],
        Amount = decimal.Parse(row[3]),
        Category = (Category)Enum.Parse(typeof(Category), row[4])
    });
}

但在这种情况下对数组进行操作非常困难。有没有更好的方法来拆分值？

Answer 1

不要重新发明轮子。利用 .NET BCL 中已有的内容。

• 添加对 Microsoft.VisualBasic 的引用（是的，它显示为 VisualBasic，但它也可以在 C# 中工作 - 请记住，最后它只是 IL）
• 使用Microsoft.VisualBasic.FileIO.TextFieldParser类解析CSV文件

这里是示例代码：

using (TextFieldParser parser = new TextFieldParser(@"c:\temp\test.csv"))
{
    parser.TextFieldType = FieldType.Delimited;
    parser.SetDelimiters(",");
    while (!parser.EndOfData) 
    {
        //Processing row
        string[] fields = parser.ReadFields();
        foreach (string field in fields) 
        {
            //TODO: Process field
        }
    }
}

它在我的 C# 项目中非常适合我。

这里有更多链接/信息：

• MSDN: Read From Comma-Delimited Text Files in Visual Basic
• MSDN: TextFieldParser Class

Answer 2

我推荐CsvHelper from Nuget。

PS：关于其他更受欢迎的答案，我很抱歉，但添加对 Microsoft.VisualBasic 的引用是：

• 丑
• 不是跨平台的，因为它在 .NETCore/.NET5 中不可用（而且 Mono 从来没有很好地支持 Visual Basic，所以它可能有问题）。

Answer 3

我的经验是有许多不同的 csv 格式。特别是他们如何处理字段中引号和分隔符的转义。

这些是我遇到的变种：

• 引号被引用并加倍 (excel) 即 15" -> field1,"15""",field3
• 除非出于其他原因引用了该字段，否则引号不会更改。即 15" -> field1,15",fields3
• 引号用\转义。即 15" -> field1,"15\"",field3
• 引号根本没有改变（这并不总是可以正确解析）
• 分隔符被引用 (excel)。即 a,b -> field1,"a,b",field3
• 使用 \ 转义分隔符。即 a,b -> field1,a\,b,field3

我已经尝试了许多现有的 csv 解析器，但没有一个可以处理我遇到的变体。从文档中也很难找出解析器支持哪些转义变体。

在我的项目中，我现在使用 VB TextFieldParser 或自定义拆分器。

Answer 4

当您不想重新发明轮子时，有时使用库很酷，但在这种情况下，与使用库相比，您可以用更少的代码行和更易于阅读来完成相同的工作。 这是一种我觉得很容易使用的不同方法。

1. 在本例中，我使用 StreamReader 读取文件
2. 正则表达式检测每行的分隔符。
3. 用于收集从索引 0 到 n 的列的数组

---

using (StreamReader reader = new StreamReader(fileName))
    {
        string line; 

        while ((line = reader.ReadLine()) != null)
        {
            //Define pattern
            Regex CSVParser = new Regex(",(?=(?:[^\"]*\"[^\"]*\")*(?![^\"]*\"))");

            //Separating columns to array
            string[] X = CSVParser.Split(line);

            /* Do something with X */
        }
    }

Answer 5

CSV 可以快速真正变得复杂。

使用健壮且经过充分测试的东西：
文件助手： www.filehelpers.net

FileHelpers 是一个免费且易于使用的 .NET 库，用于从文件、字符串或流中的固定长度或分隔记录导入/导出数据。

Answer 6

此列表中的另一个，Cinchoo ETL - 一个用于读写 CSV 文件的开源库

对于下面的示例 CSV 文件

Id, Name
1, Tom
2, Mark

您可以使用以下库快速加载它们

using (var reader = new ChoCSVReader("test.csv").WithFirstLineHeader())
{
   foreach (dynamic item in reader)
   {
      Console.WriteLine(item.Id);
      Console.WriteLine(item.Name);
   }
}

如果您有与 CSV 文件匹配的 POCO 类

public class Employee
{
   public int Id { get; set; }
   public string Name { get; set; }
}

您可以使用它来加载 CSV 文件，如下所示

using (var reader = new ChoCSVReader<Employee>("test.csv").WithFirstLineHeader())
{
   foreach (var item in reader)
   {
      Console.WriteLine(item.Id);
      Console.WriteLine(item.Name);
   }
}

请查看CodeProject的文章了解如何使用它。

免责声明：我是这个库的作者

Answer 7

我在这里用这个：

http://www.codeproject.com/KB/database/GenericParser.aspx

上次我在寻找类似的东西时，我发现它是question的答案。

Answer 8

private static DataTable ConvertCSVtoDataTable(string strFilePath)
        {
            DataTable dt = new DataTable();
            using (StreamReader sr = new StreamReader(strFilePath))
            {
                string[] headers = sr.ReadLine().Split(',');
                foreach (string header in headers)
                {
                    dt.Columns.Add(header);
                }
                while (!sr.EndOfStream)
                {
                    string[] rows = sr.ReadLine().Split(',');
                    DataRow dr = dt.NewRow();
                    for (int i = 0; i < headers.Length; i++)
                    {
                        dr[i] = rows[i];
                    }
                    dt.Rows.Add(dr);
                }

            }

            return dt;
        }

        private static void WriteToDb(DataTable dt)
        {
            string connectionString =
                "Data Source=localhost;" +
                "Initial Catalog=Northwind;" +
                "Integrated Security=SSPI;";

            using (SqlConnection con = new SqlConnection(connectionString))
                {
                    using (SqlCommand cmd = new SqlCommand("spInsertTest", con))
                    {
                        cmd.CommandType = CommandType.StoredProcedure;

                        cmd.Parameters.Add("@policyID", SqlDbType.Int).Value = 12;
                        cmd.Parameters.Add("@statecode", SqlDbType.VarChar).Value = "blagh2";
                        cmd.Parameters.Add("@county", SqlDbType.VarChar).Value = "blagh3";

                        con.Open();
                        cmd.ExecuteNonQuery();
                    }
                }

         }

Answer 9

这是我今天编写的一个解决方案，我需要在不依赖外部库的情况下解析 CSV。我没有测试大文件的性能，因为它与我的特定用例无关，但我希望它在大多数情况下都能表现得相当好。

        static List<List<string>> ParseCsv(string csv) {
            var parsedCsv = new List<List<string>>();
            var row = new List<string>();
            string field = "";
            bool inQuotedField = false;

            for (int i = 0; i < csv.Length; i++) {
                char current = csv[i];
                char next = i == csv.Length - 1 ? ' ' : csv[i + 1];

                // if current character is not a quote or comma or carriage return or newline (or not a quote and currently in an a quoted field), just add the character to the current field text
                if ((current != '"' && current != ',' && current != '\r' && current != '\n') || (current != '"' && inQuotedField)) {
                    field += current;
                } else if (current == ' ' || current == '\t') {
                    continue; // ignore whitespace outside a quoted field
                } else if (current == '"') {
                    if (inQuotedField && next == '"') { // quote is escaping a quote within a quoted field
                        i++; // skip escaping quote
                        field += current;
                    } else if (inQuotedField) { // quote signifies the end of a quoted field
                        row.Add(field);
                        if (next == ',') {
                            i++; // skip the comma separator since we've already found the end of the field
                        }
                        field = "";
                        inQuotedField = false;
                    } else { // quote signifies the beginning of a quoted field
                        inQuotedField = true; 
                    }
                } else if (current == ',') { //
                    row.Add(field);
                    field = "";
                } else if (current == '\n') {
                    row.Add(field);
                    parsedCsv.Add(new List<string>(row));
                    field = "";
                    row.Clear();
                }
            }

            return parsedCsv;
        }

Answer 10

首先需要了解什么是CSV以及如何编写。

1. 每个下一个字符串 (/r/n) 都是下一个“表格”行。
2. “表格”单元格由一些分隔符分隔。最常用的符号是\t 或,
3. 每个单元格都可能包含此分隔符（在这种情况下，单元格必须以引号符号开头并以此符号结尾）
4. 每个单元格都可能包含/r/n 符号（在这种情况下，单元格必须以引号符号开头并以该符号结尾）

C#/Visual Basic 处理 CSV 文件的最简单方法是使用标准 Microsoft.VisualBasic 库。您只需要在您的类中添加所需的引用和以下字符串：

using Microsoft.VisualBasic.FileIO;

是的，你可以在 C# 中使用它，不用担心。该库可以读取相对较大的文件并支持所有需要的规则，因此您将能够处理所有 CSV 文件。

前段时间，我基于这个库写了一个简单的 CSV 读/写类。使用这个简单的类，您将能够像使用二维数组一样使用 CSV。 您可以通过以下链接找到我的课程： https://github.com/ukushu/DataExporter

简单的使用示例：

Csv csv = new Csv("\t");//delimiter symbol

csv.FileOpen("c:\\file1.csv");

var row1Cell6Value = csv.Rows[0][5];

csv.AddRow("asdf","asdffffff","5")

csv.FileSave("c:\\file2.csv");

Answer 11

要完成前面的答案，可能需要从他的 CSV 文件中收集一组对象，通过 TextFieldParser 或 string.Split 方法解析，然后通过反射将每一行转换为一个对象。您显然首先需要定义一个与 CSV 文件的行匹配的类。

我使用了来自 Michael Kropat 的简单 CSV 序列化器，在这里可以找到：Generic class to CSV (all properties) 并重用他的方法来获取希望类的字段和属性。

我使用以下方法反序列化我的 CSV 文件：

public static IEnumerable<T> ReadCsvFileTextFieldParser<T>(string fileFullPath, string delimiter = ";") where T : new()
{
    if (!File.Exists(fileFullPath))
    {
        return null;
    }

    var list = new List<T>();
    var csvFields = GetAllFieldOfClass<T>();
    var fieldDict = new Dictionary<int, MemberInfo>();

    using (TextFieldParser parser = new TextFieldParser(fileFullPath))
    {
        parser.SetDelimiters(delimiter);

        bool headerParsed = false;

        while (!parser.EndOfData)
        {
            //Processing row
            string[] rowFields = parser.ReadFields();
            if (!headerParsed)
            {
                for (int i = 0; i < rowFields.Length; i++)
                {
                    // First row shall be the header!
                    var csvField = csvFields.Where(f => f.Name == rowFields[i]).FirstOrDefault();
                    if (csvField != null)
                    {
                        fieldDict.Add(i, csvField);
                    }
                }
                headerParsed = true;
            }
            else
            {
                T newObj = new T();
                for (int i = 0; i < rowFields.Length; i++)
                {
                    var csvFied = fieldDict[i];
                    var record = rowFields[i];

                    if (csvFied is FieldInfo)
                    {
                        ((FieldInfo)csvFied).SetValue(newObj, record);
                    }
                    else if (csvFied is PropertyInfo)
                    {
                        var pi = (PropertyInfo)csvFied;
                        pi.SetValue(newObj, Convert.ChangeType(record, pi.PropertyType), null);
                    }
                    else
                    {
                        throw new Exception("Unhandled case.");
                    }
                }
                if (newObj != null)
                {
                    list.Add(newObj);
                }
            }
        }
    }
    return list;
}

public static IEnumerable<MemberInfo> GetAllFieldOfClass<T>()
{
    return
        from mi in typeof(T).GetMembers(BindingFlags.Public | BindingFlags.Instance | BindingFlags.Static)
        where new[] { MemberTypes.Field, MemberTypes.Property }.Contains(mi.MemberType)
        let orderAttr = (ColumnOrderAttribute)Attribute.GetCustomAttribute(mi, typeof(ColumnOrderAttribute))
        orderby orderAttr == null ? int.MaxValue : orderAttr.Order, mi.Name
        select mi;            
}

Answer 12

我强烈建议使用 CsvHelper。

这是一个简单的例子：

public class csvExampleClass
{
    public string Id { get; set; }
    public string Firstname { get; set; }
    public string Lastname { get; set; }
}

var items = DeserializeCsvFile<List<csvExampleClass>>( csvText );

public static List<T> DeserializeCsvFile<T>(string text)
{
    CsvReader csv = new CsvReader( new StringReader( text ) );
    csv.Configuration.Delimiter = ",";
    csv.Configuration.HeaderValidated = null;
    csv.Configuration.MissingFieldFound = null;
    return (List<T>)csv.GetRecords<T>();
}

完整文档可在以下位置找到：https://joshclose.github.io/CsvHelper