EmptyDataError：在字典中加载多个文件时，没有要从文件中解析的列

Question

我有 1000 个 csv 文件，我使用以下代码（将每个文件放入字典）调用它们：

dataframes = {}
csv_root = Path(".")
for csv_path in csv_root.glob("*.csv"):
key = csv_path.stem
dataframes[key] = pd.read_csv(csv_path, skiprows=1)

但是当我使用这个代码时，我得到了这个错误

EmptyDataError: No columns to parse from file

表示有空数据或遇到header。

我想知道如何识别这 1000 个 csv 文件中的哪些是导致问题的文件？因为，正如您所理解的，逐个文件检查会消耗大量时间。

非常感谢！

Answer 1

我只会使用 try/catch，就像这样：

dataframes = {}
csv_root = Path(".")
for csv_path in csv_root.glob("*.csv"):
    key = csv_path.stem
    try:
        dataframes[key] = pd.read_csv(csv_path, skiprows=1)
    except Exception, as e:
        dataframes[key] = 'error' # mark the errored

这最后一步将为您解决问题：

errored_stems = [k for k,v in dataframes.iteritems() if k == 'error']