如何在 Python 中将多个文本文件合并为一个 csv 文件

Question

我正在尝试将 200 个文本文件转换为 csv 文件。我正在使用下面的代码，我可以运行它，但它不会生成 csv 文件。谁能告诉任何简单快捷的方法？非常感谢

dirpath = 'C:\Files\Code\Analysis\Input\qobs_RR1\\'
output = 'C:\Files\Code\Analysis\output\qobs_CSV.csv'
csvout = pd.DataFrame()
files = os.listdir(dirpath)

for filename in files:
    data = pd.read_csv(filename, sep=':', index_col=0, header=None)
    csvout = csvout.append(data)

csvout.to_csv(output)

Answer 1

问题是您的os.listdir 为您提供了dirpath 内的文件名列表，而不是这些文件的完整路径。您可以通过使用 os.path.join 函数将 dirpath 添加到文件名来获取完整路径。

import os
import pandas as pd

dirpath = 'C:\Files\Code\Analysis\Input\qobs_RR1\\'
output = 'C:\Files\Code\Analysis\output\qobs_CSV.csv'
csvout_lst = []
files = [os.path.join(dirpath, fname) for fname in os.listdir(dirpath)]

for filename in sorted(files):
    data = pd.read_csv(filename, sep=':', index_col=0, header=None)
    csvout_lst.append(data)

pd.concat(csvout_lst).to_csv(output)

编辑：这可以通过单行来完成：

pd.concat(
    pd.read_csv(os.path.join(dirpath, fname), sep=':', index_col=0, header=None)
    for fname in sorted(os.listdir(dirpath))
).to_csv(output)

编辑 2： 更新了答案，因此文件列表按字母顺序排序。