写入和读取csv文件python

Question

我有一个 text 文件，其中包含非英文字母的单词，我想打开它，进行一些预处理，最后将其保存为 .csv 文件，并在其他地方使用它。

读取和存储文件的代码：

with open('file.txt', encoding="utf-8") as f:
    train = f.read().splitlines() 

然后创建一个数据框，以及存储它的代码：

df.to_csv('file.csv', index=True, encoding="utf-8")

util 现在一切似乎都很好，但是当我尝试使用此代码打开 file.csv 时：

train = pd.read_csv('file.csv', encoding="utf-8")

我面对这个：

进程以退出代码 -1073740940 (0xC0000374) 结束

无需进入下一行。

另外，当我尝试使用 ISO-8859-1 编码打开它时，没关系；但是当我尝试打印 .csv 的头部时，它只会打印一些问号（'?'）

有人知道怎么回事吗？

Answer 1

在 CSV 文件中写波斯语让我发疯了。最后这个对我有用：

data.to_csv (r'hi.csv', encoding='utf-8-sig')

Answer 2

我尝试用这段代码重现它：

import pandas as pd

with open('persian.txt', encoding="utf-8") as f:
    train = f.read().splitlines() 
    df = pd.DataFrame({'text': train})
    df.to_csv('file.csv', index=True, encoding="utf-8")
    train = pd.read_csv('file.csv', encoding="utf-8")

带有一个包含两行示例波斯文本的 txt 文件。它在 Python 3 中运行没有任何问题，生成了这个 csv：

    text
0   همهٔ افراد بشر آزاد به دنیا می‌آیند و حیثیت و حقوق شان با هم برابر است
1   همه اندیشه و وجدان دارند و باید در برابر یکدیگر با روح برادری رفتار کنند. 

您能否提供有关文本属性和您在数据帧处理中执行的操作的更多详细信息，或者确定读取中断的行？您可能会在途中产生一些无效字符。