用熊猫读取文件，然后使用for循环

Question

---

我正在尝试读取包含数十万行的大型文本文件，以使其运行更快带有熊猫文件的循环。 Lmk 如果有一个程序这样做是合乎逻辑的，以试图缩短运行时间。谢谢..

df1 = pd.read_csv('FILENAME1',sep=',',error_bad_lines=False)
df2 = pd.read_csv('FILENAME2',sep=',',error_bad_lines=False)
for index, row in df1.iterrows():
    for index2, row2 in df2.iterrows():
        if index[1]==row2[2] and index[0]==row2[1]:
            print "this info matches"

Answer 1

在我看来，如果运行时很重要并且您只需要进行代码中显示的计算，请不要使用 pandas。 Pandas 将花费额外的周期来设置自己、进行数据清理等。