Python - 使用枚举循环多个列表以获取相同的索引

Question

    list1 = Csvfile1._getRow(' field1')
    list2 = Csvfile2._getRow(' field1')

    _list1 = Csvfile1._getRow(' field2')
    _list2 = Csvfile2._getRow(' field2')


    for i,(a,b) in enumerate(zip(list2, list1)):

        value = False
        if field == ' field1':
            for j,(c,d) in enumerate(zip(_list2, _list1)):
                if i == j:
                    if a != b and c != d:
                        value = True
                    else:
                        value = False
                    break
        if value == True:
            continue

        if a != b
            # do something    

以下是示例： 比较两个 csv 文件中的值。当 field1 的值 在两个 csv 文件中不相等，条件 if a != b: 应该被执行。

当两个 csv 文件中 field1 的值不相等时，同时如果 field2 的值也不相等 -> 则不应执行条件 if a != b:。

对于庞大的数据，这似乎行不通。还是有更好的方法来实现这一点？

Csvfile1

字段1 |字段2

222 | 4 -> 输入 if a != b: 条件循环

435 | 5 -> 如果 a != b: 条件循环则不要输入

Csvfile2

字段1 |字段2

223 | 4

436 | 6

Answer 1

如果我做对了你想做的事，试试这样的：

$ cat t1.txt
field1|field2
222|4
435|5

$ cat t2.txt
field1|field2
223|4
436|6

$ python
import csv
with open("t1.txt", "rb") as csvfile:
  with open("t2.txt", "rb") as csvfile2:
    reader = csv.reader(csvfile, delimiter='|')
    reader2 = csv.reader(csvfile2, delimiter='|')
    for row1, row2 in zip(reader, reader2):
      for elem1, elem2 in zip(row1, row2):
        if elem1 != elem2:
          print "different: {} and {}".format(elem1, elem2)
different: 222 and 223
different: 435 and 436
different: 5 and 6

Answer 2

#first field(ff) second field(sf) first file(ff) second file(sf)
field1csv1 = Csvfile1._getRow(' field1')
field1csv2 = Csvfile2._getRow(' field1')

field2csv1 = Csvfile1._getRow(' field2')
field2csv2 = Csvfile2._getRow(' field2')

每当您拥有大量数据列表时，您都应该考虑使用生成器而不是列表推导式。 itertools.izip 是 zip 的生成器版本。

插入它应该会给您带来相当大的改进，因为不会生成临时列表：

from itertools import izip
for i, (a, b) in enumerate(izip(list2, list1)):

        value = False
        if field == ' field1':
            for j, (c, d) in enumerate(izip(_list2, _list1)):
                if i == j:
                    if a != b and c != d:
                        value = True
                    else:
                        value = False
                    break
        if value == True:
            continue

        if a != b
            # do something  

这是一个示例，说明如何重构代码以摆脱 python 中的迭代并将迭代降到 C 级别：

#orig
for i, (a, b) in enumerate(zip(list2, list1)):
    value = False
    if field == ' field1':
        for j, (c, d) in enumerate(zip(_list2, _list1)):
            if i == j:
                if a != b and c != d:
                    value = True
                else:
                    value = False
                break

使用生成器：

from itertools import izip
mygen = izip(izip(list2,list1),izip(_list2,_list1))
#[((a, b), (c, d)), ((x, y), (_x, _y)), ...]
values = [tuple1[0]!=tuple1[1] and tuple1[2]!=tuple2[1] for tuple1, tuple2 in mygen]

您也可以使用“平等”生成器：

field1 = izip(field1csv1, field1csv2)
field2 = izip(field2csv1, field2csv2)

field1equal = (f[0] == f[1] for f in field1)
field2equal = (f[0] == f[1] for f in field2)

我走了这么远，然后放弃了。我不知道你在做什么。