计算并显示文件中一行重复的次数

Question

我在 bash 中看到过解决方案（即问题 6712437），但我没有找到任何适用于 python 的解决方案。

我正在尝试搜索文件，找到重复的行并输出重复的次数。

输入

foo
bar
foo
foo
bar
foobar

输出

foo     3
bar     2
foobar  1

Answer 1

这是我的解决方案：

lines = [] #List of line items
itemcounts = {}  #dictionary of items with counts
with open('myfile.txt') as f: 
    for item in f:
        lines.append(item)
for i in lines:
    c = lines.count(i) 
    itemcounts.update({i:c})
#print items and counts
for i in itemcounts: 
    print i, itemcounts[i]

Answer 2

最简单的解决方案是使用collections.Counter。但是，如果您不想包含额外的库，那么

d={}
with open('test.txt') as f:
    for i in f:
        d[i]=d.get(i,0)+1

    sorted_items = sorted(d.items(),key=lambda (k,v): (v,k),reverse=True)
    #iterate to save or play around with tuple values

Answer 3

collections.Counter 似乎是个不错的选择。

要计算文件中每一行的出现次数，您可以尝试：

import collections

with open('myfile.txt') as f:
    c = collections.Counter(f.readlines())

然后，为了获得良好的输出（就像您在对此答案的评论中要求的那样），您可以使用：

# sorted by value (number of occurences, but descending order)
for k, v in c.most_common():
    print(k, v)

# sorted by value (number of occurences, ascending order)
for k, v in sorted(c.items(), key=lambda x: x[1]):
    print(k, v)

# sorted by key (line of the file)
for k, v in sorted(c.items(), key=lambda x: x[0]):
    print(k, v)