如何更有效地计算python列表成员[重复]

Question

我创建了一个包含 320571 个条目的垃圾邮件中使用的单词列表。现在我需要找出每个单词的频率。我已经编写了以下代码，但是它花费了太多时间（非常非常非常多）。

%%time
flat_ui=[]
for i in range(len(biggie_spam)):
    temp=biggie_spam.count(biggie_spam[i])
    flat_ui.append(temp)

如何才能更有效地做到这一点？

Answer 1

您可以使用 ma​​p-reduce 方法实施解决方案。 Here 你有一个简单的使用 Python 中的 map-reduce 算法的字数统计算法示例。

您可以找到大量信息，但this tutorial 可能是一个起点。