使用 python set 去重 速度到底是多快呢？？？

这次去测试一下 python 的set去重，速度怎么样？

我们要做的是把文件一次性读取到内存中，然后去重，输出去重的长度。

第一步：对 121w 条数据去重，看去重话费的时间

　　上证据：

　　　　　　

 

 第二步：对 1210 w 条数据去重，看去重话费的时间

　　　　　　

 

  第三步：对 1.21 亿 条数据去重，看去重话费的时间