这次去测试一下 python 的set去重,速度怎么样?

我们要做的是把文件一次性读取到内存中,然后去重,输出去重的长度。

第一步:对 121w 条数据去重,看去重话费的时间

  上证据:

      

第二步:对 1210 w 条数据去重,看去重话费的时间

      

第三步:对 1.21 亿 条数据去重,看去重话费的时间

      

   

最新文章

  1. C++设计模式-TemplateMethod模板方法模式
  2. coursera机器学习-聚类,降维,主成分分析
  3. 提高AdoQuery的速度
  4. 修改input的type属性
  5. 1秒30000QPS,前后端设计思路
  6. javascript与服务器3
  7. python 爬虫
  8. Java Sudoku游戏
  9. EF中使用SQL语句或存储过程
  10. [转]VC的DDK编译环境构建
  11. Oracle Pivot学习心得
  12. alv行可编辑时带出描述
  13. AFHTTPSessionManager
  14. WCF 内置跟踪日志
  15. Problem F: 合唱比赛开始了!
  16. lua 限流
  17. Servlet--Servlet接口
  18. WordCount(java)
  19. Tips and Tricks for Debugging in chrome
  20. SpringMVC(二七) 自定义视图

热门文章

  1. 微信小程序的模板消息与小程序订阅消息
  2. [LeetCode] 847. Shortest Path Visiting All Nodes 访问所有结点的最短路径
  3. [LeetCode] 375. Guess Number Higher or Lower II 猜数字大小之二
  4. [LeetCode] 104. Maximum Depth of Binary Tree 二叉树的最大深度
  5. oracle--错误笔记(二)--ORA-16014
  6. Python 爬取 13 个旅游城市,告诉你五一大家最爱去哪玩?
  7. 携程 Apollo分布式部署
  8. C# vb .NET读取识别条形码线性条码UPC-A
  9. json解析常见异常
  10. Python多任务—进程