偶用python+txt处理过1.7亿条数据，压力不算特别大，可以接受。
有几点要注意：
1、不要用python写循环，1.7亿的循环跑到你电脑没电。
2、多用pandas和numpy，用他们自带的查找方法。
3、如果内存不够，pandas.readcsv时要用 iterator，当然这时分线程意义也不大了，因为你的瓶颈是IO。
首页 >
Python在数亿级数据集中查找某个元素是否存在解决方案 – python – 前端，conda python2.7
python开发的网站，pydes python，怎么停止python脚本，python业务实例，数据资产地图python，python处，python createdataset，python单列模式，python print乘积，python opencv 通道，conda python2.7
Pythontkinter中 - python - 前端，python加密ftp | Pythontkinter中 - python - 前端，python加密ftp ...
为什么爬虫犯法 - python - 前端，python 修饰符 | 为什么爬虫犯法 - python - 前端，python 修饰符 ...
据说Excel做一周的表Python一天就能搞定是真的吗 - python - 前端，逻辑回归python | 据说Excel做一周的表Python一天就能搞定是真的吗 - python - 前端，逻辑回归python ...