2016年9月1日
使用并发来提高数据抓取的效率
摘要： 在做项目的时候，有一个增强是需要把两个列从一个表迁移到另一个表，在做正式的迁移之前需要对原始数据进行备份，备份的实现也比较简单，就是把数据从数据库中读出来然后写到CSV文件中，主键以及列与列之间用分号分隔。我count了一下，总共是有559行数据，数据量其实挺小，之前的实现并没有使用多线程并发取数据 阅读全文
posted @ 2016-09-01 12:03 StoneFeng 阅读(379) 评论(0) 推荐(0) 编辑