2014年12月10日
大批量数据读写
摘要： ###需求大约200W条数据，批量从mysql中读取，然后根据主键再从hbase读数据进行关联，最后再update到数据库中###同步解决方案同步解决方案，也是最接近人脑思考顺序的方案是，分页mysql读取id集合，每页1k条数据，然后拿着idList批量从nosql的hbase中进行数据的获取，进... 阅读全文
posted @ 2014-12-10 11:23 qiushizhu 阅读(4026) 评论(8) 推荐(6) 编辑