2020年12月22日
大数据之路:阿里巴巴大数据实践小记
摘要： 1.出于吞吐量以及系统压力上的考虑，并不是新增一条数据记录就采集一次，而是几句下面的原则，按照批次对数据进行采集 数据大小限制：当达到限制条件的时候，把目前采集到的新数据作为一批（例如512kb写一批） 时间阈值限制：当时间达到一定条件的时候，也会把目前采集到的新数据作为一批，避免在数据量少的情况下 阅读全文
posted @ 2020-12-22 13:48 无敌小阿没 阅读(379) 评论(0) 推荐(0) 编辑