摘要： 这其实是个小功能，但是我觉得非常有意思。因为这个业务不但总体数据量大，单个数据体也是超大个的。业务场景是这样的：我们需要把数据库的视频和专辑数据给搜索那边。搜索那边规定好了数据的格式和传输方式。全量数据用文件的方式放到hadoop节点上，增量数据用消息队列发送。 原计划是每周发送一次全量，增量数据是 阅读全文