2019年5月30日
美团DB数据同步到数据仓库的架构与实践
摘要： 整体架构图 在Binlog实时采集方面，我们采用了阿里巴巴的开源项目Canal，负责从MySQL实时拉取Binlog并完成适当解析。Binlog采集后会暂存到Kafka上供下游消费。整体实时采集部分如图中红色箭头所示。 离线处理Binlog的部分，如图中黑色箭头所示，通过下面的步骤在Hive上还原一 阅读全文
posted @ 2019-05-30 21:38 小张在搬砖 阅读(499) 评论(0) 推荐(0) 编辑