摘要: 未被external修饰的是内部表(managed table),被external修饰的为外部表(external table);区别:内部表数据由Hive自身管理,外部表数据由HDFS管理;内部表数据存储的位置是hive.metastore.warehouse.dir(默认:/user/hive 阅读全文
posted @ 2018-12-24 17:18 奋斗的一线码农 阅读(3310) 评论(0) 推荐(0) 编辑
摘要: canal是阿里巴巴旗下的一款开源项目,纯Java开发。基于数据库增量日志解析,提供增量数据订阅&消费,目前主要支持了MySQL(也支持mariaDB)。 起源:早期,阿里巴巴B2B公司因为存在杭州和美国双机房部署,存在跨机房同步的业务需求。不过早期的数据库同步业务,主要是基于trigger的方式获 阅读全文
posted @ 2018-12-24 11:19 奋斗的一线码农 阅读(2325) 评论(0) 推荐(0) 编辑