摘要: 【上传的前提条件是启动集群的高可用、启动mysql、启动Hive】 1、在hive中建表(尽量与mysql字段对应) 2、将mysql中的表导出 txt格式 3、将导出的文件先放到虚拟机上,然后从虚拟机上再上传到HDFS上 3.1 将文件放到虚拟机上 3.2 将文件从虚拟机上再上传到HDFS 查看是 阅读全文
posted @ 2021-01-12 15:01 大数据程序员 阅读(297) 评论(0) 推荐(0) 编辑
摘要: 1.类型映射关系 mysql和hive中的数据类型存在差异,在mysql集成数据到hive中这样的场景下,我们希望在hive中的数据是贴源的,所以在hive中希望创建和mysql结构一致的表。 mysql到hive数据类型映射参考如下: 2.问题注意 1.问题: 用公司的大数据平台(DataX)导数 阅读全文
posted @ 2021-01-12 10:18 大数据程序员 阅读(4345) 评论(0) 推荐(0) 编辑