2019年12月21日
大数据之路week07--day06 （Sqoop 在从HDFS中导出到关系型数据库时的一些问题）
摘要： 问题一： 在上传过程中遇到这种问题： ERROR tool.ExportTool: Encountered IOException running export job: java.io.IOException: No columns to generate for ClassWriter 解决方式 阅读全文
posted @ 2019-12-21 21:50 Xiaohu_BigData 阅读(729) 评论(0) 推荐(0) 编辑
大数据之路week07--day06 （Sqoop 的使用）
摘要： Sqoop的使用一（将数据库中的表数据上传到HDFS） 首先我们先准备数据 1、没有主键的数据（下面介绍有主键和没有主键的使用区别） -- MySQL dump 10.13 Distrib 5.1.73, for redhat-linux-gnu (x86_64) -- -- Host: local 阅读全文
posted @ 2019-12-21 21:35 Xiaohu_BigData 阅读(476) 评论(0) 推荐(0) 编辑
大数据之路week07--day06 （Sqoop 的安装及配置）
摘要： Sqoop 的安装配置比较简单。 提供安装需要的安装包和连接mysql的驱动的百度云链接： 链接：https://pan.baidu.com/s/1pdFj0u2lZVFasgoSyhz-yQ 提取码：62vt 1、下载后将两个都拖到自己安装Hive的节点上去，因为我们后面配置文件中会去配置这些，在 阅读全文
posted @ 2019-12-21 21:18 Xiaohu_BigData 阅读(260) 评论(0) 推荐(0) 编辑
大数据之路week07--day06 （Sqoop 将关系数据库（oracle、mysql、postgresql等）数据与hadoop数据进行转换的工具）
摘要： 为了方便后面的学习，在学习Hive的过程中先学习一个工具，那就是Sqoop，你会往后机会发现sqoop是我们在学习大数据框架的最简单的框架了。 Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等） 阅读全文
posted @ 2019-12-21 21:05 Xiaohu_BigData 阅读(481) 评论(0) 推荐(0) 编辑