2022年8月4日
sqoop将数据的导入和导出
摘要： 1. 在mysql中创建表 2. 导入hdfs中 # 将表student导入hdfs中 sqoop import --connect jdbc:mysql://node1:3306/shixun?serverTimezone=UTC --username root --password Jsq123 阅读全文
posted @ 2022-08-04 22:40 jsqup 阅读(171) 评论(0) 推荐(0) 编辑
sqoop初配置
摘要： 配置环境 1. 将jar包上传至/opt/software目录下 2. 解压 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/app/ 3. 改名字 mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop-1.4. 阅读全文
posted @ 2022-08-04 16:54 jsqup 阅读(17) 评论(0) 推荐(0) 编辑
udtf一进多出案例2
摘要： pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance 阅读全文
posted @ 2022-08-04 16:12 jsqup 阅读(23) 评论(0) 推荐(0) 编辑
自定义udtf函数（一进多出）
摘要： 案例要求 java编写 package udtf; import org.apache.hadoop.hive.ql.exec.UDFArgumentException; import org.apache.hadoop.hive.ql.metadata.HiveException; import 阅读全文
posted @ 2022-08-04 13:20 jsqup 阅读(152) 评论(0) 推荐(0) 编辑
自定义udf函数（一进一出）
摘要： 1. 添加maven依赖 一、pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XML 阅读全文
posted @ 2022-08-04 11:04 jsqup 阅读(129) 评论(0) 推荐(0) 编辑