摘要: 第一步:下载安装包 https://mirrors.bfsu.edu.cn/apache/sqoop/1.4.7 第二步:上传并解压 将我们下载好的安装包上传到hadoop03服务器的/bigdata/soft路径下,然后进行解压 cd /bigdata/soft/ tar -xzvf sqoop- 阅读全文
posted @ 2021-06-17 23:27 Tenic 阅读(89) 评论(0) 推荐(0) 编辑
摘要: 1. 概述 Sqoop是apache旗下的一款 ”Hadoop和关系数据库之间传输数据”的工具 导入数据:将MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统 导出数据:从Hadoop的文件系统中导出数据到关系数据库 2. Sqoop的工作机制 将导入和导出 阅读全文
posted @ 2021-06-17 23:17 Tenic 阅读(197) 评论(0) 推荐(0) 编辑
摘要: 官方安装指导:https://dolphinscheduler.apache.org/zh-cn/docs/1.3.4/user_doc/quick-start.html 1节点规划 机器 服务 端口 group hadoop01 master、api、logger 8787(master)、888 阅读全文
posted @ 2021-06-17 22:29 Tenic 阅读(3330) 评论(1) 推荐(0) 编辑
摘要: 1、DolphinScheduler简介 Apache DolphinScheduler](https://dolphinscheduler.apache.org/)(目前处在孵化阶段)是一个分布式、去中心化、易扩展的可视化DAG工作流任务调度系统, 其致力于解决数据处理流程中错综复杂的依赖关系,使 阅读全文
posted @ 2021-06-17 21:41 Tenic 阅读(1226) 评论(0) 推荐(0) 编辑