cdh6.2.1集成streamsets3.20
1、下载地址
StreamSets官网提供的下载址:https://archives.streamsets.com/index.html
2、安装包文件
3、配置本地parcel包
将下载的manifest.json和 STREAMSETS_DATACOLLECTOR-3.20.0-el7.parcel和STREAMSETS_DATACOLLECTOR-3.20.0-el7.parcel.sha,放在一个新建文件夹streamsets中,
并移动到/var/www/html 目录中,做离线包的下载地址,用浏览器访问如下,表示成功
4、配置csd
将STREAMSETS-3.20.0.jar拷贝到/opt/cloudera/csd,并更改权限,然后重启cloudera-scm-server服务
# sudo chown cloudera-scm:cloudera-scm STREAMSETS-3.20.0.jar && sudo chmod 644 STREAMSETS-3.20.0.jar # systemctl restart cloudera-scm-server
4、修改httpd配置文件
vim /etc/httpd/conf/httpd.conf
重启httpd命令
systemctl restart httpd.service
5、分发激活parcel包
在CM界面中点击Parcel > 配置 > 添加StreamSets的Parcel包路径,并保持修改
并下载分发和激活
6、添加streamsets服务
完成上述步骤后,在集群 > 添加服务 中添加StreamSets 的服务
选择StreamSets安装
StreamSets基本使用手册,官方网址:https://streamsets.com/documentation/datacollector/3.0.0.0/help/index.html#Tutorial/BasicTutorial.html#task_jmz_3dn_ls
访问地址:http://node01.hadoop.com:18630
用户名:admin 密码:admin
原文链接:
https://mp.weixin.qq.com/s?__biz=MzI4OTY3MTUyNg==&mid=2247488566&idx=1&sn=8c4350eb654453b2317de2b347b6e525&chksm=ec2ac43fdb5d4d2964e2b074d02faaeebe202c2ba3565ac00f589b696644bdbfa8f6f4d9754e&scene=21#wechat_redirect