2020年11月24日
Hadoop大数据平台之Kafka部署
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：Xshell+Xftp 1. 使用xftp将kafka上传到/usr/local目录下，将kafka解压并重命名。 2. 编辑kafka/config下的server.properties文件。 3. 在文件中配置broker.id。maste 阅读全文
posted @ 2020-11-24 20:35 JetXi 阅读(326) 评论(0) 推荐(0) 编辑
Hadoop大数据平台之Sqoop部署
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：Xshell+Xftp 1. 使用xftp将sqoop和MySQL连接驱动上传到/usr/local目录下，将sqoop解压并重命名。 2. 配置conf下的sqoop-env.sh文件。 3. 复制hive的jar包到sqoop/lib。 4 阅读全文
posted @ 2020-11-24 20:23 JetXi 阅读(157) 评论(0) 推荐(0) 编辑
Hadoop大数据平台之Hive搭建
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：Xshell+Xftp 1. 使用xftp将hive上传到/usr/local目录下，将其解压并重命名。 2. 设置环境变量并source。 3. 改名并编辑hive-env.sh文件。 4. 在hive目录下新建tmp目录，hdfs中新建/u 阅读全文
posted @ 2020-11-24 19:46 JetXi 阅读(343) 评论(0) 推荐(0) 编辑
Hadoop大数据平台之MySQL安装
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：Xshell+Xftp 一、 安装步骤 1. 使用xftp将mysql上传到/usr/local目录下，将其解压并重命名。 2. 创建名为mysql的组和用户。 3. 在mysql下新建data目录和log目录，在log目录下新建日志文件。 4 阅读全文
posted @ 2020-11-24 19:10 JetXi 阅读(593) 评论(0) 推荐(0) 编辑
Hadoop大数据平台之HBase部署
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：Xshell+Xftp 1. 使用xftp将hbase上传到/usr/local目录下，将其解压并重命名。 2. 配置conf目录下的hbase-env.sh文件。 3. 此处去掉注释，true改false。 4. 此处去掉注释，将路径改为jd 阅读全文
posted @ 2020-11-24 18:55 JetXi 阅读(308) 评论(0) 推荐(0) 编辑
Hadoop大数据平台之Zookeeper搭建
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：Xshell+Xftp 1. 使用xftp将hadoop上传到/usr/local目录下，将其解压并重命名。 2. 修改环境变量并source。 3. 在zookeeper目录下创建data目录。 4. 修改zoo_sample.cfg配置文件 阅读全文
posted @ 2020-11-24 18:28 JetXi 阅读(222) 评论(0) 推荐(0) 编辑
Hadoop大数据平台之节点动态增删
摘要： 环境：CentOS 7.4 （1708 DVD） 工具：MobaXterm 一、 节点的动态增加 1. 为新增加的节点（主机）配置免密码登录。使用ssh-keygen和ssh-copy-id命令（详见前面的操作）。 2. 编辑所有主机的/etc/hosts文件，将新主机的域名添加到映射。 3. 关闭 阅读全文
posted @ 2020-11-24 17:05 JetXi 阅读(248) 评论(0) 推荐(0) 编辑