随笔分类 -  BigData

大数据
Apache Hive 3.1.3 单机部署
摘要：环境需求 安装JDK1.8 根据需要选择openjdk、Oracle JDK 安装MySQL8.0.25 见博客 https://www.cnblogs.com/happy-king/p/16408631.html 安装apache-hive3.1.3 目录规划 hive的数据目录：/app/dat 阅读全文
posted @ 2022-06-24 18:55 思维无界限 阅读(580) 评论(0) 推荐(0) 编辑
Apache DolphinScheduler2.0.5集群部署
摘要：DolphinScheduler测试环境说明 | 角色 | 主机名 | 备注 | | | | | | masters | hadoop01,hadoop02 | | | workers | hadoop01,hadoop02,hadoop03,hadoop04,hadoop05 | | | aler 阅读全文
posted @ 2022-06-24 18:52 思维无界限 阅读(477) 评论(0) 推荐(0) 编辑
大数据运维的职责和技能要求
摘要：一、大数据运维的职责 一）大数据运维的职责概述 1、集群管理 大数据需要分布式系统（集群） 相关软软件CDH、HDFS、YARN、Hive、Hbase、Kafka、zookeeper、Spark、Flume、Impala、Hue、Sqoop、Elasticsearch、kibana、MySQL、Or 阅读全文
posted @ 2018-11-19 13:51 思维无界限 阅读(3504) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示