随笔分类 -  CDH集群

CDH 数据重平衡
该文被密码保护。
posted @ 2021-09-10 15:11 小白啊小白，Fighting 阅读(0) 评论(0) 推荐(0) 编辑
CDH 提交任务(Flink)
摘要：参考博客：https://blog.csdn.net/mp9105/article/details/116984220 1、指定队列运行 ../../bin/flink run -t yarn-per-job --detached -Dyarn.application.queue=root.flin 阅读全文
posted @ 2021-09-03 18:17 小白啊小白，Fighting 阅读(541) 评论(0) 推荐(0) 编辑
CDH执行spark任务
摘要：1、cdh执行spark任务(直接在yarn执行) spark2-submit \ --master yarn \ --num-executors 1 \ --executor-cores 1 \ --executor-memory 1G \ --class org.apache.spark.exa 阅读全文
posted @ 2020-11-12 18:01 小白啊小白，Fighting 阅读(1323) 评论(0) 推荐(0) 编辑
CDH日志目录以及重新安装需要删除的目录
摘要：1、Server日志路径 cd /opt/module/cm/cm-5.12.1/log/cloudera-scm-server/ 2、agent日志路径 cd /opt/module/cm/cm-5.12.1/log/cloudera-scm-agent/ 3、其他日志目录 /var/log/ha 阅读全文
posted @ 2020-11-12 11:37 小白啊小白，Fighting 阅读(975) 评论(0) 推荐(0) 编辑
CDH5.12安装遇到的坑
摘要：环境：centos7+cdh5.12 问题描述： 在搭建过的CDH机器上重新搭建CDH集群，没有删除数据。导致新搭建的CDH，这两台DATANode启动不了..... 特殊情况： 本人以前在这两台机器上搭建过CDH，所以存在版本问题 1、找到你以前搭建的datanode数据目录，/dfs/dn/cu 阅读全文
posted @ 2020-11-12 11:21 小白啊小白，Fighting 阅读(320) 评论(0) 推荐(0) 编辑
CDH5.12.1添加Phoenix4.14
摘要：环境：habse: 1.2.0-cdh5.12.1 1、配置存储库：主机-->Parcel -->配置。在 远程 Parcel 存储库 URL下面添加 http://archive.apache.org/dist/phoenix/apache-phoenix-4.14.0-cdh5.12.2/par 阅读全文
posted @ 2020-11-03 11:10 小白啊小白，Fighting 阅读(126) 评论(0) 推荐(0) 编辑
CDH5.12.1利用Sqoop将mysql数据导入hive
摘要：环境: CDH5.12.1 、 centos7 数据库类型 1、权限问题 dfs.permissions 设置为false(可以在配置界面勾选掉) 2、关闭安全模式，允许读写 hdfs dfsadmin -safemode leave 3、创建hive表 drop table if exists d 阅读全文
posted @ 2020-10-23 18:08 小白啊小白，Fighting 阅读(488) 评论(0) 推荐(0) 编辑
CDH5.12.1将Spark1.6升级到Spark2.2
摘要：环境 : CDH5.12.1 1、参考博客 软件包下载: https://www.cnblogs.com/shengyang17/p/12750518.html 安装步骤: https://blog.csdn.net/lzxlfly/article/details/83216494 2、软件包下载( 阅读全文
posted @ 2020-10-22 18:13 小白啊小白，Fighting 阅读(331) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示