07 2021 档案
摘要:CDH Cloudera Manager 进程服务名称 systemctl status cloudera-scm-server systemctl start cloudera-scm-agent 格式化namenode cm 前端界面显示 ;namenode 因为 Service Monitor
阅读全文
摘要:首先:执行ntpstat,实时命令查看状态,结果发现所有服务器的状态都是未同步状态“unsynchronised”: 然后,重启ntp服务、手动时间同步、再重启服务(全部机器执行): systemctl stop ntpd sudo ntpd -gq systemctl start ntpd 最后,
阅读全文
摘要:长久以来,在YARN集群中部署Flink作业有两种模式,即Session Mode和Per-Job Mode,而在Flink 1.11版本中,又引入了第三种全新的模式:Application Mode。本文先回顾两种传统模式的做法与存在的问题,再简要介绍Application Mode。 传统部署模
阅读全文
摘要:数据集广播,主要分为广播变量,广播维表(数据集)两种,一种为变量,一种为常量(抽象的说法); 一.数据广播背景 对于小变量,小数据集,需要和大数据集,大流进行联合计算的时候,往往把小数据集广播出去,整体直接和大数据集(流)的分布式最小粒度数据进行计算,最后把计算结果合并,这样效率更高,省去分布式节点
阅读全文
摘要:du -h --max-depth=1 work/testing
阅读全文
CDH CM修改配置文件Data truncation: Incorrect string value: ‘\xE5\xB7\xB2\xE6\x9B\xB4...‘ for column ‘MESSA
摘要: Data truncation: Incorrect string value: '\xE5\xB7\xB2\xE6\x9B\xB4...' for column 'MESSAGE' at row 1 cloudera server 端日志: Caused by: java.sql.Batc
阅读全文