打开mr管理页面 重点在红框处，2.3g的虚拟内存实际值，超过了2.1g的上限。也就是说虚拟内存超限，所以contrainer被干掉了，活都是在容器干的，容器被干掉了 解决方案 yarn-site.xml 增加配置： 2个配置2选一即可 <!--以下为解决spark-shell 以yarn clie Read More
cut cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。 1.基本用法 cut [选项参数] filename 说明：默认分隔符是制表符 2.选项参数说明 -f 列号，提取第几列 -d 分隔符，按照指定分隔符分 Read More
vim /etc/resolv.conf # No nameservers found; try putting DNS servers into your # ifcfg files in /etc/sysconfig/network-scripts like so: # # DNS1=xxx.x Read More
https://blog.csdn.net/qq_39767453/article/details/81539782 Read More
systemd有系统和用户区分；系统（/user/lib/systemd/system/）、用户（/etc/lib/systemd/system/）. 一般系统管理员手工创建的单元文件建议存放在/etc/systemd/system/目录下面。 进入/etc/systemd/system目录 创建z Read More
1. zookeeper 的一致性，为了防止单机挂掉，zookeeper维护了一个集群，实现自身的高可用 1.1 Zookeeper 集群是一主多从结构 1.2 在更新数据时，首先更新到主节点（这里的节点时指服务器，不是Znode），再同步到从节点。 1.3 再读取数据时，直接读取任意从节点 1.4 Read More
1.关闭防火墙 查看防火墙状态 firewall-cmd --state 关闭防火墙 systemctl stop firewalld.service 开机禁用sysemctl disable firewalld.service 2.下载zookeeper3.4.6 http://archive.a Read More
1.在线安装 进入es容器：docker exec -it 93f4910a42d7 bash 在线下载并安装ik: ./bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/relea Read More
启动es报错 解决： 修改/etc/sysctl.conf文件，增加配置vm.max_map_count=262144 执行命令sysctl -p生效 Read More
这里的mysql使用docker安装的，mysql的容器id为：c8f60af87695 第一步编写开启mysql容器的shell脚本：start.sh #!/bin/bash #启动mysql容器，mysql容器id为：c8f60af87695 docker start c8f60af87695 Read More