linux定位问题命令
摘要：truncate truncate命令可以将一个文件缩小或者扩展到某个给定的大小 可以利用该命令和-s选项来特别指定文件的大小 grep -A 10 parttern fileName 查看符合条件的后10行 grep -B 10 parttern fileName 查看符合条件的前10行 grep
阅读全文
posted @
2019-11-25 15:08
哼着歌啦啦啦
阅读(321)
推荐(0) 编辑
mysql基本操作
摘要：命令行连接Mysql数据库：mysql -u用户名 -p密码 -h 主机ip -P 连接端口 -D数据库实例名 查看数据库实例列表：show databases; 进入数据库实例：use 实例名; 查看数据库中表：show tables;
阅读全文
posted @
2019-11-25 15:02
哼着歌啦啦啦
阅读(94)
推荐(0) 编辑
linux 网络操作相关命令
摘要：ifconfig 查看网络配置信息，eth0 是wlan端口，lo是本地回环测试端口，tun0是vpn虚拟通道 sar –n DEV 3 100 获取所有网卡流量状况，3s获取一次，获取100次 mii-tools 获取进程占用端口号 netstat -nltp | grep 进程号 tcpdump
阅读全文
posted @
2019-11-25 15:00
哼着歌啦啦啦
阅读(130)
推荐(0) 编辑
git 常用操作
摘要：Git常用操作 客户端下载 git windows版下载镜像：https://npm.taobao.org/mirrors/git-for-windows/ 常用命令 git branch 查看本地分支列表 git branch -r 查看远程分支 git stash 将工作空间临时保存 git s
阅读全文
posted @
2019-11-25 10:28
哼着歌啦啦啦
阅读(125)
推荐(0) 编辑
zookeeper write ahead log 导致集群节点断连
摘要：发现spark实时任务延迟。 看了spark监控页面，处理延迟了30s+ 进入该批次任务查看延迟详情，初步确定是访问hbase导致延迟。 先登上cloudera界面查看hbase监控:告警折线图显示在延迟的时间点发生过事件，但是没有详细信息，能够看刷新队列稍大，但是不明显，需要登上regionSer
阅读全文
posted @
2019-11-21 17:40
哼着歌啦啦啦
阅读(1476)
推荐(0) 编辑
spark历史任务日志占满hdfs
摘要：发现cloudera上yarn nodeManager告警，提示 进入NodeManager列表，发现一个节点存在告警 猜测可能是日志写入失败，可能是磁盘不够，进入集群节点列表，查看这个NodeManager所在节点状态，发现磁盘将要被占满，因为磁盘很大，猜测应该是hdfs上存储了什么大文件。 再进
阅读全文
posted @
2019-11-05 10:42
哼着歌啦啦啦
阅读(1643)
推荐(0) 编辑
