地岁寒 - 博客园

2022年10月26日

摘要： https://huaweicloud.csdn.net/635611aed3efff3090b59ac2.html?spm=1001.2101.3001.6661.1&utm_medium=distribute.pc_relevant_t0.none-task-blog-2%7Edefault%7 阅读全文

posted @ 2022-10-26 10:03 地岁寒阅读(19) 评论(0) 推荐(0) 编辑

2022年10月21日

Flink状态后端的对比及机制

摘要： 1. Flink状态后端的类型： MemoryStateBackend FsStateBackend RocksDBStateBackend 2. 各状态后端对比： 2.1 MemoryStateBackend：如果没有配置，默认使用MemoryStateBackend,此时Flink的状态会保存阅读全文

posted @ 2022-10-21 19:42 地岁寒阅读(208) 评论(0) 推荐(0) 编辑

HDFS相关问题处理

摘要：机房搬迁后datanode启动失败，报错如下： 2022-10-21 10:28:40,551 INFO org.apache.hadoop.hdfs.server.common.Storage: Lock on /HDATA/1/dfs/local/in_use.lock acquired by 阅读全文

posted @ 2022-10-21 14:51 地岁寒阅读(38) 评论(0) 推荐(0) 编辑

2022年10月18日

Yarn API

摘要： Yarn API： 1. 查询整个yarn集群指标： GET http://{cluster_domain_name}|{rm_ip:8088}/ws/v1/metrics 2. 查看指定队列的所有任务： GET http://{cluster_domain_name}/{rm_ip:8088}/w 阅读全文

posted @ 2022-10-18 14:04 地岁寒阅读(616) 评论(0) 推荐(0) 编辑

SaltStack学习笔记

摘要： SaltStack三大功能： 1. 远程执行 2. 配置管理 (状态) 3.云管理运维三板斧：监控、执行、配置四种运行方式： 1.Local 2. Minion/Master C/S架构 3. Syndic - zabbix proxy 4. Salt SSH 安装saltStack repos 阅读全文

posted @ 2022-10-18 13:36 地岁寒阅读(71) 评论(0) 推荐(0) 编辑

2022年10月10日

JAVA问题定位工具

摘要：待阅读全文

posted @ 2022-10-10 20:57 地岁寒阅读(6) 评论(0) 推荐(0) 编辑

Linux磁盘相关工具 -- iostat

摘要： iostat主要用于监控系统设备的IO负载情况，根据这个可以看出当前系统的写入量和读取量，CPU负载和磁盘负载。 iostat主要用于输出磁盘IO和CPU统计信息。 1. iostat用法： iostat [选项] [<时间间隔>] [<次数>] 命令参数： -c ：显示CPU使用情况 -d：显示阅读全文

posted @ 2022-10-10 20:50 地岁寒阅读(281) 评论(0) 推荐(0) 编辑

2022年9月28日

记一次pushgateway因文件句柄数太多未回收的问题

摘要： 1. 问题描述： Flink上报metrics到pushGateway，pushGwateway因打开在多文件而拒绝Flink TaskManager上报数据的连接。查看pushGateway的日志如下： 2022/09/27 03:09:33 http: Accept error: accept 阅读全文

posted @ 2022-09-28 19:22 地岁寒阅读(1061) 评论(2) 推荐(0) 编辑

2022年9月21日

四层负载与七层负载的区别

摘要：待续阅读全文

posted @ 2022-09-21 17:17 地岁寒阅读(18) 评论(0) 推荐(0) 编辑

Nginx/LVS高可用配置方法

摘要：待续阅读全文

posted @ 2022-09-21 17:16 地岁寒阅读(6) 评论(0) 推荐(0) 编辑