2023年4月25日
linux系统性能分析与优化
摘要： linux系统性能分析与优化2022-11-24 13:43背景有时候会遇到⼀些疑难杂症，并且监控插件并不能⼀眼⽴⻢发现问题的根源。这时候就需要登录服务器进⼀步深⼊分析问题的根源。那么分析问题需要有⼀定的技术经验积累，并且有些问题涉及到的领域⾮常⼴，才能定位到问题。所以，分析问题和踩坑是⾮常锻炼⼀个 阅读全文
posted @ 2023-04-25 09:56 XU-NING 阅读(44) 评论(0) 推荐(0) 编辑
k8s大规模集群优化
摘要： 大规模集群优化2022-11-24 13:11Kubernetes ⾃ v1.6 以来，官⽅就宣称单集群最⼤⽀持 5000 个节点。不过这只是理论上，在具体实践中从 0 到 500 0，还是有很⻓的路要⾛，需要⻅招拆招。官⽅标准如下：不超过 5000 个节点 不超过 150000 个 pod不超过 阅读全文
posted @ 2023-04-25 09:55 XU-NING 阅读(90) 评论(0) 推荐(0) 编辑
重建rabbitmq
摘要： rabbitmq集群必要条件1.1. 绑定实体ip，即ifconfig所能查询到的绑定到网卡上的ip,以下是绑定方法#编辑配置路径 /etc/rabbitmq/rabbitmq-env.confNODE_IP_ADDRESS=172.16.0.1331.2. 配置域名映射到实体ip#配置文件1所在路 阅读全文
posted @ 2023-04-25 09:50 XU-NING 阅读(22) 评论(0) 推荐(0) 编辑
2023年4月24日
pg_inconsistent之三个本地文件一致修复方法
摘要： 问题背景 ceph 集群出现 pg inconsistent，ceph pg repair 无法修复 osd 日志提示三个本地文件一致，但与 object info size 大小不一致 操作步骤 通过 ceph health detail，查看有问题的 pg ceph health detail 阅读全文
posted @ 2023-04-24 17:20 XU-NING 阅读(109) 评论(0) 推荐(0) 编辑
pg_inconsistent_之_unexpect_clone_修复方法
摘要： 问题背景 ceph 集群 pg inconsistent，日志提示 log_channel(cluster) log [ERR] : scrub 19.15b9 19:9dac2ec3:::rbd_data.b29154238e1f29.0000000000001953:12 is an unexp 阅读全文
posted @ 2023-04-24 17:19 XU-NING 阅读(125) 评论(0) 推荐(0) 编辑
osd-journal-更新为-partuuid-方案
摘要： 问题背景 某些 ceph 集群中，部分 osd 的 journal 指向的磁盘分区为设备名 + 分区编号的形式（例：/var/lib/ceph/osd/ceph-415/journal -> /dev/sdb1），部分服务器由于在运行过程中更换过磁盘，盘符发生变化，重启后，盘符可能再次变化， osd 阅读全文
posted @ 2023-04-24 17:17 XU-NING 阅读(50) 评论(0) 推荐(0) 编辑
Ceph_osd_应急权重调整方案
摘要： 1. 问题背景 集群 pg 数量规划不合理，导致在集群存入大量的数据之后，osd 上的数据分布不均衡，部分 osd 的存储百分比接近或超过 85% 告警阈值，在百分比达到 95% 之后，集群会停止 IO。 由于调整 pg 风险高，需要提前做评估和审核，所以需要使用临时解决方案调整 osd 权重的方式 阅读全文
posted @ 2023-04-24 17:17 XU-NING 阅读(212) 评论(0) 推荐(0) 编辑
计算节点手动对接ceph
摘要： 目录目录1计算节点手动对接ceph21、安装ceph包22、拷贝ceph 配置文件23、在新增计算节点上创建密钥文件并存储到libvirt 中24、配置nova 使用ceph 后端存储2计算节点手动对接ceph1、安装ceph包计算节点装ceph-commonyum install ceph-com 阅读全文
posted @ 2023-04-24 17:13 XU-NING 阅读(29) 评论(0) 推荐(0) 编辑
ceph pg incomplete修复
摘要： 1.查看incomplete的pgsceph health detail | grep incompletepg 2.ef is incomplete, acting [10,9,4]pg 2.a9 is incomplete, acting [10,4,3]pg 2.a7 is incomplet 阅读全文
posted @ 2023-04-24 17:11 XU-NING 阅读(206) 评论(0) 推荐(0) 编辑
ipsan 盘符变化_虚机无法启动
摘要： ipsan 盘符变化，虚机无法启动检查/usr/lib/python2.7/site-packages/nova/compute/manager.py 配置检查多路径是否开启 virsh domblklist instance-xxx 检查nova 配置是否开启多路径/etc/nova/comput 阅读全文
posted @ 2023-04-24 10:59 XU-NING 阅读(17) 评论(0) 推荐(0) 编辑