摘要:
问题背景 ceph 集群出现 pg inconsistent,ceph pg repair 无法修复 osd 日志提示三个本地文件一致,但与 object info size 大小不一致 操作步骤 通过 ceph health detail,查看有问题的 pg ceph health detail 阅读全文
摘要:
问题背景 ceph 集群 pg inconsistent,日志提示 log_channel(cluster) log [ERR] : scrub 19.15b9 19:9dac2ec3:::rbd_data.b29154238e1f29.0000000000001953:12 is an unexp 阅读全文
摘要:
问题背景 某些 ceph 集群中,部分 osd 的 journal 指向的磁盘分区为设备名 + 分区编号的形式(例:/var/lib/ceph/osd/ceph-415/journal -> /dev/sdb1),部分服务器由于在运行过程中更换过磁盘,盘符发生变化,重启后,盘符可能再次变化, osd 阅读全文
摘要:
1. 问题背景 集群 pg 数量规划不合理,导致在集群存入大量的数据之后,osd 上的数据分布不均衡,部分 osd 的存储百分比接近或超过 85% 告警阈值,在百分比达到 95% 之后,集群会停止 IO。 由于调整 pg 风险高,需要提前做评估和审核,所以需要使用临时解决方案调整 osd 权重的方式 阅读全文
摘要:
目录目录1计算节点手动对接ceph21、安装ceph包22、拷贝ceph 配置文件23、在新增计算节点上创建密钥文件并存储到libvirt 中24、配置nova 使用ceph 后端存储2计算节点手动对接ceph1、安装ceph包计算节点装ceph-commonyum install ceph-com 阅读全文
摘要:
1.查看incomplete的pgsceph health detail | grep incompletepg 2.ef is incomplete, acting [10,9,4]pg 2.a9 is incomplete, acting [10,4,3]pg 2.a7 is incomplet 阅读全文
摘要:
ipsan 盘符变化,虚机无法启动检查/usr/lib/python2.7/site-packages/nova/compute/manager.py 配置检查多路径是否开启 virsh domblklist instance-xxx 检查nova 配置是否开启多路径/etc/nova/comput 阅读全文
摘要:
KEYWORDS: tencent, tstack, solution, HISTORY: Created at 15:26:22 on 2020-02-15. 手动恢复 MariaDB 集群 (TStack K 与 P 版均适用) (2020-02-15) [ERROR] WSREP: bind: 阅读全文
摘要:
MongoDB增删改查操作(命令行)一、插入MongoDB的插入操作很简单,使用insert方法,这里演示从创建数据库、创建集合到插入文档、查询文档。集合创建方法参数说明:size:集合最大空间max:集合最多文档数量(超出size和max限制都会删除最早的记录) 二、删除MongoDB删除操作也很 阅读全文
摘要:
1. 已知风险在计算节点因为硬件故障重启之后,ovs-agent启动失败,导致虚拟机网络不通。2. 操作影响对业务不会造成影响,修复期间无法申请浮动IP,虚拟网卡,无法创建\修改网络与子网与VPC3. 适用版本TStack v6.34. 操作范围Tstack所有控制节点和计算节点5. 操作周期0.5 阅读全文
摘要:
广东广电南粤云项目虚拟机IPV4网卡更换双栈网卡方案拟制人:凌云日期:20230208技术负责人:日期:项目经理日期:客户批准人:日期:目录1. 变更总体介绍 - 1 -1.1. 项目情况 - 1 -1.2. 变更需求 - 2 -1.3. 变更描述及影响 - 2 -2. 变更准备 - 2 -2.1. 阅读全文
摘要:
问题现象:网络出现异常,ping 掉包严重,即使ping 127.0.0.1 可能丢包率也高,而且 ping 命令还出现 ping: sendmsg: Invalid argument 错误:64 bytes from 127.0.0.1: icmp_seq=150 ttl=64 time=0.05 阅读全文
摘要:
背景:Node-20节点发生物理损坏,虚机发生了两次驱散动作导致node-18和node-29都运行着两个虚机,故障现象虚机可以登陆但是网络不通并且伴随文件系统损坏报错方法:1、创建同镜像虚机A2、问题虚机B关机3、收集问题虚机B卷id4、编写gao.xml文件最终gao.xml实例:<disk t 阅读全文
摘要:
WinPE引导,修复Windows虚拟机问题描述:Windows2008 Serve虚拟机进入恢复模式,无法正常进入系统,重启多次依然如此,进入死循环状态,如下图:采用Windows PE系统挂载到有问题的虚拟机,采用PE内置的修复工具,修复引导系统。这里需要一个带有系统修复工具的PE 镜像,目前大 阅读全文
摘要:
Linux /etc/fstab文件详解Linux的/etc/fstab文件是一个重要的配置文件,它主要用于指定文件系统的挂载点和文件系统的参数配置。在这个文件里面,列出了系统中所有挂载的文件系统和它们的挂载选项。以下是/etc/fstab文件的详细说明:设备节点第一项是您想要mount的储存装置的 阅读全文
摘要:
首先确定慢请求是哪些osd 由于mon01的monitor服务关闭,所以慢请求日志记录只有保存在mon02和mon03的ceph.log日志里,日志位于/var/log/ceph目录下。在日志里搜索slow request即可找到当日慢请求的osd,如下图: 一般来说最开始出现慢请求和最后结束的慢请 阅读全文
摘要:
本地修改OpenStack虚机RBD块机RBD块Posted by fishcried on March 9, 2016有台名为nginx的vm出现了些怪异的行为, 想把根磁盘导出来挂载在本地看看到底是怎么回事. 如果nova使用的是本地存储,vm disk会 存在相应compute节点的/var/ 阅读全文
摘要:
1.检查pg ceph pg dump|grep inconsistent ceph -w ceph health detail #pg repair 阅读全文
摘要:
osd 无法启动 问题描述 osd 状态 down [root@node-1 ~]# ceph osd tree ID WEIGHT TYPE NAME UP/DOWN REWEIGHT PRIMARY-AFFINITY -1 8.68958 root default -2 2.17239 host 阅读全文
摘要:
客户环境,sdX为日志盘损坏,现更换新得sdX盘,目前6个osd down执行以下操作第一步:ssd 以 /dev/sd<X> 指代,分区序号以 <Y> 指代(在 ssd 创建的第一个分区, Y 即是 1,创建第 2 个时, Y 即是 2),命令:sgdisk -n <Y>:0:+5G -t <Y> 阅读全文