随笔分类 - 存储相关
摘要：前言 环境已经配置好了osd，想增加opencas的缓存加速，因为opencas支持在lvm之上部署，也支持在opencas上面创建lvm，而已经部署好osd的场景是属于前面的一种情况，也就是已经有lvm 的情况再加缓存加速 因为ceph有自己的挂载逻辑，所以这里需要梳理一下，把整个启动路径给屏蔽掉
阅读全文
摘要：前言 为什么需要有整机带宽的概念，因为我们很多时候去计算性能的时候，上去都会计算你有多少块盘，每块盘有多大的带宽，那么一乘就算出来了，其实没有那么简单，整个IO路径上面任何一个地方的瓶颈都会降低总体带宽的 本篇的来源，很多年前，做机器测试的时候，总觉得机器上面的带宽不对，加起来不对，然后搜资料看到了
阅读全文
摘要：前言 做recover会触发阻塞，引起前端的IO卡住，可以通过参数避免这个情况 调整参数 # the number of entries to keep in the pg log when trimming it. Defaults to 3000. osd_min_pg_log_entries
阅读全文
摘要：目的 清理环境所有的数据，删除并恢复到初始状态 脚本 #! /bin/sh for host in lab101 lab102 do ssh $host hostname ssh $host systemctl stop ceph-radosgw.target ssh $host systemctl
阅读全文
摘要：说明 本篇记录一些字符串的处理方法，这里不具体讲完整的方法，只记录遇到的需要处理的情况 用例 用例一：解析ceph.log的ops 由于ops的单位是有的带k的有的不带k的，那么需要匹配处理 字符串示例： 2021-01-13 11:09:55.664479 mgr.node103 client.9
阅读全文
摘要：需求 由于迁移忽快忽慢，需要知道大概的迁移的时间，做了一个简单的统计脚本，可能不准，大概能够知道在什么范围内 脚本 #! /bin/sh while ( 2>1 ) do start=`ceph -s|grep pgs|grep mis|awk '{print $2}'|cut -d / -f 1`
阅读全文
摘要：前言 环境因为一些问题（网络，或者磁盘，或者其它各种异常），引起了集群的状态的一些变化，变化之后，集群的某些虚拟机正常某些虚拟机出现异常，异常现象就是无法启动 特别是win server2008 ,会一直卡在滚动条这里 这个问题很久前碰到过一个哥们出现过，他问我是否遇到过，这个之前遇到过一次无法启动
阅读全文
摘要：前言 内核模块的更新一般需要卸载模块再加载，但是很多时候使用场景决定了无法做卸载的操作，而linux支持了热更新内核模块的功能，这个已经支持了有一段时间了，一直没有拿ceph的相关模块进行验证 注意模块的某些函数是不支持的，init的部分是不支持的，补丁弄完验证一下就可以知道支不支持，不支持的部分会
阅读全文
摘要：##前言 如果想访问一个ceph里面的s3地址，但是又不想直接提供secrect key的时候，可以通过预签名的方式生成url 生成方法 下载boto3 脚本如下 cat s3.py import boto3 from botocore.client import Config s3_host="h
阅读全文
摘要：显示数据 [root@lab201 ~]# ceph df GLOBAL: SIZE AVAIL RAW USED %RAW USED 1092T 404T 688T 63.01% POOLS: NAME ID USED %USED MAX AVAIL OBJECTS rbd 0 17483G 15
阅读全文
摘要：前言 关于bluestore的db应该预留多少空间，网上有很多资料 如果采用默认的 write_buffer_size=268435456 大小的话 那么几个rocksdb的数据等级是 L0: in memory L1: 256MB L2: 2.56 GB L3: 25.6 GB L4: 256 G
阅读全文
摘要：前言 在ceph 14版本里面才加入了bluefs-bdev-migrate，分区迁移相关的命令，那么在12版本里面其实也是可以扩展分区的 测试的版本 [root@lab102 ceph-0]# ceph -v ceph version 12.2.13 (584a20eb0237c657dc0567
阅读全文
摘要：前言 测试cephfs的写入大量文件，通过mdtest写入1K大小的文件1亿个，每个目录里面文件为1万，目录总数为1万，总文件数目就为1亿了 写入的命令 mdtest -C -F -L -z 4 -b 10 -I 10000 -d /mnt/1yi/ -w 1024 -C 只创建 -F 只创建文件
阅读全文
摘要：前言 如果使用场景是多路径iscsi，那么数据一致性的就需要去验证一致性，就需要一个比较通用的测试方法，最近在处理这块，记录下简单的测试方法 测试方法 写入数据 dd if=/dev/urandom of=/dev/sdb bs=512 count=8000 oflag=direct 或者 dd i
阅读全文
摘要：前言 配置文件如下 <target iqn.2008-09.com.example:server.libdiskb> bs-type rbd <backing-store rbd/test4M> block-size 512 lbppbe 0 </backing-store> </target> 注
阅读全文
摘要：前言 使用librbd通过tgt出iscsi，多路径数据是一致的，由于环境的原因，切换为kernel rbd 出iscsi，然后通过不同的iscsi路径写入后，发现在rbd端就出现了数据没有刷新的问题 问题分析 这里有个类似的问题 https://github.com/ceph/ceph-csi/i
阅读全文
摘要：前言 本篇主要是分析ceph的版本之间参数的变化，参数变化意味着功能的变化，通过参数来分析增加，删除，修改了哪些功能，以及版本之间的变化，本篇主要通过导出参数，然后通过脚本去比对不同的版本的参数变化 14版本之前安装一个ceph-common,然后touch一个空配置文件就可以通过ceph --sh
阅读全文
摘要：前言 在比对rgw的不同前端的区别的时候，官方说civetweb是通过线程池来控制连接的，beast是后面加入了流控相关的，这块一直也没有调整过相关的参数，然后通过ab压测了一下，还是有很明显的区别的 测试很简单，虚拟机下面就可以完成 测试过程 rgw_thread_pool_size = 512
阅读全文
摘要：前言 ceph的rgw现在提供了两种前端， civetweb和beast 配置 修改配置文件 rgw_frontends = civetweb port=7481 为 rgw frontends = beast port=7481 然后重启rgw进程，查看日志 2020-09-11 10:23:52
阅读全文
