对象存储测试工具 cosbench
目录
Cloud Object Storage Benchmarking Tool
使用[cosbench][1]对s3接口进行性能测试。
部署
依赖
- java环境
- nc命令，需要安装的软件包在不同系统名称可能不同，nmap-ncat或netcat
下载cosbench
部署方式
修改配置文件conf/controller.conf
注意修改drivers的数量和driver的url
[controller]
drivers = 1
log_level = INFO
log_file = log/system.log
archive_dir = archive
[driver1]
name = driver1
url = http://10.0.169.11:18088/driver
添加解析
在hosts文件中添加s3对应域名的解析
启动
controller节点
./start-all.sh
driver节点
./start-driver.sh
测试
测试脚本cosbench_script
- 脚本中修改AK/SK，s3地址或域名解析。
- 脚本中的runtime，workers如有需要可以修改。
浏览器访问
http://ip:19088/controller/
注意事项
- 1 大文件测压测时间过短会导致测试IO不理想；
- 2 注意下载对应版本才的cosbench，不同版本的xml测试脚本可能不能混用，会报错；曾经出现 write_test正常，read_test报错；
- 3 测试时，需要关闭防火墙和selinux；
测试脚本认证类型
s3
<storage type="s3" config="
accesskey=x;
secretkey=OjMhdGgj7JvgvgWEO17YWqsqcV0TD3ABUVCl;
endpoint=http://s3.io;
path_style_access=true" />
命令行提交任务参考文档
sh chi.sh submit test.xml
sh chi.sh cancle w120
sh chi.sh info
关闭 md5 校验
# cosbench-start.sh
/usr/bin/nohup java -Duser.timezone=Asia/Shanghai -Dcom.amazonaws.services.s3.disableGetObjectMD5Validation=true -Dcosbench.tomcat.config=$TOMCAT_CONFIG -server -cp main/* org.eclipse.equinox.launcher.Main -configuration $OSGI_CONFIG -console $OSGI_CONSOLE_PORT 1> $BOOT_LOG 2>&1 &
