单节点数据库的压力测试

mysqlslap是mysql自带的基准测试工具,优点:查询数据,语法简单,灵活容易使用.该工具可以模拟多个客户端同时并发的向服务器发出查询更新,给出了性能测试数据而且提供了多种引擎的性能比较.mysqlslap为mysql性能优化前后提供了直观的验证依据。

可以模拟出大量客户端同时操作数据库的情况,通过结果信息来了解数据库的性能状况。

mysqlslap 的一个主要工作场景就是对数据库服务器做基准测试。

例如我们拿到了一台服务器,准备做为数据库服务器,那么这台服务器的硬件资源能够支持多大的访问压力呢?优化了操作系统的内核参数后,是否提升了性能?调整了Mysql配置参数后,对性能有多少影响?……

通过一系列的调优工作,配合基准测试,就可以把这台服务器调整到最佳状态,也掌握了健康状态下的性能指标

以后在实际运行过程中,当监控的数据接近了基准指标时,说明数据库服务器快要满负荷了,需要分析是数据库结构设计、SQL语句这类用法问题,还是硬件资源的确不够了,然后进行相应的处理。

数据库服务器也可能需要硬件升级,升级之后也需要进行基准测试,和之前的测试结果对比,确保升级后的性能是提升的,防止不恰当的升级或者错误的配置引起性能下降

下面看一下如何使用 mysqlslap。

常用的选项
--concurrency    并发数量,多个可以用逗号隔开
--engines       要测试的引擎,可以有多个,用分隔符隔开,如--engines=myisam,innodb
--iterations      要运行这些测试多少次
--auto-generate-sql        用系统自己生成的SQL脚本来测试
--auto-generate-sql-load-type    要测试的是读还是写还是两者混合的(read,write,update,mixed)
--number-of-queries           总共要运行多少次查询。每个客户运行的查询数量可以用查询总数/并发数来计算
--debug-info               额外输出CPU以及内存的相关信息
--number-int-cols             创建测试表的int型字段数量
--number-char-cols             创建测试表的chat型字段数量
--create-schema             测试的database
--query 自己的SQL           脚本执行测试
--only-print                 如果只想打印看看SQL语句是什么,可以用这个选项

测试语句:

mysqlslap -hlocalhost -uroot -p123456 -P3306 --concurrency=500 --iterations=1 --auto-generate-sql --auto-generate-sql-load-type=mixed --auto-generate-sql-add-autoincrement --engine=innodb --number-of-queries=500

 

 数据库集群

pxc 数据读写强一致性,适合存储高价值重要数据。

单表数据量超过2千万数据性能 处理不方便。

订单 钱有关的 都要强一致性

数据切分 中间件mycat

跨平台。

牺牲性能 保证数据的一致性

日志需要保存到数据库中

大数据中算法:协调过滤算法(用户产生的日志数据)

 

posted @ 2018-06-07 22:44  玲汐  阅读(1430)  评论(0编辑  收藏  举报