在Xen/KVM虚拟化中,一般来说CPU、内存、网络I/O的虚拟化效率都非常高了,而磁盘I/O虚拟化效率较低,从而磁盘可能会是瓶颈。一般来说,数据库对磁盘I/O要求比较高的应用,可以衡量一下在客户机中运行MySQL、Oracle等数据库服务的性能(不过我知道也有在客户机中运行数据库服务器,效率也还可接受)。本文不介绍MySQL在虚拟机中的性能表现情况(也许今后会考虑),而是介绍一个MySQL数据库的压力测试工具——msqlslap。
mysqlslap是从MySQL的5.1.4版开始就开始官方提供的压力测试工具。通过模拟多个并发客户端并发访问MySQL来执行压力测试,同时提供了较详细的SQL执行数据性能报告,并且能很好的对比多个存储引擎(MyISAM,InnoDB等)在相同环境下的相同并发压力下的性能差别。
mysqlslap 官方介绍:http://dev.mysql.com/doc/refman/5.6/en/mysqlslap.html
mysqlslap的运行有如下3个步骤:
1. 创建schema、table、test data 等,使用单个连接 (在MySQL中,schema就是database);
2. 运行负载测试,可以使用多个并发客户端连接;
3. 测试环境清理(删除创建的数据、表等),使用单个连接。
对于SQL语句,可以直接在mysqlslap命令行中输入字符串,也可以指定使用包含有SQL语句的文件。
我使用过的几个例子如下:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 |
mysqlslap --delimiter=";" --create="create table a (i int); insert into a values(22)" --query="select * from a" --concurrency=50 --iteration=200 mysqlslap --delimiter=";" --create=create.sql --query=query.sql --concurrency=5 --iteration=20 [root@jay-linux jay]# mysqlslap -a --concurrency=50 --number-of-queries 5000 \ -auto-generate-sql-load-type=read -utest -p123456 -h 192.168.173.209 \ --engine=myisam,innodb,memory |
mysqlslap的语法如下:
shell> mysqlslap [options]
mysqlslap常用参数 [options] 详解(用网上文档修改,并个人总结而来;原汁原味文档,还是参考MySQL官方对mysqlslap的说明吧),:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 |
--host=host_name, -h host_name 连接到的MySQL服务器的主机名(或IP地址),默认为本机localhost --user=user_name, -u user_name 连接MySQL服务时用的用户名 --password[=password], -p[password] 连接MySQL服务时用的密码 --create-schema 代表自定义的测试库名称,测试的schema,MySQL中schema也就是database。 (没指定使用哪个数据库时,可能会遇到错误mysqlslap: Error when connecting to server: 1049 Unknown database 'mysqlslap') --query=name,-q 使用自定义脚本执行测试(可以是SQL字符串或脚本),例如可以调用自定义的一个存储过程或者sql语句来执行测试。 --create 创建表所需的SQL(可以是SQL字符串或脚本) --concurrency=N, -c N 表示并发量,也就是模拟多少个客户端同时执行query。可指定多个值,以逗号或者--delimiter参数指定的值做为分隔符。例如:--concurrency=100,200,500(分别执行100、200、500个并发)。 --iterations=N, -i N 测试执行的迭代次数,代表要在不同的并发环境中,各自运行测试多少次;多次运行以便让结果更加准确。 --number-of-queries=N 总的测试查询次数(并发客户数×每客户查询次数) --engine=engine_name, -e engine_name 代表要测试的引擎,可以有多个,用分隔符隔开。例如:--engines=myisam,innodb,memory。 --auto-generate-sql, -a 自动生成测试表和数据,表示用mysqlslap工具自己生成的SQL脚本来测试并发压力。 --auto-generate-sql-load-type=type 测试语句的类型。代表要测试的环境是读操作还是写操作还是两者混合的。取值包括:read (scan tables), write (insert into tables), key (read primary keys), update (update primary keys), or mixed (half inserts, half scanning selects). 默认值是:mixed. --auto-generate-sql-add-auto-increment 代表对生成的表自动添加auto_increment列,从5.1.18版本开始支持。 --number-char-cols=N, -x N 自动生成的测试表中包含多少个字符类型的列,默认1 --number-int-cols=N, -y N 自动生成的测试表中包含多少个数字类型的列,默认1 --commint=N 多少条DML后提交一次。 --compress, -C 如果服务器和客户端支持都压缩,则压缩信息传递。 --only-print 只打印测试语句而不实际执行。 --detach=N 执行N条语句后断开重连。 --debug-info, -T 打印内存和CPU的相关信息。 |
说明:
测试的过程需要生成测试表,插入测试数据,这个mysqlslap可以自动生成,默认生成一个mysqlslap的schema,如果已经存在则先删除。可以用--only-print来打印实际的测试过程,整个测试完成后不会在数据库中留下痕迹。
一些测试参数实例(-p后面跟的是mysql的用户root的密码):
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 |
单线程测试。测试做了什么。 # mysqlslap -a -uroot -p123456 多线程测试。使用–concurrency来模拟并发连接。 # mysqlslap -a -c 100 -uroot -p123456 迭代测试。用于需要多次执行测试得到平均值。 # mysqlslap -a -i 10 -uroot -p123456 # mysqlslap ---auto-generate-sql-add-autoincrement -a -uroot -p123456 # mysqlslap -a --auto-generate-sql-load-type=read -uroot -p123456 # mysqlslap -a --auto-generate-secondary-indexes=3 -uroot -p123456 # mysqlslap -a --auto-generate-sql-write-number=1000 -uroot -p123456 # mysqlslap --create-schema world -q "select count(*) from City" -uroot -p123456 # mysqlslap -a -e innodb -uroot -p123456 # mysqlslap -a --number-of-queries=10 -uroot -p123456 测试同时不同的存储引擎的性能进行对比: # mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 \ --engine=myisam,innodb --debug-info -uroot -p123456 执行一次测试,分别50和100个并发,执行1000次总查询: # mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --debug-info -uroot -p123456 50和100个并发分别得到一次测试结果(Benchmark),并发数越多,执行完所有查询的所需时间越长。 为了准确起见,可以多迭代测试几次: # mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 \ --debug-info -uroot -p123456 |
参考文档:
http://dev.mysql.com/doc/refman/5.6/en/mysqlslap.html
http://www.cnblogs.com/ylqmf/archive/2011/10/21/2220674.html
其实JMeter也提供了基于JDBC的对数据库的性能测试,可参考这篇文章:
http://blazemeter.com/blog/secret-building-database-test-plan-with-jmeter