运用sysbench对MySQL进行测试
发布时间：2022-06-26 09:49:47 所属栏目：MySql教程 来源：互联网
导读：摘要： 为什么要测试，测什么东西？ 测试的种类非常多，测试的目的也非常多，我这里主要的目的就两个 测试MySQL的极限IO 对比不同版本MySQL，不同参数, 不同硬件，不同系统对MySQL的性能影响 为什么选择sysbench 因为MySQL官方的测试就是用sysbench哦 尽量
|
摘要： 为什么要测试，测什么东西？ 测试的种类非常多，测试的目的也非常多，我这里主要的目的就两个 测试MySQL的极限IO 对比不同版本MySQL，不同参数, 不同硬件，不同系统对MySQL的性能影响 为什么选择sysbench 因为MySQL官方的测试就是用sysbench哦 尽量选择最新版本 为什么要测试，测什么东西？ 测试的种类非常多，测试的目的也非常多，我这里主要的目的就两个 测试MySQL的极限IO 对比不同版本MySQL，不同参数, 不同硬件，不同系统对MySQL的性能影响 为什么选择sysbench 因为MySQL官方的测试就是用sysbench哦 尽量选择最新版本的sysbench哦，大于0.4版本的sysbench有实时显示功能 如何下载sysbench http://github.com/akopytov/sysbench 文档在哪里 http://github.com/akopytov/sysbench 如何安装 * 基本步骤 cd sysbench-1.0; ./autogen.sh; ./configure --with-mysql-includes=/usr/local/mysql/include --with-mysql-libs=/usr/local/mysql/lib/; make; make install; * 过程中可能会遇到的故障 sysbench: error while loading shared libraries: libmysqlclient.so.20: cannot open shared object file: No such file or directory * 解决方案 export LD_LIBRARY_PATH=/usr/local/mysql/lib/; * 测试是否安装成功 shell> sysbench --version sysbench 1.0 介绍sysbench的核心用法 它可以用来测试很多东西，测试io，cpu，mem，mysql，oracle，pg等等。 这里主要介绍我关心的两个，IO & MySQL 以下前半部分是0.4版本的用法，0.4以上的版本用法不一样，会注明。 一、通用语法 sysbench [common-options] --test=name [test-options] command command * prepare 准备阶段，也就是装载数据。 filo test 中： 就是创建指定大小的文件 oltp test 中： 就是创建指定大小的表 * run 实际测试阶段 * cleanup 收尾阶段，清除之前测试的数据。 common-options 只介绍常用的选项 选项 描述 默认值 --num-threads 多少个线程 1 --max-requests 多少个请求，0意味着无限制 1000 --max-time 测试多长时间，0意味着无限制 0 --test 测试什么模块 必须要求 --report-interval 阶段性的汇报测试统计信息,0.4以上版本新增 --test=fileio 模块的选项 提前注明：--file-test-mode * seqwr sequential write * seqrewr sequential rewrite * seqrd sequential read * rndrd random read * rndwr random write * rndrw combined random read/write test option for fileio 选项 描述 默认值 --file-num 创建文件的数量 128 --file-block-size IO操作的大小 16k --file-total-size 所有文件的总大小 2G --file-test-mode seqwr，seqrewr, seqrd, rndrd, rndwr, rndwr(上面已经介绍) 必须 --file-io-mode i/O 模式，sync, async, fastmmap, slowmmap sync --file-extra-flags 以额外的标记（O_SYNC，O_DSYNC，O_DIRECT）打开 - --file-fsync-freq 多少请求后使用fsync 100 --file-fsync-all 每次写IO都必须fsync no --file-fsync-mode 用什么样的模式来同步文件fsync, fdatasync (see above) fsync --file-rw-ratio 随机读写请求的比例 1.5 举例： $ sysbench --num-threads=16 --test=fileio --file-total-size=3G --file-test-mode=rndrw prepare $ sysbench --num-threads=16 --test=fileio --file-total-size=3G --file-test-mode=rndrw run $ sysbench --num-threads=16 --test=fileio --file-total-size=3G --file-test-mode=rndrw cleanup OLTP-MySQL 此模式用于测试真实数据库性能。在prepare阶段创建表，sbtest默认 CREATE TABLE `sbtest` ( `id` int(10) unsigned NOT NULL auto_increment, `k` int(10) unsigned NOT NULL default '0', `c` char(120) NOT NULL default '', `pad` char(60) NOT NULL default '', PRIMARY KEY (`id`), KEY `k` (`k`)); 在run阶段 simple模式 SELECT c FROM sbtest WHERE id=N Point queries SELECT c FROM sbtest WHERE id=N Range queries: SELECT c FROM sbtest WHERE id BETWEEN N AND M Range SUM() queries SELECT SUM(K) FROM sbtest WHERE id BETWEEN N and M Range ORDER BY queries SELECT c FROM sbtest WHERE id between N and M ORDER BY c Range DISTINCT queries SELECT DISTINCT c FROM sbtest WHERE id BETWEEN N and M ORDER BY c UPDATEs on index column UPDATE sbtest SET k=k+1 WHERE id=N UPDATEs on non-index column: UPDATE sbtest SET c=N WHERE id=M DELETE queries DELETE FROM sbtest WHERE id=N INSERT queries INSERT INTO sbtest VALUES (...) oltp test 模式通用参数 选项 描述 默认值 --oltp-table-name 表的名字 sbtest --oltp-table-size 表的行数 10000 --oltp-tables-count 表的个数 1 --oltp-dist-type 热点数据分布{uniform(均匀分布),Gaussian(高斯分布),special(空间分布)}。默认是special special --oltp-dist-pct special：热点数据产生的比例 1 --oltp-dist-res special：热点数据的访问频率 75 --oltp-test-mode simple，complex（以上介绍） complex --oltp-read-only 只有select 请求 off --oltp-skip-trx 不用事务 off --oltp-point-selects 一个事务中简单select查询数量 10 --oltp-simple-ranges 一个事务中简单range查询的数量 1 --oltp-sum-ranges sum range的数量 1 --oltp-order=ranges order range的数量 1 mysql test 参数 --mysql-host=[LIST,...] MySQL server host [localhost] --mysql-port=[LIST,...] MySQL server port [3306] --mysql-socket=[LIST,...] MySQL socket --mysql-user=STRING MySQL user [sbtest] --mysql-password=STRING MySQL password [] --mysql-db=STRING MySQL database name [sbtest] --mysql-table-engine=STRING storage engine to use for the test table {myisam,innodb,bdb,heap,ndbcluster,federated} [innodb] --mysql-engine-trx=STRING whether storage engine used is transactional or not {yes,no,auto} [auto] --mysql-ssl=[on|off] use SSL connections, if available in the client library [off] --mysql-ssl-cipher=STRING use specific cipher for SSL connections [] --mysql-compression=[on|off] use compression, if available in the client library [off] --myisam-max-rows=N max-rows parameter for MyISAM tables [1000000] --mysql-debug=[on|off] dump all client library calls [off] --mysql-ignore-errors=[LIST,...]list of errors to ignore, or "all" [1213,1020,1205] --mysql-dry-run=[on|off] Dry run, pretent that all MySQL client API calls are successful without executing them [off] 以上0.4版本的语法介绍完毕。 接下来是大于0.4版本的新语法，尤其是--test=oltp模块 用--test=xx.lua (完整路径来传递)来代替 [szq@upright91 local]$ locate select.lua /home/szq/sysbench-1.0.3/src/lua/oltp_point_select.lua /home/szq/sysbench-1.0.3/tests/include/oltp_legacy/select.lua /usr/local/share/sysbench/oltp_point_select.lua /usr/local/share/sysbench/tests/include/oltp_legacy/select.lua [szq@upright91 local]$ ll /home/szq/sysbench-1.0.3/tests/include/oltp_legacy 总用量 52 -rw-r--r-- 1 szq szq 1195 2月 26 05:12 bulk_insert.lua -rw-r--r-- 1 szq szq 4696 2月 26 05:12 common.lua -rw-r--r-- 1 szq szq 366 2月 26 05:12 delete.lua -rw-r--r-- 1 szq szq 1171 2月 26 05:12 insert.lua -rw-r--r-- 1 szq szq 3004 2月 26 05:12 oltp.lua -rw-r--r-- 1 szq szq 368 2月 26 05:12 oltp_simple.lua -rw-r--r-- 1 szq szq 527 2月 26 05:12 parallel_prepare.lua -rw-r--r-- 1 szq szq 369 2月 26 05:12 select.lua -rw-r--r-- 1 szq szq 1448 2月 26 05:12 select_random_points.lua -rw-r--r-- 1 szq szq 1556 2月 26 05:12 select_random_ranges.lua -rw-r--r-- 1 szq szq 369 2月 26 05:12 update_index.lua -rw-r--r-- 1 szq szq 578 2月 26 05:12 update_non_index.lua FileIO实战 磁盘：S3610 * 6 raid10, 内存128G 测试出相关场景下的极限IOPS 随机读写（3:2 oltp场景） * sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G --file-test-mode=rndrw --file-block-size=16384 --file-extra-flags=direct run 使用sysbench对MySQL进行测试cdn.com/663010e67787f986aa351eef3168a3c2767eda7f.jpeg"> 随机读写（5：1 oltp场景） * sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G --file-test-mode=rndrw --file-block-size=16384 --file-extra-flags=direct --file-rw-ratio=5 run 随机写 * sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G --file-test-mode=rndwr --file-block-size=16384 --file-extra-flags=direct run 随机读 * sysbench --num-threads=16 --report-interval=3 --max-requests=0 --max-time=300 --test=fileio --file-num=200 --file-total-size=200G --file-test-mode=rndrd --file-block-size=16384 --file-extra-flags=direct run 磁盘：S3610 * 6 raid10, 内存128G Point select * 产生数据 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/select.lua --mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 prepare * 执行 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/select.lua --mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 run 使用sysbench对MySQL进行测试 Point oltp * 产生数据 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/oltp.lua --mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 prepare * 执行 sysbench --num-threads=128 --report-interval=3 --max-requests=0 --max-time=300 --test=/root/sysbench-1.0/sysbench/tests/db/oltp.lua --mysql-table-engine=innodb --oltp-table-size=50000000 --mysql-user=sysbench --mysql-password=sysbench --oltp-tables-count=2 --mysql-host=xx --mysql-port=3306 run 使用sysbench对MySQL进行测试 结论 在性能方面，虽然官方号称5.7性能比5.6快3倍，但是在实际测试中5.7比5.6却稍微差一点点 是否会选择5.7生产环境？当然，因为5.7的新特性太诱人了。 （编辑：PHP编程网 - 黄冈站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
浙公网安备 33038102330482号