MySQL自帶的壓力測(cè)試工具M(jìn)ysqlslap

一、MySQL自帶的壓力測(cè)試工具 Mysqlslap

mysqlslap是mysql自帶的基準(zhǔn)測(cè)試工具,該工具查詢數(shù)據(jù),語法簡(jiǎn)單,靈活容易使用.該工具可以模擬多個(gè)客戶端同時(shí)并發(fā)的向服務(wù)器發(fā)出查詢更新,給出了性能測(cè)試數(shù)據(jù)而且提供了多種引擎的性能比較。mysqlslap為mysql性能優(yōu)化前后提供了直觀的驗(yàn)證依據(jù),系統(tǒng)運(yùn)維和DBA人員應(yīng)該掌握一些常見的壓力測(cè)試工具,才能準(zhǔn)確的掌握線上數(shù)據(jù)庫支撐的用戶流量上限及其抗壓性等問題。

1、更改其默認(rèn)的最大連接數(shù)

在對(duì)MySQL進(jìn)行壓力測(cè)試之前，需要更改其默認(rèn)的最大連接數(shù)，如下：

[root@mysql~]#vim/etc/my.cnf ................ [mysqld] max_connections=1024 [root@mysql~]#systemctlrestartmysqld

查看最大連接數(shù)

mysql>showvariableslike'max_connections'; +-----------------+-------+ |Variable_name|Value| +-----------------+-------+ |max_connections|1024| +-----------------+--------+ 1rowinset(0.00sec)

進(jìn)行壓力測(cè)試：

[root@mysql~]#mysqlslap--defaults-file=/etc/my.cnf--concurrency=100,200--iterations=1--number-int-cols=20--number-char-cols=30 --auto-generate-sql--auto-generate-sql-add-autoincrement--auto-generate-sql-load-type=mixed--engine=myisam,innodb--number-of-queries=2000-uroot-p123--verbose

上述命令測(cè)試說明：模擬測(cè)試兩次讀寫并發(fā)，第一次100，第二次200，自動(dòng)生成SQL腳本，測(cè)試表包含20個(gè)init字段，30個(gè)char字段，每次執(zhí)行2000查詢請(qǐng)求。測(cè)試引擎分別是myisam，innodb。（上述選項(xiàng)中有很多都是默認(rèn)值，可以省略，如果想要了解各個(gè)選項(xiàng)的解釋，可以使用mysqlslap --help進(jìn)行查詢）。

測(cè)試結(jié)果說明：

Myisam第一次100客戶端同時(shí)發(fā)起增查用0.557/s,第二次200客戶端同時(shí)發(fā)起增查用0.522/s

Innodb第一次100客戶端同時(shí)發(fā)起增查用0.256/s,第二次200客戶端同時(shí)發(fā)起增查用0.303/s

可以根據(jù)實(shí)際需求，一點(diǎn)點(diǎn)的加大并發(fā)數(shù)量進(jìn)行壓力測(cè)試。

二、使用第三方sysbench工具進(jìn)行壓力測(cè)試

1、安裝sysbench工具

[root@mysql~]#yum-yinstallepel-release#安裝第三方epel源 [root@mysql~]#yum-yinstallsysbench#安裝sysbench工具 [root@mysql~]#sysbench--version#確定工具已安裝 sysbench1.0.17

sysbench可以進(jìn)行以下測(cè)試：

CPU 運(yùn)算性能測(cè)試

磁盤 IO 性能測(cè)試

調(diào)度程序性能測(cè)試

內(nèi)存分配及傳輸速度測(cè)試

POSIX 線程性能測(cè)試

數(shù)據(jù)庫性能測(cè)試（OLTP 基準(zhǔn)測(cè)試，需要通過 /usr/share/sysbench/ 目錄中的 Lua 腳本執(zhí)行，例如 oltp_read_only.lua 腳本執(zhí)行只讀測(cè)試）。

sysbench 還可以通過運(yùn)行命令時(shí)指定自己的 Lua 腳本來自定義測(cè)試。

2、查看sysbench工具的幫助選項(xiàng)

[root@mysql~]#sysbench--help Usage: sysbench[options]...[testname][command] Commandsimplementedbymosttests:prepareruncleanuphelp#可用的命令，四個(gè) Generaloptions:#通用選項(xiàng) --threads=N要使用的線程數(shù)，默認(rèn)1個(gè)[1] --events=N最大允許的事件個(gè)數(shù)[0] --time=N最大的總執(zhí)行時(shí)間，以秒為單位[10] --forced-shutdown=STRING在--time時(shí)間限制到達(dá)后，強(qiáng)制關(guān)閉之前等待的秒數(shù)，默認(rèn)“off”禁用（numberofsecondstowaitafterthe--timelimitbeforeforcingshutdown,or'off'todisable）[off] --thread-stack-size=SIZE每個(gè)線程的堆棧大小[64K] --rate=N 平均傳輸速率。0則無限制[0] --report-interval=N以秒為單位定期報(bào)告具有指定間隔的中間統(tǒng)計(jì)信息0禁用中間報(bào)告[0] --report-checkpoints=[LIST,...]轉(zhuǎn)儲(chǔ)完整的統(tǒng)計(jì)信息并在指定的時(shí)間點(diǎn)重置所有計(jì)數(shù)器。參數(shù)是一個(gè)逗號(hào)分隔的值列表，表示從測(cè)試開始經(jīng)過這個(gè)時(shí)間量時(shí)必須執(zhí)行報(bào)告檢查點(diǎn)（以秒為單位）。報(bào)告檢查點(diǎn)默認(rèn)關(guān)閉。[] --debug[=on|off]打印更多debug信息[off] --validate[=on|off]盡可能執(zhí)行驗(yàn)證檢查[off] --help[=on|off]顯示幫助信息并退出[off] --version[=on|off]顯示版本信息并退出[off] --config-file=FILENAME包含命令行選項(xiàng)的文件 --tx-rate=N廢棄，改用--rate[0] --max-requests=N廢棄，改用--events[0] --max-time=N廢棄，改用--time[0] --num-threads=N廢棄，改用--threads[1] Pseudo-RandomNumbersGeneratoroptions:#偽隨機(jī)數(shù)發(fā)生器選項(xiàng) --rand-type=STRINGrandomnumbersdistribution{uniform,gaussian,special,pareto}[special] --rand-spec-iter=Nnumberofiterationsusedfornumbersgeneration[12] --rand-spec-pct=Npercentageofvaluestobetreatedas'special'(forspecialdistribution)[1] --rand-spec-res=Npercentageof'special'valuestouse(forspecialdistribution)[75] --rand-seed=Nseedforrandomnumbergenerator.When0,thecurrenttimeisusedasaRNGseed.[0] --rand-pareto-h=Nparameterhforparetodistribution[0.2] Logoptions:#日志選項(xiàng) --verbosity=Nverbositylevel{5-debug,0-onlycriticalmessages}[3] --percentile=Npercentiletocalculateinlatencystatistics(1-100).Usethespecialvalueof0todisablepercentilecalculations[95] --histogram[=on|off]printlatencyhistograminreport[off] Generaldatabaseoptions:#通用的數(shù)據(jù)庫選項(xiàng) --db-driver=STRING指定要使用的數(shù)據(jù)庫驅(qū)動(dòng)程序('help'togetlistofavailabledrivers) --db-ps-mode=STRINGpreparedstatementsusagemode{auto,disable}[auto] --db-debug[=on|off]printdatabase-specificdebuginformation[off] Compiled-indatabasedrivers:#內(nèi)建的數(shù)據(jù)庫驅(qū)動(dòng)程序，默認(rèn)支持MySQL和PostgreSQL mysql-MySQLdriver pgsql-PostgreSQLdriver mysqloptions:#MySQL數(shù)據(jù)庫專用選項(xiàng) --mysql-host=[LIST,...]MySQLserverhost[localhost] --mysql-port=[LIST,...]MySQLserverport[3306] --mysql-socket=[LIST,...]MySQLsocket --mysql-user=STRINGMySQLuser[sbtest] --mysql-password=STRINGMySQLpassword[] --mysql-db=STRINGMySQLdatabasename[sbtest] --mysql-ssl[=on|off]useSSLconnections,ifavailableintheclientlibrary[off] --mysql-ssl-cipher=STRINGusespecificcipherforSSLconnections[] --mysql-compression[=on|off]usecompression,ifavailableintheclientlibrary[off] --mysql-debug[=on|off]traceallclientlibrarycalls[off] --mysql-ignore-errors=[LIST,...]listoferrorstoignore,or"all"[1213,1020,1205] --mysql-dry-run[=on|off]Dryrun,pretendthatallMySQLclientAPIcallsaresuccessfulwithoutexecutingthem[off] pgsqloptions:#PostgreSQL數(shù)據(jù)庫專用選項(xiàng) --pgsql-host=STRINGPostgreSQLserverhost[localhost] --pgsql-port=NPostgreSQLserverport[5432] --pgsql-user=STRINGPostgreSQLuser[sbtest] --pgsql-password=STRINGPostgreSQLpassword[] --pgsql-db=STRINGPostgreSQLdatabasename[sbtest] Compiled-intests:#內(nèi)建測(cè)試類型 fileio-FileI/Otest cpu-CPUperformancetest memory-Memoryfunctionsspeedtest threads-Threadssubsystemperformancetest mutex-Mutexperformancetest See'sysbenchhelp'foralistofoptionsforeachtest.

3、sysbench測(cè)試MySQL數(shù)據(jù)庫性能

1）準(zhǔn)備測(cè)試數(shù)據(jù)

#查看sysbench自帶的lua腳本使用方法 [root@mysql~]#sysbench/usr/share/sysbench/oltp_common.luahelp #必須創(chuàng)建sbtest庫，sbtest是sysbench默認(rèn)使用的庫名 [root@mysql~]#mysqladmin-uroot-p123createsbtest; #然后，準(zhǔn)備測(cè)試所用的表，這些測(cè)試表放在測(cè)試庫sbtest中。這里使用的lua腳本為/usr/share/sysbench/oltp_common.lua。 [root@mysql~]#sysbench--mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=root --mysql-password=123 /usr/share/sysbench/oltp_common.lua --tables=10 --table_size=100000 prepare #其中--tables=10表示創(chuàng)建10個(gè)測(cè)試表， #--table_size=100000表示每個(gè)表中插入10W行數(shù)據(jù)， #prepare表示這是準(zhǔn)備數(shù)的過程。

2）確認(rèn)測(cè)試數(shù)據(jù)以存在

[root@mysql~]#mysql-uroot-p123sbtest;#登錄到sbtest庫 mysql>showtables;#查看相應(yīng)的表 +------------------+ |Tables_in_sbtest| +------------------+ |sbtest1| |sbtest10| |sbtest2| |sbtest3| |sbtest4| |sbtest5| |sbtest6| |sbtest7| |sbtest8| |sbtest9| +------------------+ 10rowsinset(0.00sec)mysql>selectcount(*)fromsbtest1;#隨機(jī)選擇一個(gè)表，確認(rèn)其有100000條數(shù)據(jù) +----------+ |count(*)| +----------+ |100000| +----------+ 1rowinset(0.01sec)

3）數(shù)據(jù)庫測(cè)試和結(jié)果分析

稍微修改下之前準(zhǔn)備數(shù)據(jù)的語句，就可以拿來測(cè)試了。需要注意的是，之前使用的lua腳本為oltp_common.lua，它是一個(gè)通用腳本，是被其它lua腳本調(diào)用的，它不能直接拿來測(cè)試。

所以，我這里用oltp_read_write.lua腳本來做讀、寫測(cè)試。還有很多其它類型的測(cè)試，比如只讀測(cè)試、只寫測(cè)試、刪除測(cè)試、大批量插入測(cè)試等等?？烧业綄?duì)應(yīng)的lua腳本進(jìn)行調(diào)用即可。

#執(zhí)行測(cè)試命令如下： [root@mysql~]#sysbench--threads=4 --time=20 --report-interval=5 --mysql-host=127.0.0.1 --mysql-port=3306 --mysql-user=root --mysql-password=123 /usr/share/sysbench/oltp_read_write.lua --tables=10 --table_size=100000 run

上述命令返回的結(jié)果如下：

[root@mysql~]#sysbench--threads=4--time=20--report-interval=5--mysql-host=127.0.0.1--mysql-port=3306--mysql-user=root--mysql-password=123/usr/share/sysbench/oltp_read_write.lua--tables=10--table_size=100000run sysbench1.0.17(usingsystemLuaJIT2.0.4) Runningthetestwithfollowingoptions: Numberofthreads:4 Reportintermediateresultsevery5second(s) Initializingrandomnumbergeneratorfromcurrenttime Initializingworkerthreads... Threadsstarted! #以下是每5秒返回一次的結(jié)果，統(tǒng)計(jì)的指標(biāo)包括： #線程數(shù)、tps(每秒事務(wù)數(shù))、qps(每秒查詢數(shù))、 #每秒的讀/寫/其它次數(shù)、延遲、每秒錯(cuò)誤數(shù)、每秒重連次數(shù) [5s]thds:4tps:1040.21qps:20815.65(r/w/o:14573.17/4161.25/2081.22)lat(ms,95%):7.17err/s:0.00reconn/s:0.00 [10s]thds:4tps:1083.34qps:21667.15(r/w/o:15165.93/4334.55/2166.68)lat(ms,95%):6.55err/s:0.00reconn/s:0.00 [15s]thds:4tps:1121.57qps:22429.09(r/w/o:15700.64/4485.30/2243.15)lat(ms,95%):6.55err/s:0.00reconn/s:0.00 [20s]thds:4tps:1141.69qps:22831.98(r/w/o:15982.65/4566.16/2283.18)lat(ms,95%):6.09err/s:0.00reconn/s:0.00 SQLstatistics: queriesperformed: read:307146#執(zhí)行的讀操作數(shù)量 write:87756#執(zhí)行的寫操作數(shù)量 other:43878#執(zhí)行的其它操作數(shù)量 total:438780 transactions:21939(1096.57persec.)#執(zhí)行事務(wù)的平均速率 queries:438780(21931.37persec.)#平均每秒能執(zhí)行多少次查詢 ignorederrors:0(0.00persec.) reconnects:0(0.00persec.) Generalstatistics: totaltime:20.0055s#總消耗時(shí)間 totalnumberofevents:21939#總請(qǐng)求數(shù)量(讀、寫、其它) Latency(ms): min:1.39 avg:3.64 max:192.05 95thpercentile:6.67#采樣計(jì)算的平均延遲 sum:79964.26 Threadsfairness: events(avg/stddev):5484.7500/15.12 executiontime(avg/stddev):19.9911/0.00

4、cpu/io/內(nèi)存等測(cè)試

sysbench內(nèi)置的幾個(gè)測(cè)試指標(biāo)如下：

[root@mysql~]#sysbench--help ..........#省略部分內(nèi)容 Compiled-intests: fileio-FileI/Otest cpu-CPUperformancetest memory-Memoryfunctionsspeedtest threads-Threadssubsystemperformancetest mutex-Mutexperformancetest

可以直接help輸出測(cè)試方法，例如，fileio測(cè)試：

[root@mysql~]#sysbenchfileiohelp sysbench1.0.17(usingsystemLuaJIT2.0.4) fileiooptions: --file-num=Nnumberoffilestocreate[128] --file-block-size=NblocksizetouseinallIOoperations[16384] --file-total-size=SIZEtotalsizeoffilestocreate[2G] --file-test-mode=STRINGtestmode{seqwr,seqrewr,seqrd,rndrd,rndwr,rndrw} --file-io-mode=STRINGfileoperationsmode{sync,async,mmap}[sync] --file-async-backlog=Nnumberofasynchronousoperatonstoqueueperthread[128] --file-extra-flags=[LIST,...]listofadditionalflagstousetoopenfiles{sync,dsync,direct}[] --file-fsync-freq=Ndofsync()afterthisnumberofrequests(0-don'tusefsync())[100] --file-fsync-all[=on|off]dofsync()aftereachwriteoperation[off] --file-fsync-end[=on|off]dofsync()attheendoftest[on] --file-fsync-mode=STRINGwhichmethodtouseforsynchronization{fsync,fdatasync}[fsync] --file-merged-requests=NmergeatmostthisnumberofIOrequestsifpossible(0-don'tmerge)[0] --file-rw-ratio=Nreads/writesratioforcombinedtest[1.5]

1）測(cè)試io性能

例如，創(chuàng)建5個(gè)文件，總共2G，每個(gè)文件大概400M。

[root@mysql~]#sysbenchfileio--file-num=5--file-total-size=2Gprepare [root@mysql~]#ll-lhtest* -rw-------1rootroot410MMay2616:05test_file.0 -rw-------1rootroot410MMay2616:05test_file.1 -rw-------1rootroot410MMay2616:05test_file.2 -rw-------1rootroot410MMay2616:05test_file.3 -rw-------1rootroot410MMay2616:05test_file.4

然后運(yùn)行測(cè)試：

[root@mysql~]#sysbench--events=5000 --threads=16 fileio --file-num=5 --file-total-size=2G --file-test-mode=rndrw --file-fsync-freq=0 --file-block-size=16384 run

返回的結(jié)果如下：

Runningthetestwithfollowingoptions: Numberofthreads:16 Initializingrandomnumbergeneratorfromcurrenttime Extrafileopenflags:(none) 5files,409.6MiBeach 2GiBtotalfilesize Blocksize16KiB NumberofIOrequests:5000 Read/WriteratioforcombinedrandomIOtest:1.50 Callingfsync()attheendoftest,Enabled. UsingsynchronousI/Omode Doingrandomr/wtest Initializingworkerthreads... Threadsstarted! Fileoperations: reads/s:9899.03 writes/s:6621.38 fsyncs/s:264.33 Throughput:#吞吐量 read,MiB/s:154.66#表示讀帶寬 written,MiB/s:103.46#表示寫的帶寬 Generalstatistics: totaltime:0.3014s totalnumberofevents:5000 Latency(ms): min:0.00 avg:0.81 max:53.56 95thpercentile:4.10 sum:4030.48 Threadsfairness: events(avg/stddev):312.5000/27.64 executiontime(avg/stddev):0.2519/0.02

2）測(cè)試cpu性能

[root@mysql~]#sysbenchcpu--threads=40--events=10000--cpu-max-prime=20000run

壓測(cè)時(shí)，還請(qǐng)小心謹(jǐn)慎?。。?！

責(zé)任編輯：lq