复制的问题和解决方案
数据损坏或丢失
Master:MHA + semi repl(半同步)
Slave:重新复制混合使用存储引擎(淘汰)
MyISAM:不支持事务
InnoDB:支持事务不唯一的 server id
重新复制复制延迟
需要额外的监控工具的辅助
一从多主:mariadb10 版后支持
多线程复制:对多个数据库复制
数据库服务衡量指标:
qps:query per second
tps:transaction per second
压力测试工具:
- mysqlslap
- Sysbench:功能强大
https://github.com/akopytov/sysbench - tpcc-mysql
- MySQL Benchmark Suite
- MySQL super-smack
- MyBench
MySQL 压力测试
- Mysqlslap:来自于 mariadb 包,测试的过程默认生成一个 mysqlslap 的 schema,生成测试表 t1,查询和插入测试数据,mysqlslap 库自动生成,如果经存在则先删除。用 --only-print 来打印实际的测试过程,整个测试完成后不会在数据库中留下痕迹
- 使用格式:mysqlslap [options]
常用参数 [options] 说明:
--auto-generate-sql-load-type=type
:测试语句的类型。代表药测试的环境是读操作还是写操作还是两者混合的。取值包括:read,key,write,update 和 mixed(默认)
--auto-generate-sql-add-auto-increment
:代表对生成的表自动添加 auto_increment 列,从5.1.18 版本开始支持
--number-char-cols=N,-x N
:自动生成的测试表中包含多少各字符类型的列,默认1
--number-int-cols=N,-y N
:自动生成的测试表中包含多少各数字类型的列,默认1
--number-of-queries=N
:总的测试查询次数(并发客户数x每客户查询次数)
--query=name,-q
:使用自定义脚本执行测试,例如可以调用自定义的存储过程或者sql语句来执行测试
--create-schema
:代表自定义的测试库名称,测试的schema,MySQL 中 schema 也就是 database
--commint=N
:多少条 DML 后提交一次
--compress,-C
:如服务器和客户端都支持压缩,则压缩信息
--concurrency=N,-c N
:表示并发量,即模拟多少个客户端同时执行select。可指定多个值,以逗号或者 --delimiter 参数指定值做为分隔符,如:--concurrency=100,200,500
--engine=engine_name,-e engine_name
:代表要测试的引擎,可以有多个,用分隔符隔开。例如:--engines=myisam,innodb
--iterations=N,-i N
:测试执行的迭代次数,代表药在不同并发环境下,各自运行测试多少次
--only-print
:只打印测试语句而不实际执行。
--detach=N
:执行N条语句后断开重连
debug-info,-T
:打印内存和CPU的相关信息
mysqlslap 示例
- 单线程测试
mysqlslap -a -uroot -pcentos
- 多线程测试。使用 -concurrency 来模拟并发连接
mysqlslap -a -c 100 -uroot -pcentos
- 迭代测试。用于需要多此执行测试得到平均值
mysqlslap -a -i 10 -uroot -pcentos
mysqlslap --auto-generate-sql-add-autoincrement -a
mysqlslap -a --auto-generate-sql-load-type=read
mysqlslap -a --auto-generate-secondary-indexes=3
mysqlslap -a --auto-generate-sql-write-number=1000
mysqlslap --create-schema world -q "select count(*) from City"
mysqlslap -a -e innodb -uroot -pcentos
mysqlslap -a --number-of-queries=10 -uroot -pcentos
- 测试同时不同的存储引擎的性能进行对比
mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 --engine=myisam,innodb --debug-info -uroot -pcentos
- 执行一次测试,分别50和100个并发,执行1000次总查询
mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --debug-info -uroot -pcentos
- 50和100个并发分别得到一次测试结果(Benchmark),并发数越多,执行完所有查询的时间越长,为了准确起见,可以多迭代测试几次
mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 --debug-info -uroot -pcentos