sysbench 压测 MySQL 性能及优化

本贴最后更新于 1683 天前,其中的信息可能已经时过境迁

sysbench 安装流程

下载
wget https://github.com/akopytov/sysbench/archive/master.zip
unzip 安装
yum install unzip
解压
unzip master.zip
安装相关依赖
yum -y install  make automake libtool pkgconfig libaio-devel vim-common
yum -y install mysql-devel 
编译

进入之前解压后的文件夹

./autogen.sh
#如果不是yum安装的原文件地址的话,需要添加参数改
./configure 
make
make install
检验

出现版本号即为安装成功

sysbench --version

sysbench 1.1.0

性能压测

我提前准备了一台 4C8G 的 MySQL 机器
如果没有安装 MySQL 的话,推荐以下教程安装《linux 安装 MySQL》

准备数据

我们准备 10 张表,每张表有三百万数据

sysbench /usr/local/share/sysbench/oltp_write_only.lua --table-size=3000000 --tables=10 --threads=32 --db-driver=mysql --mysql-db=testdb --mysql-host=127.0.0.1 --mysql-user=root --mysql-password=root prepare
开始压测
sysbench /usr/local/share/sysbench/oltp_read_write.lua --table-size=3000000 --tables=10 --threads=32 --db-driver=mysql --mysql-db=testdb --mysql-host=127.0.0.1 --mysql-user=root --mysql-password=root run > test.log
测试结果
SQL statistics:
    queries performed:
        read:                            67424
        write:                           19264
        other:                           9632
        total:                           96320
    transactions:                        4816   (477.58 per sec.)
    queries:                             96320  (9551.58 per sec.)
    ignored errors:                      0      (0.00 per sec.)
    reconnects:                          0      (0.00 per sec.)

Throughput:
    events/s (eps):                      477.5789
    time elapsed:                        10.0842s
    total number of events:              4816

Latency (ms):
         min:                                    5.25
         avg:                                   66.73
         max:                                  283.53
         95th percentile:                      132.49
         sum:                               321393.19

Threads fairness:
    events (avg/stddev):           150.5000/5.45
    execution time (avg/stddev):   10.0435/0.02

清除数据
sysbench /usr/local/share/sysbench/oltp_write_only.lua --table-size=3000000 --tables=10 --threads=32 --db-driver=mysql --mysql-db=testdb --mysql-host=127.0.0.1 --mysql-user=root --mysql-password=root cleanup

参数调优

由于机器的内存有 8G,所以将 innodb_buffer_pool_size 调整至 4G。

测试结果
SQL statistics:
    queries performed:
        read:                            101192
        write:                           28912
        other:                           14456
        total:                           144560
    transactions:                        7228   (715.85 per sec.)
    queries:                             144560 (14317.09 per sec.)
    ignored errors:                      0      (0.00 per sec.)
    reconnects:                          0      (0.00 per sec.)

Throughput:
    events/s (eps):                      715.8545
    time elapsed:                        10.0970s
    total number of events:              7228

Latency (ms):
         min:                                    4.42
         avg:                                   44.56
         max:                                  225.83
         95th percentile:                       89.16
         sum:                               322100.40

Threads fairness:
    events (avg/stddev):           225.8750/8.69
    execution time (avg/stddev):   10.0656/0.03

性能大概上升 50% 左右

其他主要优化参数

参数的配置主要有几个方面

  • 连接数、io
  • buffer 大小:read\sort\join
  • buffer_pool:大小以及实例数量
  • 刷脏页策略、日志落磁盘策略
#mysql最大连接数
max_connections = 800  

#当我们的join是ALL,index,rang或者Index_merge的时候使用的buffer。  
#实际上这种join被称为FULL JOIN
join_buffer_size = 128M

#读入缓冲区的大小,将对表进行顺序扫描的请求将分配一个读入缓冲区,
#MySQL会为它分配一段内存缓冲区
read_buffer_size = 16M

#随机读缓冲区大小,当按任意顺序读取行时(列如按照排序顺序)将分配
#一个随机读取缓冲区,进行排序查询时,MySQL会首先扫描一遍该缓冲,
#以避免磁盘搜索,提高查询速度
read_rnd_buffer_size = 32M

#缓存innodb表的索引,数据,插入数据时的缓冲,专用mysql服务器设置的大小:  
#操作系统内存的70%-80%最佳
innodb_buffer_pool_size = 4G

#可以开启多个内存缓冲池,把需要缓冲的数据hash到不同的缓冲池中,
#这样可以并行的内存读写
innodb_buffer_pool_instances = 8

#ORDER BY 或者GROUP BY 操作的buffer缓存大小
innodb_sort_buffer_size = 64M

#InnoDB存储引擎在刷新一个脏页时,会检测该页所在区(extent)的所有页,  
#如果是脏页,那么一起刷新。这样做的好处是通过AIO可以将多个IO写操作  
#合并为一个IO操作。对于传统机械硬盘建议使用,而对于固态硬盘可以关闭。
innodb_flush_neighbors = 1


#这两个设置会影响InnoDB每秒在后台执行多少操作.大多数写IO(除了  
#写InnoDB日志)是后台操作的.如果你深度了解硬件性能(如每秒可以  
#执行多少次IO操作),则使用这些功能是很可取的,而不是让它闲着
innodb_io_capacity = 4000

innodb_io_capacity_max = 8000

技术讨论群 QQ:1398880

笔者个人理解总结,如有错误恳请网友评论指正。

  • MySQL

    MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是最流行的关系型数据库管理系统之一。

    690 引用 • 535 回帖

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...