2022年Mysql数据库文件系统及IO调度算法的选择 .pdf

《2022年Mysql数据库文件系统及IO调度算法的选择 .pdf》由会员分享，可在线阅读，更多相关《2022年Mysql数据库文件系统及IO调度算法的选择 .pdf（10页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、誉天 Cisco/Linux认证社区 数据库文件系统及IO 调度算法的选择文件系统对于IO 性能来说有着不小的影响，选择合适的文件系统可以最大化的发挥硬件能力，提高数据库性能。Linux 上常用的文件系统有ext3，xfs，jfs，reiserfs等。ext4，btrfs 等牛 x 的新文系系统，由于还是太新了，我还不敢用到生产环境中。ext3 和 reiserfs之前看过一些测试资料，对于数据库应用性能都比较一般，这里就不测试了。这里主要测试XFS和 JFS的性能对比，版本如下：db2:/tpcc-mysql#mkfs.xfs-V mkfs.xfs version 2.9.8 db2:/tp

2、cc-mysql#mkfs.jfs-V mkfs.jfs version 1.1.14,06-Apr-2009 其他的测试资料：XFS,Reiser,JFS&ext3 performance on Suse 9 EnterpriseMysql 如何选择文件系统？（ext4 vs ext3 vs jfs vs xfs vs reiserfs性能比拼）IO 调度算法（IO Schedulers）的选择也会对IO 性能有不小的影响，不同的应用需要选用不同的 IO调度算法，以达到最好的性能。怎么选择？在实际的应用环境中进行测试，比如是很多小文件的图片服务器或者大文件的下载服务器，与数据库使用的策略可能

3、就是不一样的。武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 1 页，共 10 页 -誉天 Cisco/Linux认证社区 调度：db2:#cat/sys/block/sdb/queue/scheduler noop anticipatory deadline cfq 修改 IO 调度：echo deadline /sys/block/sdb/queue/scheduler 最好是确定选择后加到系统启动参数中，这样可以永久生效。#vi/boot/grub/menu.lst title Debian GNU/Linux,kernel 2.6.26-

4、2-amd64 root(hd0,0)kernel/boot/vmlinuz-2.6.26-2-amd64 root=/dev/sda1 ro quiet elevator=deadlineinitrd/boot/initrd.img-2.6.26-2-amd64 Linux IO调度算法的详细说明请放狗找“linux IO Schedulers”武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 2 页，共 10 页 -誉天 Cisco/Linux认证社区 mysql 自带的一个测试工具，这里使用的是默认的my-f，测试脚本如下：#vi mysql

5、slap_benchmarks.sh/opt/mysql/bin/mysqld_safe&sleep 10 echo-innodb test-/opt/mysql/bin/mysqlslap-u root-h localhost-c 10,50,100,200,400-i 2-engine=innodb-auto-generate-sql-load-type=mixed-number-of-queries=50000-number-char-cols=5-number-int-cols=5-auto-generate-sql echo-myisam test-/opt/mysql/bin/my

6、sqlslap-u root-h localhost-c 10,50,100,200,400-i 2-engine=myisam-auto-generate-sql-load-type=mixed-number-of-queries=50000-number-char-cols=5-number-int-cols=5-auto-generate-sql 武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 3 页，共 10 页 -誉天 Cisco/Linux认证社区 mysqld 重点参数：-c 10,50,100,200,400：表示同时的clien

7、t 数量，可以考察在不同并发下的情况-i 2：运行几次测试，多次取平均值会更准确，当然更耗时。-number-of-queries=50000：query 次数 其他具体使用方法请Google，这里就不一一列举了。测试项 10 client(单位 s)50 client 100 client 200 client 400 client 默认 my-f,XFS(nobarrier),deadline,innodb 134.1 95.4 97.0 129.5 151.3 默认 my-f,XFS(nobarrier),cfq,innodb 141.8 95.6 96.1 122.6 185.7 默认

8、 my-f,XFS,deadline,innodb 141.5 95.7 97.8 128.4 193.8 默认 my-f,JFS,deadline,innodb 135.7 95.7 95.9 117.9 157.6 默认 my-f,JFS,cfq,innodb 128.9 95.3 96.1 136.3 192.2 默认 my-f,XFS(nobarrier),deadline,myisam 129.0 134.9 137.9 168.7 195.4 默认 my-f,XFS(nobarrier),cfq,myisam 126.5 135.7 137.8 164.2 167.2 默认 my-

9、f,XFS,deadline,myisam 129.5 132.9 138.4 169.9 222.5 武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 4 页，共 10 页 -誉天 Cisco/Linux认证社区 my-f,JFS,deadline,myisam 124.0 92.9 95.3 103.1 145.4 默认 my-f,JFS,cfq,myisam 134.8 96.6 93.3 129.0 146.8 mysqlslap测试结论：1、XFS在 mount 的时候需要加上nobarrier参数以获得更好的性能。2、i nnodb 的

10、表现，XFS和 JFS差别不大，各有千秋。3、myisam 的表现，JFS明显比 XFS好很多。4、cfq 在 XFS 下看数据并不比 deadline 慢，不同于网上的一些资料（http:/ JFS下基本都慢于deadline。http:/ vadim 牛人的这句话，还是用deadline 吧。VadimFractalizeR,Sure it is not silver bullet,but in systems that allows many outstanding IO requests(RAID10,SSD)CFQ just dies vs Deadline in OLTP work

11、loads.See for example http:/ we have bunch of customers cases when performance problem was healed just by one command echo deadline /sys/block/sda/queue/scheduler 武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 5 页，共 10 页 -誉天 Cisco/Linux认证社区 是 perconatools的一部分，大牛Vadim Tkachenko所出，他的很多文章也都是用这个工具才测试的。

12、工具地址：https:/ install bzr bzr branch lp:percona-dev/perconatools/tpcc-mysql db2:#cd tpcc-mysql/src/db2:/tpcc-mysql/src#make all 这里有可能make不过，需要改一下Makefile里面 mysql_config的路径。尝试运行 tpcc_load，可能会提示有某个lib找不到，可以把mysql/lib目录加到/etc/ld.so.conf.d/libc.conf中，运行一次ldconfig 建库（这里root密码设为123）：/opt/mysql/bin/mysql-u

13、root-p-h localhost tpcc create_table.sql/opt/mysql/bin/mysql-u root-p-h localhost tpcc add_fkey_idx.sql 武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 6 页，共 10 页 -誉天 Cisco/Linux认证社区 localhost tpcc root 123 1 至此可以用tpcc_start进行测试了。./tpcc_start localhost tpcc root 123 1 4 60 180 参考文章：http:/d.hatena.ne

14、.jp/sh2/20090212日文的，大概看的懂，没找到英文的。测试用的f:mysqld port=3306 socket=/tmp/mysql.sock datadir=/srv/mysql skip-locking key_buffer_size=384M max_allowed_packet=1M 武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 7 页，共 10 页 -誉天 Cisco/Linux认证社区 sort_buffer_size=2M read_buffer_size=2M read_rnd_buffer_size=8M myi

15、sam_sort_buffer_size=64M thread_cache_size=8#query_cache_size=32M#Try number of CPUs*2 for thread_concurrency thread_concurrency=16 default_table_type=MYISAM innodb_buffer_pool_size=3G innodb_data_file_path=ibdata1:10M:autoextend innodb_file_per_table=1 innodb_flush_log_at_trx_commit=1 innodb_log_bu

16、ffer_size=8M innodb_log_files_in_group=2 innodb_log_file_size=128M innodb_thread_concurrency=0 innodb_flush_method=O_DIRECT 武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 8 页，共 10 页 -誉天 Cisco/Linux认证社区 innodb_read_io_threads=4 innodb_io_capacity=800 innodb_adaptive_checkpoint=1 max_connections=3000

17、 query_cache_size=0 skip-name-resolve table_cache=2048 测试结果：文件系统 IO 调度 deadline（TpmC）CFQ JFS 22945.666 22477.334 XFS(nobarrier)22424.334 21219.3341、同样的文件系统下，deadline 优于 CFQ。2、JFS在这个测试中优于XFS。结论：大多数的测试中，JFS优于 XFS，所以数据库数据目录的文件系统使用JFS武汉誉天.独家授权Cisco/RHCE 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 9 页，共 10 页 -誉天 Cisco/Linux认证社区 的 IO 调度算法。转自：http:/ 培训 名师资料总结-精品资料欢迎下载-名师精心整理-第 10 页，共 10 页 -