2022年服务器IO性能评估 .pdf

《2022年服务器IO性能评估 .pdf》由会员分享，可在线阅读，更多相关《2022年服务器IO性能评估 .pdf（7页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、誉天 Cisco / Linux认证社区 I O 性能评估【监控命令+性能指标 +iostat 使用】1磁盘 I/O 性能监控命令1)iostat 命令iostat 命令主要通过观察物理磁盘的活动时间以及他们的平均传输速度，监控系统输入 / 输出设备负载。根据 iostat 命令产生的报告，用户可确定一个系统配置是否平衡，并据此在物理磁盘与适配器之间更好地平衡输入 / 输出负载。 iostat 工具的主要目的是通过监控磁盘的利用率，而探测到系统中的 I/O 瓶颈。 不同操作系统命令格式输出格式略有不同，管理员可以通过查看用户手册来确定它的用法。安装 iostat iostat 命令，如果没有使

2、用命令，则需要进行安装。安装命令apt-get install sysstat deb包下载地址 (Ubuntu Server 9.10) http:/ targz 包下载地址http:/pagesperso-orange.fr/sebastien.godard/sysstat-9.1.1.tar.gz 2)sar 命令sar 命令报告 CPU 的使用情况， I/O 以及其它系统行为。sar 命令可以收集，报告以及保存系统行为信息。以这种方式收集到的数据对于确定系统的时间周期特征和决定峰值使用时间是很有用的。但要注意的是，sar 命令自己运行时会产生相当数量的读写，因此最好在没有工作量的情况下

3、运行sar 统计，看看 sar 对总的统计数字有多大的影响。- 2磁盘 I/O性能指标在介绍磁盘 I/O 监控命令前，我们需要了解磁盘 I/O 性能监控的指标，以及每个指标的所揭示的武汉誉天. 独家授权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 1 页，共 7 页 - - - - - - - - - 誉天 Cisco / Linux认证社区 I/O 性能监控的指标主要包括：1)每秒 I/O 数（IOPS 或 tps ）对于磁盘来说，一次磁盘的连续读

4、或者连续写称为一次磁盘 I/O, 磁盘的 IOPS 就是每秒磁盘连续读次数和连续写次数之和。当传输小块不连续数据时，该指标有重要参考意义。2)吞吐量（ Throughput）指硬盘传输数据流的速度，传输数据为读出数据和写入数据的和。其单位一般为 Kbps, MB/s 等。当传输大块不连续数据的数据，该指标有重要参考作用。3)平均 I/O 数据尺寸平均 I/O 数据尺寸为吞吐量除以 I/O 数目，该指标对揭示磁盘使用模式有重要意义。一般来说，如果平均 I/O 数据尺寸小于 32K ，可认为磁盘使用模式以随机存取为主；如果平均每次 I/O 数据尺寸大于 32K ，可认为磁盘使用模式以顺序存取为主。

5、4)磁盘活动时间百分比（Utilization ）%util 磁盘处于活动时间的百分比，即磁盘利用率， 磁盘在数据传输和处理命令（如寻道） 处于活动状态。磁盘利用率与资源争用程度成正比，与性能成反比。 也就是说磁盘利用率越高，资源争用就越严重，性能也就越差，响应时间就越长。一般来说，如果磁盘利用率超过 70% ，应用进程将花费较长的时间等待 I/O 完成，因为绝大多数进程在等待过程中将被阻塞或休眠。5)服务时间（ ServiceTime）svctm 指磁盘读或写操作执行的时间，包括寻道，旋转时延，和数据传输等时间。其大小一般和磁盘性能有关， CPU/ 内存的负荷也会对其有影响，请求过多也会间接

6、导致服务时间的增加。如果该值持续超过 20ms ，一般可考虑会对上层应用产生影响。6)I/O 等待队列长度（Queue Length）指待处理的 I/O 请求的数目，如果 I/O 请求压力持续超出磁盘处理能力，该值将增加。如果单块磁盘的队列长度持续超过2，一般认为该磁盘存在 I/O 性能问题。 需要注意的是， 如果该磁盘为磁盘阵列虚拟的逻辑驱动器，需要再将该值除以组成这个逻辑驱动器的实际物理磁盘数目，以获得平均单块硬盘的 I/O 等待队列长度。7)等待时间（ Wait Time ）指磁盘读或写操作等待执行的时间，即在队列中排队的时间。如果 I/O 请求持续超出磁盘处理能力，意味着来不及处理的I

7、/O 请求不得不在队列中等待较长时间。通过监控以上指标，并将这些指标数值与历史数据，经验数据以及磁盘标称值对比，必要时结合 CPU 、内存、交换分区的使用状况，不难发现磁盘 I/O潜在或已经出现的问题。但如果避免和解决这些问题呢？这就需要利用到磁盘武汉誉天. 独家授权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 2 页，共 7 页 - - - - - - - - - 誉天 Cisco / Linux认证社区 性能优化方面的知识和技术。限于本文主题和篇

8、幅，仅列出一些常用的优化方法供读者参考：（1）调整数据布局，尽量将 I/O 请求较合理的分配到所有物理磁盘中；（2）对于 RAID 磁盘阵列， 尽量使应用程序 I/O 等于条带尺寸或者为条带尺寸的倍数。并选取合适的 RAID 方式，如 RAID10 ，RAID5 ；（3）增大磁盘驱动程序的队列深度，但不要超过磁盘的处理能力，否则，部分 I/O 请求会因为丢失而重新发出，这将降低性能；（4）应用缓存技术减少应用存取磁盘的次数，缓存技术可应用在文件系统级别或者应用程序级别；（ 5）由于多数数据库中已包括经优化后的缓存技术，数据库 I/O 宜直接存取原始磁盘分区（rawpartition ）或者利用

9、绕过文件系统缓存的 DIO 技术（ direct IO ） ；（6）利用内存读写带宽远比直接磁盘 I/O 操作性能优越的特点，将频繁访问的文件或数据置于内存中。- 3iostat 使用命令 : iostat -c|-d -k -t 间隔描述 检测次数 参 数：-c : 仅显示 cpu 的状态-d : 仅显示存储设备的状态，不可以和-c 一起使用-k : 默认显示的是读入读出的block 信息，用 -k 可以改成KB 大小来显示-t: 显示日期-p device | ALL : device 为某个设备或者某个分区，如果使用ALL ，就表示要显示所有分区和设备的信息1）基本使用武汉誉天. 独家授

10、权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 3 页，共 7 页 - - - - - - - - - 誉天 Cisco / Linux认证社区 -k 1 10 说明：参数 -d 表示，显示设备（磁盘）使用状态；-k 某些使用block 为单位的列强制使用Kilobytes为单位； 1 10 表示，数据显示每隔1 秒刷新一次，共显示10 次，每一次的统计都是上一次的统计时间到这次的统计时间之间的统计数据。2）-x 参数使用 -x 参数我们可以获得更多

11、统计信息。$iostat -d -x -k 1 10 3）-c 参数获取 cpu 部分状态值$iostat -c 1 10 4）常见用法$iostat -d -k 1 10 #查看 TPS 和吞吐量信息$iostat -d -x -k 1 10 #查看设备使用率（%util ） 、响应时间（ await）$iostat -c 1 10 #查看 cpu 状态5)mpstat 命令mpstat 是 MultiProcessor Statistics 的缩写，是实时系统监控工具。其报告与CPU 的一些统计信息，这些信息存放在/proc/stat 文件中。 在多 CPUs 系统里， 其不但能查看所有C

12、PU 的平均状况信息，而且能够查看特定CPU 的信息。下面只介绍mpstat 与 CPU 相关的参数，mpstat 的语法如下：mpstat -P |ALL internal count 参数解释-P |ALL 表示监控哪个CPU， cpu 在0,cpu 个数 -1中取值internal 相邻的两次采样的间隔时间count 采样的次数， count 只能和 delay 一起使用武汉誉天. 独家授权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 4 页，

13、共 7 页 - - - - - - - - - 誉天 Cisco / Linux认证社区 则显示系统启动以后所有信息的平均值。有interval 时，第一行的信息自系统启动以来的平均信息。（1）$mpstat mpstat 不带参数时，输出为从系统启动以来的平均值。（2）$mpstat-P ALL 2 3 2 秒产生所有处理器的统计数据报告，统计三次，默认输出所有的处理器的统计数据；（3）$mpstatP 0 2 3 2 秒产生 0 号处理器的统计数据报告，统计三次；4iostat 相关参数说明参数英文说明说明rrqm/s read request merge 每秒进行 merge 的读操作数

14、目。即 delta(rmerge)/s wrqm/s write request merge 每秒进行 merge 的写操作数目。即 delta(wmerge)/s r/s read 每秒完成的读 I/O 设备次数。即 delta(rio)/s w/s write 每秒完成的写 I/O 设备次数。即 delta(wio)/s rsec/s read section 每秒读扇区数。即 delta(rsect)/s wsec/s write section 每秒写扇区数。即 delta(wsect)/s rkB/s read kilo byte 每秒读 K 字节数。是 rsect/s 的一半，因为

15、每扇区大小为512 字节。 (需要计算 ) wkB/s write kilo byte 每秒写 K 字节数。是 wsect/s 的一半。 (需要计算 ) avgrq-sz average request size 平 均 每 次 设 备I/O操 作 的 数 据 大 小( 扇 区 ) 。delta(rsect+wsect)/delta(rio+wio) avgqu-sz average queue size 平均 I/O 队列长度。即 delta(aveq)/s/1000 (因为 aveq的单位为毫秒) await average wait 平均每次设备I/O 操作的等待时间(毫秒 )。即 de

16、lta(ruse+wuse)/delta(rio+wio) svctm service time 平均每次设备I/O 操作的服务时间(毫秒 )。即 delta(use)/delta(rio+wio) %util utilty 一秒中有百分之多少的时间用于 I/O 操作，或者说一秒中有多少时间 I/O 队列是非空的。即 delta(use)/s/1000 (因为 use的单位为毫秒 ) 如果 %util 接近 100% ，说明产生的I/O 请求太多， I/O 系统已经满负荷，该磁盘可能存在瓶颈，idle小于 70% IO 压力就较大了 ,一般读取速度有较多的wait。 同时可以结合vmstat

17、（virtual memory status ）查看 b 参数 (等待资源的进程数)和 wa 参数 (IO 等待所占用的CPU 时间的百分比 ,高过 30%时 IO 压力高) 武汉誉天. 独家授权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 5 页，共 7 页 - - - - - - - - - 誉天 Cisco / Linux认证社区 await (因为同时等待的请求的等待时间被重复计算了)，svctm 的大小一般和磁盘性能有关，CPU/内存的负荷

18、也会对其有影响，请求过多也会间接导致svctm 的增加。 await 的大小一般取决于服务时间(svctm) 以及 I/O 队列的长度和 I/O 请求的发出模式。如果 svctm 比较接近 await ， 说明 I/O 几乎没有等待时间； 如果 await 远大于 svctm ，说明 I/O 队列太长，应用得到的响应时间变慢，如果响应时间超过了用户可以容许的范围，这时可以考虑更换更快的磁盘，调整内核 elevator 算法，优化应用，或者升级 CPU 。队列长度 (avgqu-sz)也可作为衡量系统 I/O 负荷的指标， 但由于 avgqu-sz 是按照单位时间的平均值，所以不能反映瞬间的 I

19、/O 洪水。5例子 (I/O 系统 vs. 超市排队 ) 举一个例子，我们在超市排队 checkout 时，怎么决定该去哪个交款台呢? 首当是看排的队人数，5个人总比20 人要快吧 ? 除了数人头，我们也常常看看前面人购买的东西多少，如果前面有个采购了一星期食品的大妈，那么可以考虑换个队排了。还有就是收银员的速度了，如果碰上了连钱都点不清楚的新手，那就有的等了。另外，时机也很重要，可能 5 分钟前还人满为患的收款台，现在已是人去楼空，这时候交款可是很爽啊，当然，前提是那过去的 5 分钟里所做的事情比排队要有意义(不过我还没发现什么事情比排队还无聊的)。I/O 系统也和超市排队有很多类似之处:

20、?r/s+w/s 类似于交款人的总数? 平均队列长度 (avgqu-sz)类似于单位时间里平均排队人的个数? 平均服务时间 (svctm)类似于收银员的收款速度? 平均等待时间 (await) 类似于平均每人的等待时间? 平均 I/O 数据 (avgrq-sz)类似于平均每人所买的东西多少?I/O 操作率 (%util) 类似于收款台前有人排队的时间比例。参数输出的分析#iostat -x 1 avg-cpu: %user %nice %sys %idle 16.24 0.00 4.31 79.44 Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s rkB

21、/s wkB/s avgrq-sz avgqu-sz await svctm %util sda 0.00 44.90 1.02 27.55 8.16 579.59 4.08 289.80 20.57 22.35 78.21 5.00 14.29 武汉誉天. 独家授权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 6 页，共 7 页 - - - - - - - - - 誉天 Cisco / Linux认证社区 iostat 输出表明秒有 28.57 次

22、设备 I/O 操作 : 总 IO(io)/s=r/s( 读)+w/s(写)=1.02+27.55 = 28.57 ( 次/秒) 其中写操作占了主体(w:r = 27:1) 平均每次设备I/O 操作只需要5ms 就可以完成， 但每个 I/O 请求却需要等上78ms，为什么 ? 因为发出的 I/O 请求太多(每秒钟约 29 个)，假设这些请求是同时发出的，那么平均等待时间可以这样计算: 平均等待时间 =单个 I/O 服务时间 * ( 1 + 2 + + 请求总数 -1) /请求总数应用到上面的例子: 平均等待时间= 5ms * (1+2+ +28)/29 = 70ms ，和 iostat 给出的

23、78ms 的平均等待时间很接近。这反过来表明 I/O 是同时发起的。每秒发出的 I/O 请求很多(约 29 个)，平均队列却不长(只有 2 个左右 )，这表明这 29 个请求的到来并不均匀，大部分时间 I/O 是空闲的。一秒中有 14.29% 的时间 I/O 队列中是有请求的， 也就是说，85.71% 的时间里 I/O 系统无事可做，所有 29 个 I/O 请求都在 142 毫秒之内处理掉了。delta(ruse+wuse)/delta(io)= await = 78.21 = delta(ruse+wuse)/s =78.21 * delta(io)/s = 78.21*28.57 =223

24、2.8，表明每秒内的I/O 请求总共需要等待2232.8ms。所以平均队列长度应为2232.8ms/1000ms = 2.23 ，而 iostat 给出的平均队列长度 (avgqu-sz) 却为 22.35 ，为什么 ?! 因为 iostat 中有 bug ，avgqu-sz 值应为 2.23 ，而不是 22.35 。我们可以根据这些数据分析出 I/O 请求的模式，以及 I/O 的速度和响应时间。参考 URL：http:/bbs.linuxtone.org/forum-viewthread-tid-2288-highlight-IO.html http:/bbs.linuxtone.org/thread-4214-1-3.html http:/ http:/ 武汉誉天. 独家授权Cisco / RHCE 培训 名师资料总结 - - -精品资料欢迎下载 - - - - - - - - - - - - - - - - - - 名师精心整理 - - - - - - - 第 7 页，共 7 页 - - - - - - - - -