2022年HPUX操作系统性能分析指南 .pdf

HPUX 性能检查指南HPUX 系统性能检查指南（V1.0）中国惠普有限公司张天2008-7修改记录名师资料总结-精品资料欢迎下载-名师精心整理-第 1 页，共 15 页 -HPUX 性能检查指南编号日期描述版本作者审核发布日期1 2008-07-28 建立文档1.0 目录1 前言.3 1.1 编写目的 .3 1.2 预期读者 .3 2 系统性能监控综述.3 2.1 监控资源对象和标准.3 2.2 分析工具 .4 3 监控系统总体运行状态.4 4 性能状态的判定流程和监命令.6 名师资料总结-精品资料欢迎下载-名师精心整理-第 2 页，共 15 页 -HPUX 性能检查指南4.1 性能状态的判定流程.6 4.2 内存分析 .7 4.3 DISK IO 分析.10 4.4 CPU 分析 .12 4.5 网络.15 1 前言1.1 编写目的1.2 预期读者基础设施系统管理员，相关运行维护技术人员。2 系统性能监控综述2.1 监控资源对象和标准在HP的系统平台上，我们通常有 4类资源需要我们的关注分别为：CPU,内存，磁盘IO和网络。一般来说此四类资源与系统整体性能息息相关，在日常的维护中，我们需要经常性的对这些资源的使用情况加以跟踪分析，以确定当前系统资源是否与实际业务压力相符，如果存在问题则通过系统名师资料总结-精品资料欢迎下载-名师精心整理-第 3 页，共 15 页 -HPUX 性能检查指南或应用的调整加以解决。以下为 HPUX 各类资源的性能阀值。值得注意的这里的阀值并非指系统峰值而是持续值。只有当系统持续超越这些阀值的时候才能够判断相应的资源为系统瓶颈。Memory Bottleneck Both vhand and swapper active Disk Bottleneck Disk utilization 50%Request queues 3 CPU Bottleneck CPU utilization 90%Run queues 3 per processor Network Bottleneck Collisions/out-bound packets 5%2.2 分析工具HPUX操作系统提供的用于检查系统性能的命令和工具主要分为两种：1.标准UNIX 命令和自带的性能分析工具；2.收费的性能分析软件。常用工具：标准UNIX 命令：检查CPU 状态的命令sar u;sar q;top；vmstat 检查内存状态的命令vmstat，sar-b，top，swapinfo 检查IO状态的命令sar d;sar u;sar b;检查网络状态的命令netstat 收费的性能分析软件为 GLANCE，是由 HP 提供的一个功能强大的性能分析工具，可以监控几乎所有的系统资源。同时 HP还提供 OVPM和MWA 等作为后台性能状态收集工具。3 监控系统总体运行状态总体的性能状态收集一般是通过GLANCE 来简单判断系统的总体性能。值得注意的是，我们需要关注的是持续的性能峰值，对于瞬时峰值则不必太关注。通过GLANCE 的默认界面（下图）我们可以知道系统资源的大体使用情况（红色标识部分），其中我们可以看到：CPU 使用率为 100；DISK 使用率为 100；内存使用率为 75；SWAP使用率为 59；由此我们可以简单的判断系统存在很大的CPU 及IO 压力。从而判断了整体的性能状态和资源使用情况。然后通过后文介绍的方法对每一种不同的资源进行具体分析。需要注意的是下图中 DISK 100%,并非指系统全部硬盘，而是指使用率最高的1块或者若干块硬盘，也就是说CPU 的使用率取所有的 CPU使用率的平均值，而DISK IO 则取最忙的硬盘的峰值。在GLANCE 监控界面的左上角可以观察到服务器名，当前系统时间，而右上角则是相关资源的当前刷新值，平均值和自从GLANCE 运行起来后的该项资源所达到的最高值。界面下方列出各个进程对资源的实际使用情况，这些进程默认是按照对 CPU消耗的使用率由大到小进行排序。名师资料总结-精品资料欢迎下载-名师精心整理-第 4 页，共 15 页 -HPUX 性能检查指南除了GLANCE 我们也可以通过 TOP 来进行判断，但是没有 GLANCE 直观。此处不再举例说明。同时通过 GLANCE(热键A)我们可以用实现定义好的方法判定每一种应用对系统资源的使用情况，但是实现此功能需要进行一定的配置名师资料总结-精品资料欢迎下载-名师精心整理-第 5 页，共 15 页 -HPUX 性能检查指南4 性能状态的判定流程和监命令4.1 性能状态的判定流程一般来说我们从上图发现系统存在一定压力后，可以采用如下方式对系统各项资源进行判定，(下图取自 HPUX PERFORMANCE TUNING).值得注意的是 DISK 使用率 50%是一个理想值，更多情况下我们通过磁盘响应时间和DISK QUEUE 来判断是否存在 IO 瓶颈。磁盘使用率只作为参考值而非关键标准。名师资料总结-精品资料欢迎下载-名师精心整理-第 6 页，共 15 页 -HPUX 性能检查指南上面的监控流程，主要是参考GLANCE，如果相关主机上没有 GLANCE，那么可以通过VMSTAT 或者SAR 来进行判断。4.2 内存分析内存作为系统重要的资源对于减少IO 访问提高应用响应速度有着重要的意义。A 判断条件.内存使用率高SWAP区被使用，.持续的页面 PAGE OUT（SWAP和VHAND 进程持续激活）B.相关判定命令内存不足的判定条件主要是是否有持续的PAGE OUT和 VHAND/SWAPPER进程是否持续激活所以所有的工具以观测以是否页面交换为主。下图中红色字体为需要观测的值：首先GLANCE 中使用热键（d）观测是否对 VIRTUAL MEMEORY由持续读写，如果由表明系统对交换区持续访问。名师资料总结-精品资料欢迎下载-名师精心整理-第 7 页，共 15 页 -HPUX 性能检查指南其次 GLANCE 中使用热键（m），观测是否由大量的 VM 读写，同时可以观测到系统的内存使用情况。如还有多少自由内存，及系统、应用、BUFFER 等分别对系统的占用情况。名师资料总结-精品资料欢迎下载-名师精心整理-第 8 页，共 15 页 -HPUX 性能检查指南第三 GLANCE 中使用热键（v）观测是否相对应的交换区设备有持续且大量的读写名师资料总结-精品资料欢迎下载-名师精心整理-第 9 页，共 15 页 -HPUX 性能检查指南第四，可以观测 SWAPINFO ATM 的输出，看看交换区是否有实际的使用，注意此处仅仅观测实际的交换区的情况，对于伪交换区则不考虑。第五，通过 VMSTAT 可以观测到是否有持续的 PO 4.3 DISK IO 分析 IO 作为系统重要的资源对于减少IO 访问提高应用响应速度有着重要的意义。A监控条件.DISK 使用率高DISK QUEUE3.AVSERV/AVWAIT 明显变长B.相关命令通过GLANCE(热键d)可以判定系统整体的 IO活动，此处不再举例通过GLANCE(热键u)可以找到最忙是哪些硬盘，下图中可以看到100忙的硬盘机器实际流量，等待队列和繁忙度等信息，通过热键（S）可以选择相应的硬盘，可以看到相关硬盘上的VG 和LV信息。名师资料总结-精品资料欢迎下载-名师精心整理-第 10 页，共 15 页 -HPUX 性能检查指南如果没有 GLANCE 我们可以使用 sar d/sar u来判断 IO 活动。在sar-d 中注意的是 AVQUE(IO 等列队列，此值应当小于 3)；AVSERV(后台IO 响应时间)HP-UX setlserv B.11.11 U 9000/800 05/08/08 18:59:32 device%busy avque r+w/s blks/s avwait avserv 18:59:33 c22t1d2 24.51 0.50 53 4945 0.00 4.62 c22t1d3 0.98 0.50 2 4 0.00 0.40 18:59:34 c0t6d0 3.00 0.50 3 20 0.00 13.52 c3t6d0 1.00 0.50 2 16 0.00 6.80 c22t1d2 22.00 0.50 30 3648 0.00 7.44 18:59:35 c0t6d0 3.00 0.50 5 42 0.00 7.73 c3t6d0 2.00 0.50 4 38 0.00 6.48 c22t1d2 6.00 0.50 28 3328 0.00 1.85 18:59:36 c0t6d0 2.00 0.50 4 24 0.00 6.38 c3t6d0 2.00 0.50 2 16 0.00 10.97 c22t1d2 3.00 0.50 31 2768 0.00 0.97 18:59:37 c0t6d0 7.00 0.50 13 116 0.00 17.42 c3t6d0 6.00 0.50 10 104 0.00 17.94 c22t1d2 2.00 0.50 39 3760 0.00 0.73 18:59:38 c0t6d0 2.00 0.50 2 12 0.00 8.91 c3t6d0 1.00 0.50 1 8 0.01 9.30 名师资料总结-精品资料欢迎下载-名师精心整理-第 11 页，共 15 页 -HPUX 性能检查指南 c22t1d2 2.00 0.50 24 2320 0.00 0.58 18:59:39 c0t6d0 0.99 0.50 1 4 0.00 6.67 c3t6d0 0.99 0.50 1 4 0.01 6.60 c22t1d2 4.95 0.50 30 2378 0.00 1.75 18:59:40 c3t6d0 1.01 0.50 1 8 0.00 6.43 c22t1d2 4.04 0.50 59 5834 0.00 0.69 18:59:41 c0t6d0 0.99 0.50 1 8 0.00 10.45 c22t1d2 1.98 0.50 47 4420 0.00 0.55 18:59:42 c0t6d0 2.04 0.50 1 2 0.00 11.45 c3t6d0 1.02 0.50 1 2 0.01 2.68 c22t1d2 2.04 0.50 36 2190 0.00 0.48 Average c22t1d2 7.29 0.50 38 3562 0.00 1.95 Average c22t1d3 0.10 0.50 0 0 0.00 0.40 Average c0t6d0 2.10 0.50 3 23 0.00 12.59 Average c3t6d0 1.50 0.50 2 20 0.00 12.08如果系统 sar-u 中WIO 也是我们需要关注的一点，一般来说持续高的WIO(20%).表明系统 IO 性能不足，造成 CPU 因等待 IO完成而出现等待。但IO 性能不是导致 WIO 过高的唯一因素。4.4 CPU 分析系统CPU 是整个系统的核心资源，通常也是系统的最繁忙部分，某些用户应用需要进行大量计算，导致 CPU 保持繁忙状态。同时对于多CPU 系统，系统应用应当保持足够的并发毒否则不能充分利用多个 CPU 的系统资源.A监控标准.CPU 使用率大于 90 .CPU QUEUE 大于3 B.相关判定命令在判断 CPU 压力之前我们首先要明白的是系统到底有多少CPU 资源，其次 CPU 资源具体的使用情况，且如果 CPU 压力持续高，那么我们需要搞清楚哪些应用、进程在使用CPU。常用的工具有 glance,sar u,sar q,vmstat,top等等。首先glance（热键 a）,我们可以看到 CPU 整体的使用情况和实际压力，特别是 LoadAvg的长度，如果该数据持续接近或者大于3，表明系统压力过大，CPU 可能处理不过来，此时如果能够排除是SYSTEM 过多的消耗了 CPU 的话，则应当考虑扩容或者优化程序。名师资料总结-精品资料欢迎下载-名师精心整理-第 12 页，共 15 页 -HPUX 性能检查指南如果没有 GLANCE 我们可以通过 sar q来判定。其次通过 GLANCE(热键c),我们可以看到 CPU 的实际消耗情况。对于一个良好的系统我们认为CPU 消耗USER MODE 的比例应当远远超过 SYSTEM MODE最好达到 4：1的状态（最理想值）。USER MODE=USER+NICEREALTIME NEGATIVE NICE 名师资料总结-精品资料欢迎下载-名师精心整理-第 13 页，共 15 页 -HPUX 性能检查指南如果没有 GLANCE，我们也可以通过 sar-u 来进行分析在下图中 sar u 1 10 表示每秒收集一次，一共十次。最后的AVERAGE为这十次的最终平均值。同时通过 VMSTAT的输出我们也可以了解到CPU 的SYS/USER 百分比。第三步我们可以通过 glance(热键A)来判断每一类应用对 CPU 的消耗情况，此界面同样适用于分析各类应用对 IO、MEM 的消耗。下图可见 ORACLE 类应用的实际消耗：CPU 76.4%;内存3.07GB，每个时间间隔产生 943次逻辑IO，和645次物理 IO.是系统资源最大的消耗者。名师资料总结-精品资料欢迎下载-名师精心整理-第 14 页，共 15 页 -HPUX 性能检查指南4.5 网络网络监控相对于其他资源的监控而言比较简单。一般来说我们只需要简单的通过 netstat ni,netstat p tcp 等即可。也可以通过 GLANCE查看网络状态A.监控标准 OERRS 值为0或者保持稳定 COLL 小于5，PING B.判断工具首先可以通过 netstat ni，如下图红色字体，#/netstat-ni Name Mtu Network Address Ipkts Ierrs Opkts Oerrs Coll lan2*1500 none none 0 0 0 0 0 lan1:1 1500 135.64.128.0 135.64.128.43 21 0 0 0 0 lan1 1500 135.64.128.0 135.64.128.33 14573359 0 11835179 0 0 lan0 1500 192.1.1.0 192.1.1.1 213172 0 398589 0 0 lo0 4136 127.0.0.0 127.0.0.1 2227435 0 2227435 0 0 在上图中我们可以看到网络的工作情况包括冲突率，错误率，进出包数量等等其次通过 GLANCE 我们也可以看到相关情况（热键l）此处不在列出名师资料总结-精品资料欢迎下载-名师精心整理-第 15 页，共 15 页 -