PHPor 的Blog

iostat 命令报告cpu利用率和磁盘利用率两项内容。

iostat -c 只查看cpu利用率

iostat -d 只查看磁盘利用率

iostat device 显示指定磁盘的利用率信息 如： iostat sda

iostat -p device 显示指定磁盘的各个分区的利用率信息 如： iostat -p sda 注意device是磁盘，不能是分区

iostat -x 显示磁盘利用率的更详细信息 注意：-x -p不能同时使用，-x -c同时使用也是没有意义的

iostat -k 以KB为单位显示磁盘统计信息

iostat -m 以MB为单位显示磁盘统计信息

iostat interval 即：隔inerval时间显示一次，如，iostat 2 隔两秒显示一次，直到ctrl+c 结束

iostat interval count 即：隔inerval时间显示一次，显示count 次数结束，如，iostat 2 6 隔2秒显示一次，显示6次结束

显示信息解释：

cpu信息：

avg-cpu: %user %nice %system %iowait %steal %idle
0.08 0.07 1.38 0.14 0.00 98.33

%user ：cpu处于用户空间的时间

%nice ：cpu花费在更改级别后的进程上的时间比

%system：cpu花费在执行内核代码上的时间比

%iowait： cpu花费在等待io上的时间比 该值太大说明io是瓶颈

%steal ： ？？？

%idle ： cpu的空闲时间比

磁盘信息：

Device: tps kB_read/s kB_wrtn/s kB_read kB_wrtn
sda 2.36 0.56 34.11 11801313 713114808
sda1 3.84 0.20 15.29 4147757 319673956
sda2 3.36 0.20 13.36 4242258 279425316

tps ：
Indicate the number of transfers per second that were issued to the device. A transfer is an I/O
request to the device. Multiple logical requests can be combined into a single I/O request to the
device. A transfer is of indeterminate size.

# iostat -x 1 10
Linux 2.6.18-92.el5xen    02/03/2009

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           1.10    0.00    4.82   39.54    0.07   54.46

Device:         rrqm/s   wrqm/s   r/s   w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util
sda               0.00     3.50  0.40  2.50     5.60    48.00    18.48     0.00    0.97   0.97   0.28
sdb               0.00     0.00  0.00  0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
sdc               0.00     0.00  0.00  0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
sdd               0.00     0.00  0.00  0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
sde               0.00     0.10  0.30  0.20     2.40     2.40     9.60     0.00    1.60   1.60   0.08
sdf              17.40     0.50 102.00  0.20 12095.20     5.60   118.40     0.70    6.81   2.09  21.36
sdg             232.40     1.90 379.70  0.50 76451.20    19.20   201.13     4.94   13.78   2.45  93.16

rrqm/s:   每秒进行 merge 的读操作数目。即 delta(rmerge)/s
wrqm/s:  每秒进行 merge 的写操作数目。即 delta(wmerge)/s
r/s:           每秒完成的读 I/O 设备次数。即 delta(rio)/s
w/s:         每秒完成的写 I/O 设备次数。即 delta(wio)/s
rsec/s:    每秒读扇区数。即 delta(rsect)/s
wsec/s:  每秒写扇区数。即 delta(wsect)/s
rkB/s:      每秒读K字节数。是 rsect/s 的一半，因为每扇区大小为512字节。(需要计算)
wkB/s:    每秒写K字节数。是 wsect/s 的一半。(需要计算)
avgrq-sz: 平均每次设备I/O操作的数据大小 (扇区)。delta(rsect+wsect)/delta(rio+wio)
avgqu-sz: 平均I/O队列长度。即 delta(aveq)/s/1000 (因为aveq的单位为毫秒)。
await:    平均每次设备I/O操作的等待时间 (毫秒)。即 delta(ruse+wuse)/delta(rio+wio)
svctm:   平均每次设备I/O操作的服务时间 (毫秒)。即 delta(use)/delta(rio+wio)
%util:      一秒中有百分之多少的时间用于 I/O 操作，或者说一秒中有多少时间 I/O 队列是非空的。即 delta(use)/s/1000 (因为use的单位为毫秒)

如果 %util 接近 100%，说明产生的I/O请求太多，I/O系统已经满负荷，该磁盘
可能存在瓶颈。
idle小于70% IO压力就较大了,一般读取速度有较多的wait.
同时可以结合vmstat 查看查看b参数(等待资源的进程数)和wa参数(IO等待所占用的CPU时间的百分比,高过30%时IO压力高)

另外还可以参考
svctm 一般要小于 await (因为同时等待的请求的等待时间被重复计算了)，svctm 的大小一般和磁盘性能有关，CPU/内存的负荷也会对其有影响，请求过多也会间接导致 svctm 的增加。await 的大小一般取决于服务时间(svctm) 以及 I/O 队列的长度和 I/O 请求的发出模式。如果 svctm 比较接近 await，说明 I/O 几乎没有等待时间；如果 await 远大于 svctm，说明 I/O 队列太长，应用得到的响应时间变慢，如果响应时间超过了用户可以容许的范围，这时可以考虑更换更快的磁盘，调整内核 elevator 算法，优化应用，或者升级 CPU。
队列长度(avgqu-sz)也可作为衡量系统 I/O 负荷的指标，但由于 avgqu-sz 是按照单位时间的平均值，所以不能反映瞬间的 I/O 洪水。

  别人一个不错的例子.(I/O 系统 vs. 超市排队)

举一个例子，我们在超市排队 checkout 时，怎么决定该去哪个交款台呢? 首当是看排的队人数，5个人总比20人要快吧? 除了数人头，我们也常常看看前面人购买的东西多少，如果前面有个采购了一星期食品的大妈，那么可以考虑换个队排了。还有就是收银员的速度了，如果碰上了连 钱都点不清楚的新手，那就有的等了。另外，时机也很重要，可能 5 分钟前还人满为患的收款台，现在已是人去楼空，这时候交款可是很爽啊，当然，前提是那过去的 5 分钟里所做的事情比排队要有意义 (不过我还没发现什么事情比排队还无聊的)。

I/O 系统也和超市排队有很多类似之处:

r/s+w/s 类似于交款人的总数
平均队列长度(avgqu-sz)类似于单位时间里平均排队人的个数
平均服务时间(svctm)类似于收银员的收款速度
平均等待时间(await)类似于平均每人的等待时间
平均I/O数据(avgrq-sz)类似于平均每人所买的东西多少
I/O 操作率 (%util)类似于收款台前有人排队的时间比例。

我们可以根据这些数据分析出 I/O 请求的模式，以及 I/O 的速度和响应时间。

下面是别人写的这个参数输出的分析

# iostat -x 1
avg-cpu: %user %nice %sys %idle
16.24 0.00 4.31 79.44
Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s rkB/s wkB/s avgrq-sz avgqu-sz await svctm %util
/dev/cciss/c0d0
0.00 44.90 1.02 27.55 8.16 579.59 4.08 289.80 20.57 22.35 78.21 5.00 14.29
/dev/cciss/c0d0p1
0.00 44.90 1.02 27.55 8.16 579.59 4.08 289.80 20.57 22.35 78.21 5.00 14.29
/dev/cciss/c0d0p2
0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00

上面的 iostat 输出表明秒有 28.57 次设备 I/O 操作: 总IO(io)/s = r/s(读) +w/s(写) = 1.02+27.55 = 28.57 (次/秒) 其中写操作占了主体 (w:r = 27:1)。

平均每次设备 I/O 操作只需要 5ms 就可以完成，但每个 I/O 请求却需要等上 78ms，为什么? 因为发出的 I/O 请求太多 (每秒钟约 29 个)，假设这些请求是同时发出的，那么平均等待时间可以这样计算:

平均等待时间 = 单个 I/O 服务时间 * ( 1 + 2 + … + 请求总数-1) / 请求总数

应用到上面的例子: 平均等待时间 = 5ms * (1+2+…+28)/29 = 70ms，和 iostat 给出的78ms 的平均等待时间很接近。这反过来表明 I/O 是同时发起的。

每秒发出的 I/O 请求很多 (约 29 个)，平均队列却不长 (只有 2 个 左右)，这表明这 29 个请求的到来并不均匀，大部分时间 I/O 是空闲的。

一秒中有 14.29% 的时间 I/O 队列中是有请求的，也就是说，85.71% 的时间里 I/O 系统无事可做，所有 29 个 I/O 请求都在142毫秒之内处理掉了。

delta(ruse+wuse)/delta(io) = await = 78.21 => delta(ruse+wuse)/s =78.21 * delta(io)/s = 78.21*28.57 = 2232.8，表明每秒内的I/O请求总共需要等待2232.8ms。所以平均队列长度应为 2232.8ms/1000ms = 2.23，而 iostat 给出的平均队列长度 (avgqu-sz) 却为 22.35，为什么?! 因为 iostat 中有 bug，avgqu-sz 值应为 2.23，而不是 22.35。

部分摘自：http://www.cnblogs.com/rootq/articles/1400115.html

[root@supersun ~]# cat /proc/loadavg
0.43 0.26 0.29 1/125 4133
这里的平均负载也就是可运行的进程的平均数
前三个值分别对应系统在5分钟、10分钟、15分钟内的平均负载
第四个值的分子是正在运行的进程数，分母是进程总数，最后一个是最近运行的进程ID号
现在我们将平均负载的值写到虚拟终端的标题栏上。

特别是对于cache目录，如果磁盘出现问题，需要我们手动重建cache目录结构可能是很麻烦的事，我们也很容易想到能不能只复制目录结构而不复制其中的文件的问题（因为复制文件会更慢）；高人就说了，

find . -type d |sed ‘s/\./\/dst’ | xargs mkdir -p

其实这样find的可能很慢，我们不如手动来建，比如3级目录：

mkdir 0
cd 0
mkdir 0
cd 0
seq 0 99 | mkdir
cd ..
seq 1 99 | xargs -n 1 cp -au 0
cd ..
seq 1 99 | xargs -n 1 cp -au 0

这样，很简单的脚本就完成了，而且速度要快的多

不过写脚本用for循环更方便，不知道速度怎么样

[root@ljj procps-3.2.7]# man vmstat
VMSTAT(8) Linux Administrator‘s Manual VMSTAT(8)

NAME
vmstat – Report virtual memory statistics

SYNOPSIS
vmstat [-a] [-n] [delay [ count]]
vmstat [-f] [-s] [-m]
vmstat [-S unit] 指定显示的数字的单位(默认为K) 如： vmstat -S M 1 5
vmstat [-d]
vmstat [-p disk partition] 显示指定分区的信息 如： vmstat -p sda1
vmstat [-V]

DESCRIPTION
vmstat reports information about processes, memory, paging, block IO, traps, and cpu activity.

The first report produced gives averages since the last reboot. Additional reports give information on a sampling
period of length delay. The process and memory reports are instantaneous in either case.

Options
The -a switch displays active/inactive memory, given a 2.5.41 kernel or better.

The -f switch displays the number of forks since boot. This includes the fork, vfork, and clone system calls, and
is equivalent to the total number of tasks created. Each process is represented by one or more tasks, depending on
thread usage. This display does not repeat.

The -m displays slabinfo.

The -n switch causes the header to be displayed only once rather than periodically.

The -s switch displays a table of various event counters and memory statistics. This display does not repeat.

delay is the delay between updates in seconds. If no delay is specified, only one report is printed with the aver-
age values since boot.

count is the number of updates. If no count is specified and delay is defined, count defaults to infinity.

The -d reports disk statistics (2.5.70 or above required)

The -p followed by some partition name for detailed statistics (2.5.70 or above required)

The -S followed by k or K or m or M switches outputs between 1000, 1024, 1000000, or 1048576 bytes

The -V switch results in displaying version information.

FIELD DESCRIPTION FOR VM MODE
Procs
r: The number of processes waiting for run time. 可执行队列里的进程个数
b: The number of processes in uninterruptible sleep. 深度睡眠的进程个数（等待资源但不可中断）

Memory
swpd: the amount of virtual memory used. 使用的虚拟内存的数量（太大说明可能物理内存不足）
free: the amount of idle memory. 空闲的内存数量（太大则浪费，太小则为内存不足）
buff: the amount of memory used as buffers. 用做buffer的内存数量（不知道怎么解释）
cache: the amount of memory used as cache. 用做cache的内存数量（不知道怎么解释）
inact: the amount of inactive memory. (-a option) 不活动的内存数量（使用-a选项才显示）（不知道怎么解释）
active: the amount of active memory. (-a option) 活动的内存数量（使用-a选项才显示）（不知道怎么解释）

Swap （这两个值都不应该太大，最好为0，基本上不要拿硬盘当内存用）
si: Amount of memory swapped in from disk (/s). 每秒从交换内存调入内存的数量
so: Amount of memory swapped to disk (/s). 每秒写入交换内存的数量

IO
bi: Blocks received from a block device (blocks/s). 每秒从设备读入内存的数量
bo: Blocks sent to a block device (blocks/s). 每秒从内存写入设备的数量

System （这里我解释不清楚）
in: The number of interrupts per second, including the clock. 每秒钟cpu中断的次数
cs: The number of context switches per second. cpu每秒钟时间片的切换次数（异步io可能会导致切换频繁，关于同步io与异步io，一般来讲，大数据量的io适合使用异步io，非常小的数据量的io考虑使用同步io）

CPU
These are percentages of total CPU time.
us: Time spent running non-kernel code. (user time, including nice time) cpu 执行非内核代码花费的时间
sy: Time spent running kernel code. (system time) cpu执行内核代码花费的时间
id: Time spent idle. Prior to Linux 2.5.41, this includes IO-wait time. cpu空闲时间
wa: Time spent waiting for IO. Prior to Linux 2.5.41, shown as zero. cpu等待io的时间，(如果该值与id成反比，说明基本是同步io，这时，如果该值总是很大的话，io就是瓶颈，可以考虑使用异步io)

FIELD DESCRIPTION FOR DISK MODE
Reads
total: Total reads completed successfully 共读了多少次
merged: grouped reads (resulting in one I/O) 分了多少组（多次io可能合并为一组来读取）
sectors: Sectors read successfully 读的扇区的数目
ms: milliseconds spent reading 读数据花费的毫秒数

Writes
total: Total writes completed successfully 共写了多少次
merged: grouped writes (resulting in one I/O) 分了多少组（多次io可能合并为一组来写）
sectors: Sectors written successfully 写扇区的数目
ms: milliseconds spent writing 写数据花费的毫秒数

IO
cur: I/O in progress
s: seconds spent for I/O

FIELD DESCRIPTION FOR DISK PARTITION MODE 使用 -p 选项时显示的信息
reads: Total number of reads issued to this partition 读该分区的次数
read sectors: Total read sectors for partition 从该分区读取的扇区数
writes : Total number of writes issued to this partition 写入该扇区的扇区数
requested writes: Total number of write requests made for partition 对该分区的写请求次数

FIELD DESCRIPTION FOR SLAB MODE
cache: Cache name
num: Number of currently active objects
total: Total number of available objects
size: Size of each object
pages: Number of pages with at least one active object
totpages: Total number of allocated pages
pslab: Number of pages per slab

NOTES
vmstat does not require special permissions.

These reports are intended to help identify system bottlenecks. Linux vmstat does not count itself as a running
process.

All linux blocks are currently 1024 bytes. Old kernels may report blocks as 512 bytes, 2048 bytes, or 4096 bytes.

Since procps 3.1.9, vmstat lets you choose units (k, K, m, M) default is K (1024 bytes) in the default mode

vmstat uses slabinfo 1.1 FIXME

FILES
/proc/meminfo
/proc/stat
/proc/*/stat

SEE ALSO
iostat(1), sar(1), mpstat(1), ps(1), top(1), free(1)

BUGS
Does not tabulate the block io per device or count the number of system calls.

AUTHORS
Written by Henry Ware <al172@yfn.ysu.edu>.
Fabian Fr<A8><A6>d<A8><A6>rick <ffrederick@users.sourceforge.net> (diskstat, slab, partitions…)

Throatwobbler Ginkgo Labs 27 July 1994 VMSTAT(8)
(END)

 

附：实例

1.

[junjie2@localhost ~]$ vmstat -S M 1 8
procs ———–memory———- —swap– —–io—- –system– —-cpu—-
r b swpd free buff cache si so bi bo in cs us sy id wa
0 1 8 14 662 134 0 0 0 0 0 0 0 0 85 14
0 1 8 14 663 134 0 0 240 296 1313 460 1 0 76 24
0 0 8 14 663 134 0 0 196 36 1316 464 0 1 84 14
0 2 8 15 662 134 0 0 240 172 1339 494 0 1 81 19
0 2 8 14 662 135 0 0 376 148 1426 625 1 1 71 29
0 2 8 14 663 134 0 0 372 240 1357 537 0 1 66 34
0 1 8 15 662 134 0 0 224 692 1318 458 1 1 66 33
0 0 8 15 662 134 0 0 292 284 1441 605 0 1 55 44

根据id和wa列来看，应该多采用的io为同步io，而且在io上存在一些瓶颈

 

2.

rpm 转换成cpio

rpm2cpio  a.rpm > a.cpio

解压cpio文件

Linux
cpio -idmv <a.cpio

AIX：
cpio -idcmv < a.cpio

HP-UX:
cpio -idcmv < a.cpio

 

1. 删除一个月内没有访问过的文件

find . -type f  -atime +30 | xargs rm -f 

 

Shell 条件判断总结

UNIX Shell 编程

一些条件判断 总结

-b file            若文件存在且是一个块特殊文件，则为真
-c file            若文件存在且是一个字符特殊文件，则为真
-d file            若文件存在且是一个目录，则为真
-e file            若文件存在，则为真
-f file            若文件存在且是一个规则文件，则为真
-g file            若文件存在且设置了SGID位的值，则为真
-h file            若文件存在且为一个符合链接，则为真
-k file            若文件存在且设置了"sticky"位的值
-p file            若文件存在且为一已命名管道，则为真
-r file            若文件存在且可读，则为真
-s file            若文件存在且其大小大于零，则为真
-u file            若文件存在且设置了SUID位，则为真
-w file            若文件存在且可写，则为真
-x file            若文件存在且可执行，则为真
-o file            若文件存在且被有效用户ID所拥有，则为真

-z string          若string长度为0，则为真
-n string          若string长度不为0，则为真
string1 = string2  若两个字符串相等，则为真
string1 != string2 若两个字符串不相等，则为真

int1 -eq int2      若int1等于int2，则为真
int1 -ne int2      若int1不等于int2，则为真
int1 -lt int2      若int1小于int2，则为真
int1 -le int2      若int1小于等于int2，则为真
int1 -gt int2      若int1大于int2，则为真
int1 -ge int2      若int1大于等于int2，则为真

!expr              若expr为假则复合表达式为真。expr可以是任何有效的测试表达式
expr1 -a expr2     若expr1和expr2都为真则整式为真
expr1 -o expr2     若expr1和expr2有一个为真则整式为真

特殊变量

$0                 正在被执行命令的名字。对于shell脚本而言，这是被激活命令的路径
$n                 该变量与脚本被激活时所带的参数相对应。n是正整数，与参数位置相对应($1,$2…)
$#                 提供脚本的参数号
$*                 所有这些参数都被双引号引住。若一个脚本接收两个参数，$*等于$1$2
$@                 所有这些参数都分别被双引号引住。若一个脚本接收到两个参数，$@等价于$1$2
$?                 前一个命令执行后的退出状态
$$                 当前shell的进程号。对于shell脚本，这是其正在执行时的进程ID
$!                 前一个后台命令的进程号