双机hdisk12、13繁忙啊
双机热备，搬完机房之后前台页面打开很慢，硬盘读写速度也变慢了。总是有大数据读写在hdisk12和13上，这两个是db2vg.
请各位大侠帮忙分析下是哪的原因？
topas:
Topas Monitor for host: DB2Server EVENTS/QUEUES FILE/TTY
Mon Oct 31 21:25:03 2011 Interval: 2 Cswitch 554 Readch 1068
Syscall 2399 Writech 590.7K
Kernel 0.4 |# | Reads 2 Rawin 0
User 0.4 |# | Writes 148 Ttyout 443
Wait 51.5 |############### | Forks 0 Igets 0
Idle 47.6 |############## | Execs 0 Namei 2
Runqueue 0.0 Dirblk 0
Network KBPS I-Pack O-Pack KB-In KB-Out Waitqueue 0.0
en2 4.8 13.0 6.5 3.8 1.0
en1 2.1 2.0 9.0 0.4 1.8 PAGING MEMORY
lo0 0.0 0.0 0.0 0.0 0.0 Faults 0 Real,MB 3920
Steals 0 % Comp 68.1
Disk Busy% KBPS TPS KB-Read KB-Writ PgspIn 0 % Noncomp 18.9
hdisk12 100.0 430.0 107.5 0.0 430.0 PgspOut 0 % Client 18.9
hdisk13 70.0 152.0 38.0 0.0 152.0 PageIn 0
dac1 0.0 152.0 38.0 0.0 152.0 PageOut 1 PAGING SPACE
hdisk0 0.0 0.0 0.0 0.0 0.0 Sios 1 Size,MB 4864
dac0 0.0 430.0 107.5 0.0 430.0 % Used 4.6
hdisk1 0.0 0.0 0.0 0.0 0.0 NFS (calls/sec) % Free 95.3
cd0 0.0 0.0 0.0 0.0 0.0 ServerV2 0
hdisk14 0.0 0.0 0.0 0.0 0.0 ClientV2 0 Press:
hdisk15 0.0 0.0 0.0 0.0 0.0 ServerV3 0 "h" for help
ClientV3 0 "q" to quit
Name PID CPU% PgSp Owner
db2sysc 835828 0.3 13.2 db2admin
db2sysc 913592 0.1 11.4 db2admin
topas 1118460 0.1 1.5 root
dtgreet 135310 0.1 2.0 root
syncd 163944 0.1 0.5 root
db2sysc 549084 0.0 0.4 db2admin
db2sysc 806932 0.0 0.4 db2admin
hatsd 278540 0.0 9.3 root
hats_nim 532704 0.0 1.8 root
hats_nim 331814 0.0 1.8 root
hats_rs2 471216 0.0 171.5 root
gil 69666 0.0 0.9 root
clstrmgr 577720 0.0 2.7 root
clcomd 311452 0.0 2.5 root
X 172118 0.0 7.2 root
rpc.lock 119026 0.0 1.2 root
cron 221358 0.0 0.4 root
Exiting
DB2Server[/]#
DB2Server[/]#vmstat 2 5
系统配置：lcpu=4 mem=3920MB
kthr memory page faults cpu
----- ----------- ------------------------ ------------ -----------
r b avm fre re pi po fr sr cy in sy cs us sy id wa
0 0 709277 139995 0 0 0 0 0 0 165 3645 558 1 1 63 35
0 0 709277 139994 0 0 0 0 0 0 186 2579 609 0 0 48 52
0 1 709277 139990 0 0 0 0 0 0 189 2436 571 0 1 65 33
0 0 709288 139976 0 1 0 0 0 0 238 5576 811 6 2 54 38
0 0 709286 139978 0 0 0 0 0 0 144 2491 522 1 1 66 32
DB2Server[/]#
DB2Server[/]#iostat -d 1
System configuration: lcpu=4 drives=9 paths=2 vdisks=0
磁盘：% tm_act Kbps tps Kb_read Kb_wrtn
hdisk0 13.0 120.0 29.0 0 120
hdisk1 15.0 120.0 29.0 0 120
dac0 0.0 308.0 77.0 0 308
dac1 0.0 388.0 97.0 0 388
hdisk12 98.0 308.0 77.0 0 308
hdisk13 100.0 388.0 97.0 0 388
hdisk14 0.0 0.0 0.0 0 0
hdisk15 0.0 0.0 0.0 0 0
cd0 0.0 0.0 0.0 0 0
hdisk0 0.0 0.0 0.0 0 0
hdisk1 0.0 0.0 0.0 0 0
dac0 0.0 268.0 67.0 0 268
dac1 0.0 204.0 51.0 0 204
hdisk12 100.0 268.0 67.0 0 268
hdisk13 100.0 204.0 51.0 0 204
hdisk14 0.0 0.0 0.0 0 0
hdisk15 0.0 0.0 0.0 0 0
cd0 0.0 0.0 0.0 0 0
hdisk0 0.0 0.0 0.0 0 0
hdisk1 0.0 0.0 0.0 0 0
dac0 0.0 376.0 94.0 0 376
dac1 0.0 648.0 134.0 128 520
hdisk12 100.0 376.0 94.0 0 376
hdisk13 100.0 648.0 134.0 128 520
请各位大侠帮忙分析下是哪的原因？
topas:
Topas Monitor for host: DB2Server EVENTS/QUEUES FILE/TTY
Mon Oct 31 21:25:03 2011 Interval: 2 Cswitch 554 Readch 1068
Syscall 2399 Writech 590.7K
Kernel 0.4 |# | Reads 2 Rawin 0
User 0.4 |# | Writes 148 Ttyout 443
Wait 51.5 |############### | Forks 0 Igets 0
Idle 47.6 |############## | Execs 0 Namei 2
Runqueue 0.0 Dirblk 0
Network KBPS I-Pack O-Pack KB-In KB-Out Waitqueue 0.0
en2 4.8 13.0 6.5 3.8 1.0
en1 2.1 2.0 9.0 0.4 1.8 PAGING MEMORY
lo0 0.0 0.0 0.0 0.0 0.0 Faults 0 Real,MB 3920
Steals 0 % Comp 68.1
Disk Busy% KBPS TPS KB-Read KB-Writ PgspIn 0 % Noncomp 18.9
hdisk12 100.0 430.0 107.5 0.0 430.0 PgspOut 0 % Client 18.9
hdisk13 70.0 152.0 38.0 0.0 152.0 PageIn 0
dac1 0.0 152.0 38.0 0.0 152.0 PageOut 1 PAGING SPACE
hdisk0 0.0 0.0 0.0 0.0 0.0 Sios 1 Size,MB 4864
dac0 0.0 430.0 107.5 0.0 430.0 % Used 4.6
hdisk1 0.0 0.0 0.0 0.0 0.0 NFS (calls/sec) % Free 95.3
cd0 0.0 0.0 0.0 0.0 0.0 ServerV2 0
hdisk14 0.0 0.0 0.0 0.0 0.0 ClientV2 0 Press:
hdisk15 0.0 0.0 0.0 0.0 0.0 ServerV3 0 "h" for help
ClientV3 0 "q" to quit
Name PID CPU% PgSp Owner
db2sysc 835828 0.3 13.2 db2admin
db2sysc 913592 0.1 11.4 db2admin
topas 1118460 0.1 1.5 root
dtgreet 135310 0.1 2.0 root
syncd 163944 0.1 0.5 root
db2sysc 549084 0.0 0.4 db2admin
db2sysc 806932 0.0 0.4 db2admin
hatsd 278540 0.0 9.3 root
hats_nim 532704 0.0 1.8 root
hats_nim 331814 0.0 1.8 root
hats_rs2 471216 0.0 171.5 root
gil 69666 0.0 0.9 root
clstrmgr 577720 0.0 2.7 root
clcomd 311452 0.0 2.5 root
X 172118 0.0 7.2 root
rpc.lock 119026 0.0 1.2 root
cron 221358 0.0 0.4 root
Exiting
DB2Server[/]#
DB2Server[/]#vmstat 2 5
系统配置：lcpu=4 mem=3920MB
kthr memory page faults cpu
----- ----------- ------------------------ ------------ -----------
r b avm fre re pi po fr sr cy in sy cs us sy id wa
0 0 709277 139995 0 0 0 0 0 0 165 3645 558 1 1 63 35
0 0 709277 139994 0 0 0 0 0 0 186 2579 609 0 0 48 52
0 1 709277 139990 0 0 0 0 0 0 189 2436 571 0 1 65 33
0 0 709288 139976 0 1 0 0 0 0 238 5576 811 6 2 54 38
0 0 709286 139978 0 0 0 0 0 0 144 2491 522 1 1 66 32
DB2Server[/]#
DB2Server[/]#iostat -d 1
System configuration: lcpu=4 drives=9 paths=2 vdisks=0
磁盘：% tm_act Kbps tps Kb_read Kb_wrtn
hdisk0 13.0 120.0 29.0 0 120
hdisk1 15.0 120.0 29.0 0 120
dac0 0.0 308.0 77.0 0 308
dac1 0.0 388.0 97.0 0 388
hdisk12 98.0 308.0 77.0 0 308
hdisk13 100.0 388.0 97.0 0 388
hdisk14 0.0 0.0 0.0 0 0
hdisk15 0.0 0.0 0.0 0 0
cd0 0.0 0.0 0.0 0 0
hdisk0 0.0 0.0 0.0 0 0
hdisk1 0.0 0.0 0.0 0 0
dac0 0.0 268.0 67.0 0 268
dac1 0.0 204.0 51.0 0 204
hdisk12 100.0 268.0 67.0 0 268
hdisk13 100.0 204.0 51.0 0 204
hdisk14 0.0 0.0 0.0 0 0
hdisk15 0.0 0.0 0.0 0 0
cd0 0.0 0.0 0.0 0 0
hdisk0 0.0 0.0 0.0 0 0
hdisk1 0.0 0.0 0.0 0 0
dac0 0.0 376.0 94.0 0 376
dac1 0.0 648.0 134.0 128 520
hdisk12 100.0 376.0 94.0 0 376
hdisk13 100.0 648.0 134.0 128 520
11同行回答
回复 feidaodao ICSS？？什么东东呀午夜幽魂 发表于 2011-11-6 08:30
仅仅是猜测international china soft浏览1050
12,13如是存储分配出来的LUN，从你给你输出来看，如此小的写入，而使用率却达到了100%；我是猜测你的存储有问题，但你的SSM无任何告警。。。
我也不是高手，所以也只能猜测，不过，如果你能提供信息给全面一些，大家能够才能够帮你分析，而不是猜测。比如oslevel呀，errpt呀，lspv -l hdisk2,lspv -l hidsk3呀，lsattr -El sys0，最好snap -gc一份出来。收起
浏览1022
hdisk12 98.0 308.0 77.0 0 308
hdisk13 100.0 388.0 97.0 0 388
hdisk12 100.0 376.0 94.0 0 376
hdisk13 100.0 648.0 134.0 128 520
红的是磁盘使用频率
绿的是tps，io数
蓝的是写的大小
写入磁盘的数据量这么小，但磁盘却如此繁忙，我的经验一般都是看存储提供的共享磁盘。
嘛存储呀？是DS43或47嘛？
用SM上去看看吧，估计电池没电（或坏了)导致写缓存并禁了；或者有盘坏了。
-----------------------------
某个CASE共享给你：
发现有状况。。。
Disks： % tm_act Kbps tps Kb_read Kb_wrtn
hdisk5 34.9 1724.1 62.6 514909656 79100072
hdisk5 100.0 82756.0 341.0 165376 136
hdisk5 100.0 78728.0 324.0 157344 112
hdisk5 100.0 75594.0 312.0 151104 84
hdisk5 100.0 74452.0 313.0 148800 104
hdisk5 100.0 78372.0 331.5 156448 296
hdisk5 100.0 36386.0 168.5 72256 516
hdisk5 100.0 34274.0 159.0 68352 196
hdisk5 100.0 34438.0 160.0 68672 204
hdisk5 99.5 36678.0 168.5 73152 204
用SM上去一看，电池没电，reset也没有用，写缓存禁用了。当然存储是DS43，无法升到06.60.22的FW
------------------------------------------------------------------------------------
换电池的后的情况，生产运行的时候
# iostat -d hdisk5 2 10
Disks： % tm_act Kbps tps Kb_read Kb_wrtn
hdisk5 47.1 1648.0 783.8 324586267 1696895700
hdisk5 82.5 5626.0 1392.5 128 11124
hdisk5 83.0 6596.0 1413.5 96 13096
hdisk5 85.0 5592.0 1380.5 160 11024
hdisk5 82.5 5668.0 1410.0 64 11272
hdisk5 82.0 5618.0 1387.0 160 11076
hdisk5 82.1 5647.8 1398.0 128 11224
hdisk5 82.5 5500.0 1368.0 64 10936
hdisk5 81.5 5644.0 1404.0 64 11224
hdisk5 83.0 5656.0 1400.0 128 11184
虽然DS43的性能差点，但有缓存和没缓存的差别大着了
-------------------------------------
建议你也看看存储吧。
另外，db2vg，猜测你是ICSS的吧！:hug:
-----------------收起
hdisk13 100.0 388.0 97.0 0 388
hdisk12 100.0 376.0 94.0 0 376
hdisk13 100.0 648.0 134.0 128 520
红的是磁盘使用频率
绿的是tps，io数
蓝的是写的大小
写入磁盘的数据量这么小，但磁盘却如此繁忙，我的经验一般都是看存储提供的共享磁盘。
嘛存储呀？是DS43或47嘛？
用SM上去看看吧，估计电池没电（或坏了)导致写缓存并禁了；或者有盘坏了。
-----------------------------
某个CASE共享给你：
发现有状况。。。
Disks： % tm_act Kbps tps Kb_read Kb_wrtn
hdisk5 34.9 1724.1 62.6 514909656 79100072
hdisk5 100.0 82756.0 341.0 165376 136
hdisk5 100.0 78728.0 324.0 157344 112
hdisk5 100.0 75594.0 312.0 151104 84
hdisk5 100.0 74452.0 313.0 148800 104
hdisk5 100.0 78372.0 331.5 156448 296
hdisk5 100.0 36386.0 168.5 72256 516
hdisk5 100.0 34274.0 159.0 68352 196
hdisk5 100.0 34438.0 160.0 68672 204
hdisk5 99.5 36678.0 168.5 73152 204
用SM上去一看，电池没电，reset也没有用，写缓存禁用了。当然存储是DS43，无法升到06.60.22的FW
------------------------------------------------------------------------------------
换电池的后的情况，生产运行的时候
# iostat -d hdisk5 2 10
Disks： % tm_act Kbps tps Kb_read Kb_wrtn
hdisk5 47.1 1648.0 783.8 324586267 1696895700
hdisk5 82.5 5626.0 1392.5 128 11124
hdisk5 83.0 6596.0 1413.5 96 13096
hdisk5 85.0 5592.0 1380.5 160 11024
hdisk5 82.5 5668.0 1410.0 64 11272
hdisk5 82.0 5618.0 1387.0 160 11076
hdisk5 82.1 5647.8 1398.0 128 11224
hdisk5 82.5 5500.0 1368.0 64 10936
hdisk5 81.5 5644.0 1404.0 64 11224
hdisk5 83.0 5656.0 1400.0 128 11184
虽然DS43的性能差点，但有缓存和没缓存的差别大着了
-------------------------------------
建议你也看看存储吧。
另外，db2vg，猜测你是ICSS的吧！:hug:
-----------------收起
浏览646