teratail
回答率
85.30%
teratail header banner
teratail header banner
質問するログイン新規登録
トップに関する質問DISK I/Oが発生している要因

編集履歴

質問編集履歴

7

表示がおかしくなったので修正

2019/04/10 15:02

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -32,14 +32,14 @@
32
32
  上記に対しswapを確認
33
33
 
34
34
  vmstat -t 2
35
- ```
35
+
36
36
  procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------ ---timestamp---
37
37
  r b swpd free buff cache si so bi bo in cs us sy id wa st
38
38
  0 0 0 264692 190432 363308 0 0 0 0 3 2 0 0 100 0 0 2019-04-08 20:56:48 JST
39
39
  0 0 0 264668 190432 363308 0 0 0 0 49 20 0 0 100 0 0 2019-04-08 20:56:50 JST
40
40
  0 0 0 264668 190432 363308 0 0 0 0 49 17 0 0 100 0 0 2019-04-08 20:56:52 JST
41
41
  0 0 0 264668 190432 363308 0 0 0 44 45 20 0 0 100 0 0 2019-04-08 20:56:54 JST
42
- 0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 ```
42
+ 0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0
43
43
 
44
44
  ### 調査例3
45
45
  ![イメージ説明](9010f3c2e0f6e5831e3ebcf7f04d9131.png)
@@ -57,9 +57,9 @@
57
57
  svctm............ デバイスへのIOリクエストの平均処理時間(単位msec)
58
58
  %util............ デバイスへのIOリクエスト中のCPU使用率(ここが継続的に100%だとディスク部分でボトルネックになっている可能性が高い)
59
59
 
60
- ---
60
+
61
61
  /var/log/sa/sa08
62
- ```
62
+
63
63
  00時00分01秒 proc/s cswch/s
64
64
  00時10分01秒 0.01 15.49
65
65
  00時20分01秒 0.01 15.53
@@ -104,7 +104,7 @@
104
104
  19時40分01秒 dev252-0 0.14 0.00 1.36 9.83 0.00 0.92 0.59 0.01
105
105
  19時50分01秒 dev252-0 1.64 3.67 　**187.16 116.59** 0.02 9.55 0.37 0.06
106
106
  20時00分01秒 dev252-0 0.11 0.00 1.07 10.00 0.00 0.92 0.75 0.01
107
- ```
107
+
108
108
  ---
109
109
  /var/log/sar/sa09
110
110
  ```

6

項目の意味追加

2019/04/10 15:02

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -39,12 +39,24 @@
39
39
  0 0 0 264668 190432 363308 0 0 0 0 49 20 0 0 100 0 0 2019-04-08 20:56:50 JST
40
40
  0 0 0 264668 190432 363308 0 0 0 0 49 17 0 0 100 0 0 2019-04-08 20:56:52 JST
41
41
  0 0 0 264668 190432 363308 0 0 0 44 45 20 0 0 100 0 0 2019-04-08 20:56:54 JST
42
- 0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 2019-04-08 20:56:56 JST
43
- 0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 `
42
+ 0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 ```
44
- ```
45
43
 
46
44
  ### 調査例3
47
45
  ![イメージ説明](9010f3c2e0f6e5831e3ebcf7f04d9131.png)
46
+
47
+ [sarコマンド](https://qiita.com/makaaso/items/6e27a2f0948241891667)
48
+ proc/s.... 1秒あたりの生成されたプロセス数
49
+ cswch/s... 1秒あたりのコンテキストスイッチ回数
50
+
51
+ tps.............. 1秒間のI/Oリクエスト数(転送回数)
52
+ rd_sec(rsec)/s... 1秒間の読み込みセクタ数(1セクタ512バイト)
53
+ wr_sec(wsec)/s... 1秒間の書き込みセクタ数(1セクタ512バイト)
54
+ avgrq-sz......... デバイスへのIOリクエストの平均セクタサイズ
55
+ avgqu-sz......... デバイスへのIOリクエストの待ち行列の平均セクタサイズ
56
+ await............ デバイスへのIOリクエストの平均待ち時間(単位msec)[待ち行列にいる時間＋処理時間]
57
+ svctm............ デバイスへのIOリクエストの平均処理時間(単位msec)
58
+ %util............ デバイスへのIOリクエスト中のCPU使用率(ここが継続的に100%だとディスク部分でボトルネックになっている可能性が高い)
59
+
48
60
  ---
49
61
  /var/log/sa/sa08
50
62
  ```

5

見やすいように修正

2019/04/10 14:49

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -30,8 +30,9 @@
30
30
 
31
31
  ### 調査例2
32
32
  上記に対しswapを確認
33
+
34
+ vmstat -t 2
33
35
  ```
34
- [root@ik1-331-25789 ~]# vmstat -t 2
35
36
  procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------ ---timestamp---
36
37
  r b swpd free buff cache si so bi bo in cs us sy id wa st
37
38
  0 0 0 264692 190432 363308 0 0 0 0 3 2 0 0 100 0 0 2019-04-08 20:56:48 JST
@@ -39,12 +40,14 @@
39
40
  0 0 0 264668 190432 363308 0 0 0 0 49 17 0 0 100 0 0 2019-04-08 20:56:52 JST
40
41
  0 0 0 264668 190432 363308 0 0 0 44 45 20 0 0 100 0 0 2019-04-08 20:56:54 JST
41
42
  0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 2019-04-08 20:56:56 JST
42
- 0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 ```
43
+ 0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 `
44
+ ```
43
45
 
44
46
  ### 調査例3
45
47
  ![イメージ説明](9010f3c2e0f6e5831e3ebcf7f04d9131.png)
46
-
48
+ ---
47
49
  /var/log/sa/sa08
50
+ ```
48
51
  00時00分01秒 proc/s cswch/s
49
52
  00時10分01秒 0.01 15.49
50
53
  00時20分01秒 0.01 15.53
@@ -89,8 +92,10 @@
89
92
  19時40分01秒 dev252-0 0.14 0.00 1.36 9.83 0.00 0.92 0.59 0.01
90
93
  19時50分01秒 dev252-0 1.64 3.67 　**187.16 116.59** 0.02 9.55 0.37 0.06
91
94
  20時00分01秒 dev252-0 0.11 0.00 1.07 10.00 0.00 0.92 0.75 0.01
92
-
95
+ ```
96
+ ---
93
97
  /var/log/sar/sa09
98
+ ```
94
99
  00時00分01秒 proc/s cswch/s
95
100
  00時10分01秒 0.02 16.91
96
101
  00時20分01秒 0.01 16.44
@@ -115,8 +120,10 @@
115
120
  04時40分02秒 dev252-0 0.09 0.00 0.81 9.04 0.00 1.07 0.81 0.01
116
121
  04時50分01秒 dev252-0 12.71 **207.21 25.53 18.31** 0.01 0.70 0.37 0.47
117
122
  05時00分01秒 dev252-0 0.10 0.00 0.93 9.33 0.00 1.02 0.77 0.01
118
-
123
+ ```
124
+ ---
119
125
  /var/log/cron
126
+ ```
120
127
  Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting makewhatis.cron
121
128
  Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32280]: finished makewhatis.cron
122
129
  Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting mlocate.cron
@@ -160,7 +167,7 @@
160
167
  Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[2081]: finished readahead.cron
161
168
  Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting tmpwatch
162
169
  Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[2119]: finished tmpwatch
170
+ ```
163
171
 
164
-
165
172
  ### 補足情報（FW/ツールのバージョンなど）
166
173
  使用OSバージョン：CentOS release 6.9 (Final)

4

若干修正

2019/04/10 12:38

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -39,9 +39,7 @@
39
39
  0 0 0 264668 190432 363308 0 0 0 0 49 17 0 0 100 0 0 2019-04-08 20:56:52 JST
40
40
  0 0 0 264668 190432 363308 0 0 0 44 45 20 0 0 100 0 0 2019-04-08 20:56:54 JST
41
41
  0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 2019-04-08 20:56:56 JST
42
- 0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 2019-04-08 20:56:58 JST
43
- 0 0 0 264668 190432 363308 0 0 0 0 46 19 0 0 100 0 0 2019-04-08 20:57:00 JST
44
- 0 0 0 264668 190432 363308 0 0 0 0 50 18 0 0 100 0 0 ```
42
+ 0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 ```
45
43
 
46
44
  ### 調査例3
47
45
  ![イメージ説明](9010f3c2e0f6e5831e3ebcf7f04d9131.png)
@@ -119,12 +117,6 @@
119
117
  05時00分01秒 dev252-0 0.10 0.00 0.93 9.33 0.00 1.02 0.77 0.01
120
118
 
121
119
  /var/log/cron
122
- Apr 8 04:10:01 ik1-331-25789 CROND[32109]: (root) CMD (/usr/lib64/sa/sa1 1 1)
123
- Apr 8 04:20:01 ik1-331-25789 CROND[32113]: (root) CMD (/usr/lib64/sa/sa1 1 1)
124
- Apr 8 04:30:01 ik1-331-25789 CROND[32117]: (root) CMD (/usr/lib64/sa/sa1 1 1)
125
- Apr 8 04:34:01 ik1-331-25789 anacron[31999]: Job `cron.daily' started
126
- Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting logrotate
127
- Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32128]: finished logrotate
128
120
  Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting makewhatis.cron
129
121
  Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32280]: finished makewhatis.cron
130
122
  Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting mlocate.cron
@@ -143,9 +135,6 @@
143
135
  Apr 8 04:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[32370]: finished 0anacron
144
136
  Apr 8 04:50:01 ik1-331-25789 CROND[32372]: (root) CMD (/usr/lib64/sa/sa1 1 1)
145
137
  〜
146
- Apr 8 19:10:01 ik1-331-25789 CROND[425]: (root) CMD (/usr/lib64/sa/sa1 1 1)
147
- Apr 8 19:20:01 ik1-331-25789 CROND[429]: (root) CMD (/usr/lib64/sa/sa1 1 1)
148
- Apr 8 19:30:01 ik1-331-25789 CROND[433]: (root) CMD (/usr/lib64/sa/sa1 1 1)
149
138
  Apr 8 19:40:01 ik1-331-25789 CROND[455]: (root) CMD (/usr/lib64/sa/sa1 1 1)
150
139
  Apr 8 19:43:01 ik1-331-25789 CROND[528]: (root) CMD (run-parts /etc/cron.hourly)
151
140
  Apr 8 19:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[528]: starting 0anacron
@@ -154,13 +143,23 @@
154
143
  Apr 8 20:00:01 ik1-331-25789 CROND[546]: (root) CMD (/usr/lib64/sa/sa1 1 1)
155
144
  Apr 8 20:10:01 ik1-331-25789 CROND[566]: (root) CMD (/usr/lib64/sa/sa1 1 1)
156
145
  〜
157
- Apr 9 04:20:01 ik1-331-25789 CROND[1811]: (root) CMD (/usr/lib64/sa/sa1 1 1)
158
- Apr 9 04:30:01 ik1-331-25789 CROND[1815]: (root) CMD (/usr/lib64/sa/sa1 1 1)
159
- Apr 9 04:40:02 ik1-331-25789 CROND[1819]: (root) CMD (/usr/lib64/sa/sa1 1 1)
160
- Apr 9 04:43:01 ik1-331-25789 CROND[1823]: (root) CMD (run-parts /etc/cron.hourly)
161
- Apr 9 04:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[1823]: starting 0anacron
162
146
  Apr 9 04:43:01 ik1-331-25789 anacron[1834]: Anacron started on 2019-04-09
163
147
  Apr 9 04:43:01 ik1-331-25789 anacron[1834]: Job `cron.daily' locked by another anacron - skipping
148
+ Apr 9 04:43:01 ik1-331-25789 anacron[1834]: Normal exit (0 jobs run)
149
+ Apr 9 04:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[1836]: finished 0anacron
150
+ Apr 9 04:48:01 ik1-331-25789 anacron[1666]: Job `cron.daily' started
151
+ Apr 9 04:48:01 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting logrotate
152
+ Apr 9 04:48:01 ik1-331-25789 run-parts(/etc/cron.daily)[1847]: finished logrotate
153
+ Apr 9 04:48:01 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting makewhatis.cron
154
+ Apr 9 04:48:01 ik1-331-25789 run-parts(/etc/cron.daily)[2002]: finished makewhatis.cron
155
+ Apr 9 04:48:01 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting mlocate.cron
156
+ Apr 9 04:48:03 ik1-331-25789 run-parts(/etc/cron.daily)[2013]: finished mlocate.cron
157
+ Apr 9 04:48:03 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting prelink
158
+ Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[2069]: finished prelink
159
+ Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting readahead.cron
160
+ Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[2081]: finished readahead.cron
161
+ Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[1838]: starting tmpwatch
162
+ Apr 9 04:48:04 ik1-331-25789 run-parts(/etc/cron.daily)[2119]: finished tmpwatch
164
163
 
165
164
 
166
165
  ### 補足情報（FW/ツールのバージョンなど）

3

調査内容追加

2019/04/10 12:30

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -19,9 +19,6 @@
19
19
  ### 調査例1
20
20
  ```
21
21
  date/time |usr sys idl wai hiq siq:usr sys idl wai hiq siq| read writ| recv send| in out | int csw
22
- 08-04 19:52:07| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1658B 820B| 0 0 | 51 21
23
- 08-04 19:52:08| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1360B 172B| 0 0 | 43 20
24
- 08-04 19:52:09| 1 0 99 0 0 0: 0 0 100 0 0 0| 0 0 |1414B 1178B| 0 0 | 46 20
25
22
  08-04 19:52:10| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1594B 442B| 0 0 | 57 27
26
23
  08-04 19:52:11| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1774B 442B| 0 0 | 48 19
27
24
  08-04 19:52:12| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1354B 442B| 0 0 | 58 19
@@ -29,17 +26,6 @@
29
26
  08-04 19:52:14| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1774B 442B| 0 0 | 45 17
30
27
  08-04 19:52:15| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 4096B|1594B 442B| 0 0 | 57 28
31
28
  08-04 19:52:16| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1714B 442B| 0 0 | 52 17
32
- 08-04 19:52:17| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1534B 900B| 0 0 | 51 20
33
- 08-04 19:52:18| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1474B 42B| 0 0 | 41 17
34
- 08-04 19:52:19| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1414B 442B| 0 0 | 44 21
35
- 08-04 19:52:20| 1 0 99 0 0 0: 0 0 100 0 0 0| 0 0 |1474B 442B| 0 0 | 51 22
36
- 08-04 19:52:21| 0 0 100 0 0 0: 0 1 99 0 0 0| 0 0 |1534B 442B| 0 0 | 51 22
37
- 08-04 19:52:22| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1714B 442B| 0 0 | 56 23
38
- 08-04 19:52:23| 1 0 99 0 0 0: 0 0 100 0 0 0| 0 0 |1906B 442B| 0 0 | 61 19
39
- 08-04 19:52:24| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1474B 442B| 0 0 | 41 17
40
- 08-04 19:52:25| 0 1 99 0 0 0: 0 0 100 0 0 0| 0 0 |1174B 442B| 0 0 | 47 21
41
- 08-04 19:52:26| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1414B 442B| 0 0 | 49 17
42
- 08-04 19:52:27| 1 0 99 0 0 0: 0 0 100 0 0 0| 0 0 |1714B 442B| 0 0 | 47 20 ^C
43
29
  ```
44
30
 
45
31
  ### 調査例2
@@ -55,19 +41,127 @@
55
41
  0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 2019-04-08 20:56:56 JST
56
42
  0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 2019-04-08 20:56:58 JST
57
43
  0 0 0 264668 190432 363308 0 0 0 0 46 19 0 0 100 0 0 2019-04-08 20:57:00 JST
58
- 0 0 0 264668 190432 363308 0 0 0 0 50 18 0 0 100 0 0 2019-04-08 20:57:02 JST
44
+ 0 0 0 264668 190432 363308 0 0 0 0 50 18 0 0 100 0 0 ```
59
- 0 0 0 264668 190432 363308 0 0 0 6 73 21 0 0 100 0 0 2019-04-08 20:57:04 JST
60
- 0 0 0 264668 190432 363308 0 0 0 0 41 16 0 0 100 0 0 2019-04-08 20:57:06 JST
61
- 0 0 0 264668 190432 363308 0 0 0 0 44 16 0 0 100 0 0 2019-04-08 20:57:08 JST
62
- 0 0 0 264668 190432 363308 0 0 0 2 45 25 0 0 100 0 0 2019-04-08 20:57:10 JST
63
- 0 0 0 264668 190432 363308 0 0 0 0 46 17 0 0 100 0 0 2019-04-08 20:57:12 JST
64
- 0 0 0 264668 190432 363308 0 0 0 0 45 18 0 0 100 0 0 2019-04-08 20:57:14 JST
65
- 0 0 0 264668 190432 363308 0 0 0 0 47 16 0 0 100 0 0 2019-04-08 20:57:16 JST
66
- 0 0 0 264668 190432 363308 0 0 0 0 50 16 0 0 100 0 0 2019-04-08 20:57:18 JST
67
- 0 0 0 264668 190432 363308 0 0 0 0 49 19 0 0 100 0 0 2019-04-08 20:57:20 JST
68
- ```
69
45
 
46
+ ### 調査例3
47
+ ![イメージ説明](9010f3c2e0f6e5831e3ebcf7f04d9131.png)
70
48
 
49
+ /var/log/sa/sa08
50
+ 00時00分01秒 proc/s cswch/s
51
+ 00時10分01秒 0.01 15.49
52
+ 00時20分01秒 0.01 15.53
53
+ 00時30分01秒 0.01 15.56
54
+ 00時40分01秒 0.01 15.65
55
+ 00時50分01秒 0.04 15.87
56
+ 〜
57
+ 04時10分01秒 0.01 15.60
58
+ 04時20分01秒 0.01 15.73
59
+ 04時30分01秒 0.01 15.53
60
+ 04時40分01秒 0.40 **17.58**
61
+ 04時50分01秒 0.03 15.94
62
+ 05時00分01秒 0.01 15.67
63
+ 〜
64
+ 19時10分01秒 0.01 15.68
65
+ 19時20分01秒 0.01 15.53
66
+ 19時30分01秒 0.01 15.44
67
+ 19時40分01秒 0.04 16.49
68
+ 19時50分01秒 0.14 **36.60**
69
+ 20時00分01秒 0.01 16.36
70
+ 20時10分01秒 0.03 16.35
71
71
 
72
+ 00時00分01秒 DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
73
+ 〜
74
+ 01時20分01秒 dev252-0 0.10 0.00 0.87 9.12 0.00 1.18 0.89 0.01
75
+ 01時30分01秒 dev252-0 0.10 0.00 0.89 9.08 0.00 1.02 0.76 0.01
76
+ 〜
77
+ 04時00分01秒 dev252-0 0.11 0.00 1.04 9.75 0.00 0.62 0.59 0.01
78
+ 04時10分01秒 dev252-0 0.10 0.00 1.06 10.19 0.00 0.73 0.68 0.01
79
+ 04時20分01秒 dev252-0 0.09 0.00 0.81 9.04 0.00 0.80 0.72 0.01
80
+ 04時30分01秒 dev252-0 0.09 0.00 0.77 8.75 0.00 0.81 0.72 0.01
81
+ 04時40分01秒 dev252-0 0.31 0.00 **18.23 59.67 ** 0.00 1.25 0.29 0.01
82
+ 04時50分01秒 dev252-0 0.13 0.00 1.31 10.18 0.00 0.92 0.75 0.01
83
+ 05時00分01秒 dev252-0 0.14 0.00 1.50 10.42 0.00 0.80 0.57 0.01
84
+ 05時10分01秒 dev252-0 0.13 0.00 1.28 10.11 0.00 0.99 0.68 0.01
85
+ 05時20分01秒
86
+ 〜
87
+ 19時00分01秒 dev252-0 0.12 0.00 1.34 11.11 0.00 0.94 0.69 0.01
88
+ 19時10分01秒 dev252-0 0.11 0.00 1.00 9.09 0.00 1.26 0.88 0.01
89
+ 19時20分01秒 dev252-0 0.09 0.00 0.84 9.16 0.00 1.15 0.85 0.01
90
+ 19時30分01秒 dev252-0 0.09 0.00 0.83 9.02 0.00 1.36 0.89 0.01
91
+ 19時40分01秒 dev252-0 0.14 0.00 1.36 9.83 0.00 0.92 0.59 0.01
92
+ 19時50分01秒 dev252-0 1.64 3.67 　**187.16 116.59** 0.02 9.55 0.37 0.06
93
+ 20時00分01秒 dev252-0 0.11 0.00 1.07 10.00 0.00 0.92 0.75 0.01
94
+
95
+ /var/log/sar/sa09
96
+ 00時00分01秒 proc/s cswch/s
97
+ 00時10分01秒 0.02 16.91
98
+ 00時20分01秒 0.01 16.44
99
+ 00時30分01秒 0.02 16.94
100
+ 00時40分01秒 0.01 16.56
101
+ 〜
102
+ 04時20分01秒 0.01 18.51
103
+ 04時30分01秒 0.01 16.57
104
+ 04時40分02秒 0.01 16.63
105
+ 04時50分01秒 0.50 55.70
106
+ 05時00分01秒 0.01 16.22
107
+ 05時10分01秒 0.01 16.56
108
+
109
+ 00時00分01秒 DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
110
+ 00時50分01秒 dev252-0 0.13 0.59 1.01 12.80 0.00 0.85 0.65 0.01
111
+ 01時00分01秒 dev252-0 0.08 0.00 0.76 9.12 0.00 0.98 0.74 0.01
112
+ 〜
113
+ 04時00分01秒 dev252-0 0.09 0.00 0.84 9.16 0.00 0.89 0.64 0.01
114
+ 04時10分01秒 dev252-0 0.09 0.00 0.75 8.62 0.00 1.29 0.83 0.01
115
+ 04時20分01秒 dev252-0 0.18 0.00 2.42 13.41 0.00 0.73 0.44 0.01
116
+ 04時30分01秒 dev252-0 0.09 0.00 0.77 8.75 0.00 0.98 0.72 0.01
117
+ 04時40分02秒 dev252-0 0.09 0.00 0.81 9.04 0.00 1.07 0.81 0.01
118
+ 04時50分01秒 dev252-0 12.71 **207.21 25.53 18.31** 0.01 0.70 0.37 0.47
119
+ 05時00分01秒 dev252-0 0.10 0.00 0.93 9.33 0.00 1.02 0.77 0.01
120
+
121
+ /var/log/cron
122
+ Apr 8 04:10:01 ik1-331-25789 CROND[32109]: (root) CMD (/usr/lib64/sa/sa1 1 1)
123
+ Apr 8 04:20:01 ik1-331-25789 CROND[32113]: (root) CMD (/usr/lib64/sa/sa1 1 1)
124
+ Apr 8 04:30:01 ik1-331-25789 CROND[32117]: (root) CMD (/usr/lib64/sa/sa1 1 1)
125
+ Apr 8 04:34:01 ik1-331-25789 anacron[31999]: Job `cron.daily' started
126
+ Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting logrotate
127
+ Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32128]: finished logrotate
128
+ Apr 8 04:34:01 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting makewhatis.cron
129
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32280]: finished makewhatis.cron
130
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting mlocate.cron
131
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32291]: finished mlocate.cron
132
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting prelink
133
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32303]: finished prelink
134
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting readahead.cron
135
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32315]: finished readahead.cron
136
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32120]: starting tmpwatch
137
+ Apr 8 04:34:02 ik1-331-25789 run-parts(/etc/cron.daily)[32353]: finished tmpwatch
138
+ Apr 8 04:34:02 ik1-331-25789 anacron[31999]: Job `cron.daily' terminated
139
+ Apr 8 04:34:02 ik1-331-25789 anacron[31999]: Normal exit (1 job run)
140
+ Apr 8 04:40:01 ik1-331-25789 CROND[32355]: (root) CMD (/usr/lib64/sa/sa1 1 1)
141
+ Apr 8 04:43:01 ik1-331-25789 CROND[32361]: (root) CMD (run-parts /etc/cron.hourly)
142
+ Apr 8 04:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[32361]: starting 0anacron
143
+ Apr 8 04:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[32370]: finished 0anacron
144
+ Apr 8 04:50:01 ik1-331-25789 CROND[32372]: (root) CMD (/usr/lib64/sa/sa1 1 1)
145
+ 〜
146
+ Apr 8 19:10:01 ik1-331-25789 CROND[425]: (root) CMD (/usr/lib64/sa/sa1 1 1)
147
+ Apr 8 19:20:01 ik1-331-25789 CROND[429]: (root) CMD (/usr/lib64/sa/sa1 1 1)
148
+ Apr 8 19:30:01 ik1-331-25789 CROND[433]: (root) CMD (/usr/lib64/sa/sa1 1 1)
149
+ Apr 8 19:40:01 ik1-331-25789 CROND[455]: (root) CMD (/usr/lib64/sa/sa1 1 1)
150
+ Apr 8 19:43:01 ik1-331-25789 CROND[528]: (root) CMD (run-parts /etc/cron.hourly)
151
+ Apr 8 19:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[528]: starting 0anacron
152
+ Apr 8 19:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[537]: finished 0anacron
153
+ Apr 8 19:50:01 ik1-331-25789 CROND[540]: (root) CMD (/usr/lib64/sa/sa1 1 1)
154
+ Apr 8 20:00:01 ik1-331-25789 CROND[546]: (root) CMD (/usr/lib64/sa/sa1 1 1)
155
+ Apr 8 20:10:01 ik1-331-25789 CROND[566]: (root) CMD (/usr/lib64/sa/sa1 1 1)
156
+ 〜
157
+ Apr 9 04:20:01 ik1-331-25789 CROND[1811]: (root) CMD (/usr/lib64/sa/sa1 1 1)
158
+ Apr 9 04:30:01 ik1-331-25789 CROND[1815]: (root) CMD (/usr/lib64/sa/sa1 1 1)
159
+ Apr 9 04:40:02 ik1-331-25789 CROND[1819]: (root) CMD (/usr/lib64/sa/sa1 1 1)
160
+ Apr 9 04:43:01 ik1-331-25789 CROND[1823]: (root) CMD (run-parts /etc/cron.hourly)
161
+ Apr 9 04:43:01 ik1-331-25789 run-parts(/etc/cron.hourly)[1823]: starting 0anacron
162
+ Apr 9 04:43:01 ik1-331-25789 anacron[1834]: Anacron started on 2019-04-09
163
+ Apr 9 04:43:01 ik1-331-25789 anacron[1834]: Job `cron.daily' locked by another anacron - skipping
164
+
165
+
72
166
  ### 補足情報（FW/ツールのバージョンなど）
73
167
  使用OSバージョン：CentOS release 6.9 (Final)

2

調査方法を追加

2019/04/10 12:27

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -16,7 +16,7 @@
16
16
  一時的に増加している。
17
17
  ![DISK I/O](2f06a49ce9e36167ad969a38d2a06a6e.png)
18
18
 
19
- ### 調査例
19
+ ### 調査例1
20
20
  ```
21
21
  date/time |usr sys idl wai hiq siq:usr sys idl wai hiq siq| read writ| recv send| in out | int csw
22
22
  08-04 19:52:07| 0 0 100 0 0 0: 0 0 100 0 0 0| 0 0 |1658B 820B| 0 0 | 51 21
@@ -42,5 +42,32 @@
42
42
  08-04 19:52:27| 1 0 99 0 0 0: 0 0 100 0 0 0| 0 0 |1714B 442B| 0 0 | 47 20 ^C
43
43
  ```
44
44
 
45
+ ### 調査例2
46
+ 上記に対しswapを確認
47
+ ```
48
+ [root@ik1-331-25789 ~]# vmstat -t 2
49
+ procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------ ---timestamp---
50
+ r b swpd free buff cache si so bi bo in cs us sy id wa st
51
+ 0 0 0 264692 190432 363308 0 0 0 0 3 2 0 0 100 0 0 2019-04-08 20:56:48 JST
52
+ 0 0 0 264668 190432 363308 0 0 0 0 49 20 0 0 100 0 0 2019-04-08 20:56:50 JST
53
+ 0 0 0 264668 190432 363308 0 0 0 0 49 17 0 0 100 0 0 2019-04-08 20:56:52 JST
54
+ 0 0 0 264668 190432 363308 0 0 0 44 45 20 0 0 100 0 0 2019-04-08 20:56:54 JST
55
+ 0 0 0 264668 190432 363308 0 0 0 0 45 17 0 0 100 0 0 2019-04-08 20:56:56 JST
56
+ 0 0 0 264668 190432 363308 0 0 0 0 53 18 0 0 100 0 0 2019-04-08 20:56:58 JST
57
+ 0 0 0 264668 190432 363308 0 0 0 0 46 19 0 0 100 0 0 2019-04-08 20:57:00 JST
58
+ 0 0 0 264668 190432 363308 0 0 0 0 50 18 0 0 100 0 0 2019-04-08 20:57:02 JST
59
+ 0 0 0 264668 190432 363308 0 0 0 6 73 21 0 0 100 0 0 2019-04-08 20:57:04 JST
60
+ 0 0 0 264668 190432 363308 0 0 0 0 41 16 0 0 100 0 0 2019-04-08 20:57:06 JST
61
+ 0 0 0 264668 190432 363308 0 0 0 0 44 16 0 0 100 0 0 2019-04-08 20:57:08 JST
62
+ 0 0 0 264668 190432 363308 0 0 0 2 45 25 0 0 100 0 0 2019-04-08 20:57:10 JST
63
+ 0 0 0 264668 190432 363308 0 0 0 0 46 17 0 0 100 0 0 2019-04-08 20:57:12 JST
64
+ 0 0 0 264668 190432 363308 0 0 0 0 45 18 0 0 100 0 0 2019-04-08 20:57:14 JST
65
+ 0 0 0 264668 190432 363308 0 0 0 0 47 16 0 0 100 0 0 2019-04-08 20:57:16 JST
66
+ 0 0 0 264668 190432 363308 0 0 0 0 50 16 0 0 100 0 0 2019-04-08 20:57:18 JST
67
+ 0 0 0 264668 190432 363308 0 0 0 0 49 19 0 0 100 0 0 2019-04-08 20:57:20 JST
68
+ ```
69
+
70
+
71
+
45
72
  ### 補足情報（FW/ツールのバージョンなど）
46
73
  使用OSバージョン：CentOS release 6.9 (Final)

1

状況の説明追加

2019/04/08 12:03

投稿

kenji267
kenji267

スコア50

title CHANGED
File without changes
body CHANGED
@@ -13,6 +13,7 @@
13
13
  ご教授のほどどうかよろしくお願いします。
14
14
 
15
15
  ### 調査したい箇所
16
+ 一時的に増加している。
16
17
  ![DISK I/O](2f06a49ce9e36167ad969a38d2a06a6e.png)
17
18
 
18
19
  ### 調査例