하드디스크 상태가 이상합니다.
현재 wd raptor 150 x2 raid 0으로 묶여있는데요.
iostat -x 해보면 아래처럼 나오는데 2번째 디스크인 sdb의 avgqu-sz 값과 await, %util이 비정상적으로 높습니다.
Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s avgrq-sz avgqu-sz await svctm %util
sda 0.00 5.10 0.10 213.70 0.80 1655.70 7.75 1.44 6.74 0.34 7.28
sdb 0.00 7.70 0.10 213.70 0.80 1670.40 7.82 143.04 670.25 4.68 100.02
dm-0 0.00 0.00 0.20 415.40 1.60 3323.20 8.00 150.53 363.01 2.41 100.02
dm-1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
dm-2 0.00 0.00 0.20 415.40 1.60 3323.20 8.00 150.53 363.01 2.41 100.02
dm-3 0.00 0.00 0.20 415.40 1.60 3323.20 8.00 150.53 363.01 2.41 100.02
dm-4 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
db서버에 쓰고있는 하드디스크이구요. 최근 db가 깨지면서 자꾸 read-only file system으로 바뀌길래 fsck 실행해서 배드블럭 몇번 fix한적은 있습니다.
그래서 그런지 db insert 할때 top cpu wait가 평상시 5% 미만이었는데 이용자가 적은 시간대에도 20%~40% 가까이 나오고 부하도 상당히 심해졌습니다.
아래는 디스크 읽기 테스트입니다. 하드디스크 각각 테스트하면 정상인것 같은데 raid 그룹을 테스트해보면 오히려 개별값보다 낮네요.
hdparm -t /dev/sda <- 1st hdd
Timing buffered disk reads: 92.10 MB/sec
hdparm -t /dev/sdb <- 2nd hdd
Timing buffered disk reads: 91.35 MB/sec
/hdparm -t /dev/mapper/VolGroup00-LogVol00 <- raid 0
Timing buffered disk reads: 83.95 MB/sec
디스크에 문제가 있다고 봐야겠죠?
댓글 달기