간만에 삽질

간만에 삽질을 한 기록입니다.

서버의 댓수가 늘어서 이제 nms를 깔아 좀 더 체계적인(?) 모니터링 및 시스템 관리를 하려고 cacti를 받았습니다.
아파치와 php5를 apt로 깔며 세상은 아름답구나를 외쳤죠.

그러나... 장렬히 세그폴트를 내며 사망하는 아파치2.2 -_-;;
어머.. 버젼이 좀 낮아서 그런가 ( 당시 우분투 7.04 ) 라며.. do-release-upgrade 를 단행
서버에 붙어 있는 3000명의 유저를 짤라버리며 460일만에 리붓을 했습니다.
아마 파일 시스템 체크하느라 늦은듯한데 10분간 접속이 안되어서 발만 동동굴리다가 업그레이드 완료 및 서비스 재개
( 이 때 프비를 주소 쓰시는 모님 , 어머 아파치가 세폴내며 죽는 OS가 어딨어요 -_-;; 라며 웃음을.. )

다시 장렬히 사망하는 아파치, 친절하게 dmesg에도 로그를 뿌리며 사망하고 계셨습니다.

순간 열받아서 아파치를 삭제해봤다가 컴파일 해볼까 하다가 ( 이 때 컴파일 했으면 되었을지도 ㅠㅠ )
우분투를 사랑하자 라는 마음으로 여러가지 확인해보다가 업그레이드한 버젼이 8.04 LTS 버젼임을 깨닫고
다시 1500명의 유저를 짤라버리며 do-release-upgrade를 단행하고 리붓 -_-;;

최신 우분투 8.10 서버가 되었습니다.
그러나.. 열심히 사망하시는 아파치 2.2 -_-;;;

열받아서 일단 산책을 다녀왔습니다. 밥도 먹고 기운을 삭히다가..
소스코드를 까보았습니다. ( 미리 까봤다면 ㅠㅠ )
죽는 부분은 array 에 array를 넣는데 그 값에 함수를 호출해서 리턴값을 넣는 부분이었습니다.
php를 다운그레이드 할까 하다가 우분투를 사랑하는 마음에 포기하고 cacti를 다운그레이드 -_-;

.
.
.
정상적으로 설치가 끝났습니다. 이제 아름다운 마음으로 nms를 설정하기 위해서 각각의 서버에 snmpd를 올렸습니다.

.
.
.
데이터가 오지 않습니다. 다시 열을 받고..
5시간 가량 광분해서 포트를 바꿔봤다가 iptables에 룰셋을 넣어봤다가 tcpdump로 udp 패킷을 까보다가..
수상함을 느끼고 같은 IDC에 있는 로컬대역의 써버끼리 snmpwalk를 걸어봤습니다.

.
.
.
정상적으로 데이터가 출력이 됩니다. 덴장 ㅠㅠ ISP 를 넘어가면서 뭔가 공격으로 파악하고 패킷을 드랍시키나봅니다.
( 2대는 A IDC에 3대는 B IDC에 있습니다. ISP가 다릅니다. )

자 다시 열을 받고.. 이제 nms를 바꿔야하나 라며 고민을 하다가 ( zabbix의 경우 클라이언트를 깔아서 tcp로 동작함 )
snmp over tcp가 되는것을 깨닫고 설정을 해줬습니다.

.
.
.
아아 드디어 데이터가 입력을 잘 받습니다. rra 파일에 열심히 데이터를 쌓는군요.

그.러.나 이제는 그래프 출력이 되지 않습니다. 수년전에 한방에 깔리던 cacti가 이렇게 말썽을 일으킬줄은 몰랐습니다.

결론 : 퍼던 삽도 다시 보자.

PS: 전버젼 최종판으로 업글해서 그래프도 처리완료 ㅠㅠ
PS: 문제가 있던 버젼은 0.8.7c 입니다. 우분투의 PHP 버젼이 높아서 이런일이 있던거 같고.. 현재 제가 쓰는 버젼은 0.8.6k 입니다.