Solaris SMF 로그 좀 봐주세요.

zommoc의 이미지

얼마 전 관리하는 시스템에 뜬금없이 장애가 생겼습니다.
증상은 ps 등의 내부 명령어를 사용하려 하면 "ps getexecname() 실패"라는 메시지와 함께
명령어가 작동하지 않았습니다. 그리고 WAS인 JEUS의 로그를 보면 날짜가 1999년으로 돌아가 있었구요.

원인을 파악하기 위해 전산실 쪽에 문의를 해봐도 외부 침입의 흔적은 없다고 하고,
각종 syslog들을 뒤져봐도 이렇다 할 내용이 보이질 않았습니다.

그러다가 SMF(Service Management Facility) 로그까지 보게 되었는데요.
여기도 여타 이렇다 할 내용이 없었는데, lc6.log 라는 파일에서 다음과 같은 로그를 발견했습니다.

==============================

6월 24 13:14:18 Executing /sbin/rc6 stop
Executing legacy init script "/etc/rc0.d/K01netbackup".
stopping the NetBackup Bare Metal Restore Boot Server daemon
stopping the NetBackup client daemon
stopping the NetBackup network daemon
Legacy init script "/etc/rc0.d/K01netbackup" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K05appserv".
Legacy init script "/etc/rc0.d/K05appserv" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K06mipagent".
Legacy init script "/etc/rc0.d/K06mipagent" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K15imq".
Legacy init script "/etc/rc0.d/K15imq" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K16apache".
httpd stopping.
Legacy init script "/etc/rc0.d/K16apache" exited with return code 0.
/usr/apache/bin/apachectl stop: httpd (no pid file) not running
Executing legacy init script "/etc/rc0.d/K27boot.server".
Legacy init script "/etc/rc0.d/K27boot.server" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K34ncalogd".
Legacy init script "/etc/rc0.d/K34ncalogd" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K50pppd".
Legacy init script "/etc/rc0.d/K50pppd" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K52llc2".
Legacy init script "/etc/rc0.d/K52llc2" exited with return code 0.
Executing legacy init script "/etc/rc0.d/K62lu".
Legacy init script "/etc/rc0.d/K62lu" exited with return code 0.

==============================

이전의 로그들에서는 볼 수 없었던

stopping the NetBackup Bare Metal Restore Boot Server daemon
stopping the NetBackup client daemon
stopping the NetBackup network daemon

이 부분이 뭔가 의심스럽기는 한데, 혹시 이 로그를 가지고 장애의 원인이 유추 가능한지요?
클라이언트 측에서는 원인파악 해야된다고 얘기하고, 방법은 없고 갑갑합니다 ㅠ_ㅠ

댓글 달기

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.