uninerruptable sleep을 아시나요!?!? (커널 해커님들~~)

icristi의 이미지

ps aux 해보면 STAT가 D라고 되어있는 프로세스가 있습니다.
자료를 찾아보면 uninterruptable sleep 상태여서
page falut가 되어서 page in 중이거나 크리티컬 섹션에서 나오길 기다리는 프로세스라고 합니다.

저희 회사에서는 파일서버 데몬을 개발하여 이를 기반으로 웹스토리지를 운영하고 있는데,
많은 수의 세션(접속)이 생성되어 프로세스가 많아지면, 그 중 몇몇 프로세스가 D 상태가 됩니다.
몇 십대의 서버중 유독 몇몇 서버만 이런 프로세스들이 많이 보이고,
또한 이런 프로세스가 극단적으로 많아지면 (전체 300~400 세션중 200 정도)
서버가 연결이 안되는 상태가 되기도 합니다.

도대체 어디에서 막히는 건지, 왜 막혀있는건지 분석해보기 위해서
strace를 해도 uninterruptable sleep 프로세스는 그것도 먹히지 않더군요.
커널에러라면 Call Trace에 관한 로그라도 남을텐데. 그런것도 아니고,

원인을 분석해볼 만한 방법들이 없을까요?

커널에 해박하신분들 도움 부탁드립니다.
이거 분석해내지 못하면 회사에서 흑..... 더 이상은 말할 수가.. 흑..
꼭 정답이 아니더라고, 예상치라도 답해주시면 제가 백방으로 분석해 보갰습니다.~

부탁드려요~

salbang2의 이미지

저도 자세히는 잘 모릅니다. 이점 참고하여 아래 글을 읽으 주시기 바랍니다.

최근에 dvice file 을 이용하여 kernel 과 application 이 통신하는 부분을 구현한 적이 있습니다. 이때 kernel 에서는 application daemon 에게 줄 데이타를 queuing 하고 있고, application daemon 이 이를 읽을 때, 더 이상 data 가 없을 경우, interruptible_sleep_on 상태로 만들어야 했던 적이 있습니다.

그때, 장난 삼아 uninterruptible_sleep_on 상태로도 테스트 해 봤었는데, 이 때는 application daemon에 아무리 signal 을 주어도 절대 죽지를 않았습니다. linux device drive 라는 책을 읽어 보니, uninterruptible_sleep_on 상태에서는 모든 시그널을 무시 한다고 되어 있더군요.

아마 커널에서는 필요에 따라서 signal 등을 받아서 return (EINTR) 해서는 안 되는 상황에서는 해당 process 를 uninterruptible_sl~~~ 상태로 만들어 둘겁니다. 그런 코드를 얼핀 본 기억이 있습니다. 지금 찾으려니 잘 안 찾아 지네요. 물론 그런 상황이 바로 말씀하신 page fault 되어 page in 중인거나 critical section 에서 나오길 기다리거나 하는 상황 이겠지요.

단순 파일 서버 데몬뿐이라면, 아마도 이 상태에서 daemon 이 죽은 것은 아닌가 싶습니다. 아니면, 무언가 문제가 있어서 해당 상태에서 빠져 나오질 못하는 것이거나요.

해결책은 저도 잘 모르겠습니다. thread 를 사용하신다면, critical section 부분에서 빠져 나오지 못하는 경우가 있나 살펴 보는 것도 어쩌면...

그냥 예상할 것일 뿐입니다. 참고하세요.

댓글 달기

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.