ext3 파일 시스템 디렉토리 해시에 대한 늦은 정보

koseph의 이미지

CentOS 5.2 (X86_64)를 가지고 ext3 파일시스템 시험 도중에....
좀 이상한 점이 있어서 Redhat에 올라와 있는 게시물을 뒤졌더니 뜻밖의 이야기가 있네요.

참조: http://www.redhat.com/archives/ext3-users/2008-August/msg00008.html

글은 유명한 Theodore Tso가 올렸습니다.

바로 디렉토리 hash 알고리즘의 차이로 인해 나타날 수 있는 hash collision에 대한 이야기입니다.
어떤 파일명을 쓰느냐에 따라 이 현상은 나타날 수도 있는데 증상은 동일한 hash 값을 갖는 directory가 생성될 수 있다는 것입니다. 커널 버그인 셈이죠.

tune2fs로 ext3 파일시스템의 설정을 보시면 (tune2fs -l 장치명),

# tune2fs -l /dev/md12
(중간 생략)
Default directory hash:   tea
Directory Hash Seed:      7b187d5a-85f3-4fdc-8c73-8bf66d2099fb
(이하 생략)

CentOS는 모두 tea 해시 함수를 기본으로 사용합니다. 근데 이게 문제가 좀 있었나 봅니다.
혹시 한 ext3 볼륨 내에 많은 수(10,000개 혹은 70,000개 이상 - 배포판에 따라 다름)의 파일을 생성하고 지우는 작업이 빈번한 디렉토리가 있다면 프로세스가 이상한 짓을 할 수도 있겠네요.

메일 스풀링이나 필터링하는 볼륨이 ext3라면 관심이 필요할 것 같습니다. 메일이 날아갈 수도 있겠죠?

시험해 보실 수 있는 C 소스파일까지 아주 자세히 올라와 있으니 혹시 커널 업그레이드에 소극적인 시스템에서 현재와 같은 작업이 이루어지고 있다면 필히 커널 업그레이드를 하시고 중요한 디렉토리라면 백업 후 다시 생성해 주셔야 할 것 같습니다.

커널을 최신 버전(2.6.30.4)으로 컴파일하고 시험해 본 결과로는 tea 혹은 half_md4 해시 모두에서 문제가 발생하지 않았습니다.

Debian lenny는 기본이 half_md4로 되어 있더군요.

beyond의 이미지

올 초에 데비안에서 (한 디렉토리 당 파일 20만개)*3 가량 변환 작업해본 적이 있는데,,
문제가 발생되지 않았었습니다.(사실, 속으로 불안 불안 했었죠 ㅋ)

데비안 만쉐~~~~~~

feanor의 이미지

TEA는 괜찮은 블럭 암호이지만 절대 해시 함수로 쓰면 안 됩니다. 위키백과에 설명되어 있습니다.
http://en.wikipedia.org/wiki/Tiny_Encryption_Algorithm

마이크로소프트가 Xbox ROM에 TEA를 해시 함수로 썼다가 Xbox 해커들에게 순식간에 털린 것은 유명한 이야기입니다.

ienfant의 이미지

5.3의 마지막 커널 패키지 (2.6.18-128.4.1.el5)도 역시 그러하군요.
혹시나 해서 안녕리눅스가 설치된 고객 서버도 살짝 봤는데요,
안녕도 tea가 기본이고, Tso씨가 메일링에 써놓은 C 소스 컴파일해서 돌려보니 collision 심하게 일어나는군요;

댓글 달기

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.