현재 위치

홈 ›› Forums ›› 공부 ›› 설치 및 활용 QnA

GFS를 이용한 시스템 구축 경험 공유부탁드립니다.

hiboss1의 이미지
글쓴이: hiboss1 / 작성시간: 금, 2010/03/19 - 11:29오전

안녕하세요. 항상 포스팅된 글들 만 읽어보다기 이렇게 글을 씁니다.

이전 자료들 2007년까지는 GFS나 CFS에 대한 자료가 있는데, 요즘에는 KLDP에서는 최신 자료가 없더군요.

저는 이번에 다음과 같은 요구 사항을 만족하는 파일 시스템 구축을 해야하는데 고수님들의 지도 부탁드립니다.

1. 요구사항
다음에 말씀 드리는 것은 동시에 데이터 엑세스 속도입니다.
클라이언트 ( 120 대 ) : 한대당 80MB/s (즉 1Giga를 사용해야 합니다.)
모니터링 ( 6 대 ) : 한대당 380MB/s ( 즉 3.04Gbps를 사용 )
-> 이것들은 계산해보면 파일 시스템에서140 Gbps의 성능이 나와야 합니다.

2.구축 방안
파일 시스템은 클러스터 파일 시스템으로 구축을 할려고합니다.
대용량의 시스템이라 안전하게 SAN,NAS 전용 시스템을 알아보았는데, 가격이 장난이 아니더라구요.

그래서 서버 자체의 DAS 방식 또는 네트워크 스토리지를 이요하여 CFS(가능하면 무료 솔루션)로 시스템을 연동 할려고 합니다.
자료를 보니 GFS는 SAN을 사용하라고 하는데 DAS로 가능한가요? 이전에 GPFS는 구축할때는 로컬 HDD도 가능하던데요.

이런 방식으로 구축이 가능할까요?

그럼 고수님의 조언 부탁드립니다.

Forums: 
설치 및 활용 QnA
ydhoney의 이미지

글쓴이: ydhoney / 작성시간: 금, 2010/03/19 - 11:53오전

Performance 이슈라면 파일시스템 이전에 Disk 구성 및 Network 구성, SAN이던 NAS던 DAS던간에 시스템 헤더를 어떻게 구성하느냐가 문제가 될텐데요.
근데 클라이언트당 1Gbps 를 사용한다고 해서 그게 120대가 동시에 1Gbps를 계속 써대는건가요?
일단 용도가 뭔지 매우 궁금하긴 합니다만;; 용도가 나오고 내용이 나오면 거기에 뭘 붙이고 뭘 어떻게 한다 라는게 나올 듯 하네요.

당장 성능이 이게 필요하니 파일시스템을 어떻게 할까요? 는 가장 나중에 시스템 구축하시고 스토리지 Build 끝나고 나서
퍼포먼스 테스트를 해 보니 성능이 나오지 않더라. 무슨 방법이 있을까요? 라는 식으로 말씀이 나오시면 그 과정 중 일부로
나올 수 있는 수준의 이야기겠지요. 솔직히 ext3에 block size만 키워줘도 FS이슈가 나올 일은 별로 없다는 생각입니다만;

(용량이 너무 과하게 커서 ext3 지원 볼륨을 넘어선다면야 다르겠지만..성능 그 정도 말씀하시면 이번 IBM에서 신규시스템 출시랑 같이 나오는 exFlash 같은 제품 쓰시겠지요?)

댓글 달기

텍스트 포맷에 대한 자세한 정보

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.