버퍼캐쉬 사용하지 않고 디스크에서 읽으려면?

greentea의 이미지

버퍼캐쉬에서 읽지 않고 바로 디스크의 내용을 읽으려면
로우(raw?, low?) I/O 를 해야 한다고 하던데..
C 에서 어떻게 프로그램 해야 하는건가요?
리눅스 초보자입니당.. ^^;;
가르쳐 주심 감사하겠습니다...

서지훈의 이미지

setbuf() 함수 계열들을 한번 알아보세요...
이걸로 설정을 하시면은 아마 원하는 기능드로 구현이 가능하실겁니다...

<어떠한 역경에도 굴하지 않는 '하양 지훈'>

#include <com.h> <C2H5OH.h> <woman.h>
do { if (com) hacking(); if (money) drinking(); if (women) loving(); } while (1);

cinsk의 이미지

왜 버퍼를 쓰고 싶지 않은지 궁금하군요.

setbuf(3), setvbuf(3)를 써서 버퍼 크기를 0로 한다고 해도, OS는 버퍼를 사용할 가능성이 높습니다.

disk device driver에서 일단 버퍼를 사용할 것이며, OS에서도 버퍼를 쓸 것이며, stream library (stdio)에서도 버퍼를 쓸 것이기 때문에, 어떤 버퍼를 쓰고 싶지 않은 것인지도 알아야 합니다.

Necromancer의 이미지

open(), read(), write() 시스템 콜들을 써 보시죠.

한가지 해야 할건 open()시 O_SYNC가 추가되어야 합니다.

대신 C라이브러리의 입출력관련 부가기능들은 못쓰겠죠. 이건 노가다가 필요하겠고.

Written By the Black Knight of Destruction

yielding의 이미지

raw device I/O를 하면 운영체제 버퍼를 거치지 않고 디스크에 곧바로 I/O를
할 수 있습니다.

실제 우리가 low-level system call(open/read/write...)을 써도
운영체제 버퍼에 데이타는 곧바로 flush되지 않습니다.. 시스템의 load가 적당할때 비동기적으로 flush하지요

그래서 DBMS의 경우 commit을 하고 전원을 뽑아버리면 실제로 데이타가 운영체제 버퍼에만 있고 write안 될 수 있습니다.. transaction의 ACID 프로퍼티가 지켜지지 않겠죠..
( raw device를 쓰면 정말 write할때마다 찍찍 디스크를 긁는 소리가 들립니다)

하지만 raw device I/O는 serial I/O이고 디스크를 정교하게 관리해야하므로 성능이 좋은편도 아니고 코딩에 어려움이 많습니다. 무조건 좋은거는 아닙니다.

그러면 어떻게 raw device를 만들어 쓰는가? google news group에서 검색하면 답이 나옵니다 ^^; (쓸일도 없고, 써본적도 없습니다. DBMS안만든다면 아마 쓸일이 없지 않을까요...)

Life rushes on, we are distracted

tifler의 이미지

man raw

raw /dev/raw/rawN <blockdevice>

이렇게하시면 이 raw디바이스는 kernel의 buffer cache를 사용하지 않고
블럭 디바이스를 직접 억세스 할 수 있습니다.

참고하세요.

/***********************
* while(1) sleep(INFINITE);
***********************/

kihlle의 이미지

오라클 등의 DBMS에서 raw device를 사용하여 좀더 성능을 내는 경우 등을 흔히 볼수있습니다만 yielding님의 말씀대로 전적으로 버퍼를 사용치않고 스토리지를 제어하는 것은 운영체제에 마운트된 블럭디바이스는 불가능합니다.

왜 그런지는 Henry newman과 같은 스토리지전문가의 컬럼을 구글링해서 보시면 도움이 되실겁니다.

homeless

댓글 달기

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.