fseek 을 이용한 줄단위 이동 방법은?

sukerman의 이미지

로그파일에서 원하는 정보를 찾으려고요
파일이 무지하게 큰 관계로 이분검색과 fseek을 사용하려고 합니다.
텍스트 파일 을 fseek 을 이용하여 줄단위 이동이 가능한지 알고싶습니다.

fseek() 의 두번째 인수 가 이동할거리(byte단위) 인데 그줄 이 몇byte인지
알수 없을것같은 데 다른 좋은 방법을 아시는분 조언 부탁드립니다.

그럼 고수의 구원을 기다리며 ..

new5244의 이미지

fgets() 로 한줄씩 처리하는 방법은 어떤지요?

from saibi

체스맨의 이미지

아시다시피, 두번째 인수 때문에, line end 까지 존재하는 바이트 수를
알아야 skip 할 수 있는데, 부가 정보가 없는 상태에서는 어쩔 수 없이
line end 가 나올 때까지 읽어보는 수 밖에 없구요, 그러다 보면, fseek
할 필요가 없어질 겁니다.

그냥 파일 내에서 필요한 한 두개 정도의 정보를 얻고자 한다면,
탐색 시간이 좀 걸리더라도, grep 이나 sed 등과 같은 툴을 이용하시면
편리할 것 같구요.

한 파일에 대해 빈번한 탐색이 필요하다면, 일단 탐색 속도를 증가 시킬 수
있는 부가 정보들을 먼저 저장해 두고, 탐색을 하도록 하는 방법을
쓰면 될 겁니다. 이 때는 텍스트가 바뀌면 다시 부가 정보들을 업데이트
해줘야 겠죠. 텍스트가 빈번히 수정되는 상황에서, 빈번히 찾아야 한다면,
아예 그 로그파일 저장하는 부분부터 빠른 탐색을 위해 재작성 되어야겠죠.
그 소스 수정이 가능하다면요.

Orion Project : http://orionids.org

wongi의 이미지

파일이 크다고 하셨으니 기존에 쌓여있는 정보를 이용해야 하는 상황일 것 같군요. 디스크 공간이 허락한다면 다음과 같이 fixed length record로 변환하면 질문하신 의도를 달성하실 수 있겠습니다. 한번 주욱 읽어서 써야 하므로 경우에 따라서는 라인 단위로 처리하는 방법을 강구하거나 인덱싱을 하거나 등등... 더 좋은 길을 생각해 보는 것도...

ifile = open("input.txt", "r")
ofile = open("output.txt", "w")

fixed_len = 121 # one for newline

while 1:
        line = ifile.readline()
        if line == "":
                break
        outline = line[:-1] + " " * (fixed_len - len(line)) + "\n"
        ofile.write(outline)

ifile.close()
ofile.close()

KISS...
Keep It Small and Simple

댓글 달기

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.