현재 위치

홈 ›› Forums ›› 공부 ›› 설치 및 활용 QnA

리눅스 Rsync관련 질문있습니다.

tjsel981의 이미지
글쓴이: tjsel981 / 작성시간: 화, 2021/01/05 - 11:35오전

현재 대용량 파일을 Rsync를 통하여 전송을 하려는데, 10k정도의 크기만바껴도 전체다 복사해 덮어버리는 경향이있습니다. 이로인해 용량초과현상도 일어났습니다.

옵션은 rsync -avzc --partial--dir --append를 사용하였습니다.

append는 사용하면 tmp파일을 생성하지않는다하여서 사용하였습니다. (용량을 아끼기 위해)

어떤 옵션을 사용하여야 될까요 체크섬 또한 사용해봤지만 전체를 다복사해버립니다.

롤링해시를 사용하라고하는데 이것에대해서는 잘 모르겠습니다. 정보가 부족합니다. 직접 코딩을 해야하는것인가요? 아니면 다른 옵션이있을까요?

Forums: 
설치 및 활용 QnA
익명 사용자의 이미지

글쓴이: 익명 사용자 / 작성시간: 금, 2021/01/22 - 2:53오후

증분백업을 사용하면 될듯 한데유

Anti-Lock의 이미지

글쓴이: Anti-Lock / 작성시간: 목, 2021/01/28 - 11:49오후

음.. 대용량 파일의 일부분만 수정이 되었을 경우, 바뀐부분만 전송해서 결국 전체 대용량 파일 내용이 동일해 지기를 원하시는것 같네요.
그런데 rsync 가 그걸 지원하나요? 'delta-transfer algorithm' 이라고 있긴한데... 그게 이 부분인지 잘 모르겠네요.
지원 되더라도...
대용량 파일중 초반부의 데이터 100 바이트가 1바이트로 바뀐 상황에서도 잘(?) 되는지 모르겠어요.
rsync delta-transfer algorithm 을 찾아봐야 하겠네요.

Anti-Lock의 이미지

글쓴이: Anti-Lock / 작성시간: 금, 2021/01/29 - 12:20오전

찾아보니.. 이글이 검색되었는데..
https://rsync.samba.org/how-rsync-works.html
제가 이해하기로는, 임시파일을 만들어야 해당 기능이 동작 할수 있는듯 합니다.

그리고...
로컬파일은 기본적으로 전체복사가 이루어지나 봅니다.
https://superuser.com/questions/234273/why-doest-rsync-use-delta-transfer-for-local-files

댓글 달기

텍스트 포맷에 대한 자세한 정보

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.