rsync 명령어로 효율적인 백업 및 파일 전송하기

rsync 명령어로 효율적인 백업 및 파일 전송하기

Overview

rsync는 파일과 디렉토리를 복사하고 동기화하는 데 사용되는 매우 강력하고 효율적인 도구입니다. 일반적으로 백업이나 파일 전송을 할 때 rsync는 기존의 방법보다 더 빠르고 효율적인 작업을 제공합니다. 그 이유는 rsync가 "차이점"만을 전송하기 때문에 네트워크 대역폭을 절약할 수 있고, 파일 변경 사항만 업데이트되므로 시간이 훨씬 절약됩니다. 이를 통해 대용량 데이터의 백업 작업을 간소화하고, 전송 속도 또한 획기적으로 개선할 수 있습니다.

이 글에서는 rsync의 기본적인 사용법부터 시작해, 여러 가지 활용법과 최적화 방법을 자세하게 설명하고, 발생할 수 있는 오류와 그 해결법에 대해서도 다룰 것입니다.

1. rsync의 기본 개념

rsync는 원격 시스템과 로컬 시스템 간의 파일 동기화 및 백업 작업에 사용됩니다. rsync는 원본과 대상 파일 간의 차이를 계산하여, 변경된 부분만 전송함으로써 전송 속도를 최적화합니다. 이 방법은 전통적인 cp(복사)나 scp(보안 복사) 명령어보다 훨씬 효율적입니다.

예시:

만약 로컬 시스템의 /home/user/Documents 디렉토리를 원격 서버의 /backup 디렉토리로 백업하고 싶다면, 아래와 같이 명령어를 사용할 수 있습니다.

rsync -avz /home/user/Documents/ user@remote-server:/backup/

• -a: 아카이브 모드. 디렉토리, 심볼릭 링크, 권한, 타임스탬프 등 모든 파일 속성을 보존합니다.
• -v: 자세한 출력. 전송되는 파일 목록을 출력합니다.
• -z: 압축을 사용하여 데이터를 전송합니다.

이 명령어는 로컬의 Documents 디렉토리를 원격 서버의 /backup 디렉토리에 백업합니다. 만약 두 디렉토리 간에 차이가 있다면, rsync는 변경된 파일만 전송합니다.

2. rsync의 동작 원리

rsync는 파일을 복사할 때 "차이점만"을 전송하는 방식으로 동작합니다. 이를 "델타 전송"(delta transfer)이라고 합니다. rsync는 원본 파일과 대상 파일을 비교하여, 차이점이 있는 부분만 업데이트합니다. 이 과정에서 rsync는 블록 단위로 파일을 분할하여 변경된 블록만 보내기 때문에, 전체 파일을 다시 전송하는 것보다 훨씬 빠르고 효율적입니다.

예시:

만약 file1.txt와 file2.txt라는 두 파일이 있고, file1.txt에만 일부 내용이 변경되었다면, rsync는 file1.txt의 변경된 부분만 전송하고, file2.txt는 건드리지 않습니다. 이렇게 함으로써 네트워크 사용량을 최소화할 수 있습니다.

3. rsync의 다양한 옵션

rsync는 매우 다양한 옵션을 제공하여 사용자가 필요에 맞는 백업 및 파일 전송 작업을 수행할 수 있도록 도와줍니다. 주요 옵션들을 몇 가지 소개하겠습니다.

3.1. 기본 옵션

• -a (아카이브 모드): 파일 속성(소유자, 권한, 타임스탬프 등)을 그대로 유지하며 디렉토리 구조를 복사합니다.
• -v (자세한 출력): 파일 전송 과정에서 더 많은 정보를 출력합니다.
• -z (압축): 파일 전송 시 압축을 사용하여 네트워크 대역폭을 줄입니다.
• -r (재귀적 복사): 디렉토리 및 그 안의 파일을 재귀적으로 복사합니다.

3.2. 안전하게 원본 파일 삭제

• --delete: 원본 디렉토리에서 삭제된 파일이 대상 디렉토리에서도 삭제되도록 합니다.

  rsync -av --delete /home/user/Documents/ user@remote-server:/backup/

  이 명령어는 로컬의 /home/user/Documents에서 삭제된 파일들을 원격 서버의 /backup/에서도 삭제합니다.

3.3. 파일 목록을 파일로 저장하기

• --list-only: 실제로 파일을 전송하지 않고, 전송할 파일 목록만 출력합니다.

  rsync -av --list-only /home/user/Documents/ user@remote-server:/backup/

  이 명령어는 전송될 파일 목록을 출력하지만, 실제로 파일은 전송하지 않습니다. 이를 통해 어떤 파일이 변경되었는지 확인할 수 있습니다.

3.4. 특정 파일만 포함하거나 제외하기

• --include와 --exclude: 특정 파일이나 디렉토리를 포함시키거나 제외시킬 수 있습니다.

  rsync -av --exclude='*.log' /home/user/Documents/ user@remote-server:/backup/

  이 명령어는 .log 확장자를 가진 파일은 제외하고 나머지 파일들을 백업합니다.

4. rsync를 이용한 효율적인 백업 전략

rsync는 효율적인 백업을 위해 여러 가지 방식으로 활용할 수 있습니다. 주로 사용하는 방식은 증분 백업(incremental backup)과 주기적인 백업(scheduled backup)입니다.

4.1. 증분 백업

rsync는 첫 번째 백업 시에는 전체 파일을 전송하고, 그 이후에는 변경된 파일만 전송하는 방식으로 동작합니다. 이를 통해 저장 공간을 절약하고, 백업 속도를 빠르게 할 수 있습니다.

rsync -av --link-dest=/path/to/previous_backup /home/user/Documents/ /path/to/new_backup/

• --link-dest: 이전 백업과의 차이를 기반으로 새로운 백업을 만들며, 동일한 파일은 새롭게 복사하지 않고 하드링크를 생성합니다. 이렇게 하면 동일한 파일에 대해서는 저장 공간을 절약할 수 있습니다.

4.2. 주기적인 백업

주기적으로 백업을 자동화하기 위해 cron 작업과 함께 rsync를 사용할 수 있습니다. 예를 들어, 매일 자정에 백업을 실행하려면 crontab을 이용해 아래와 같은 작업을 설정할 수 있습니다.

0 0 * * * rsync -av --delete /home/user/Documents/ user@remote-server:/backup/

이 cron 작업은 매일 자정에 /home/user/Documents/ 디렉토리의 변경된 파일들을 원격 서버의 /backup/ 디렉토리로 백업합니다.

5. 에러 및 문제 해결

rsync를 사용하면서 발생할 수 있는 에러와 그 해결책을 몇 가지 소개합니다.

5.1. 권한 오류

rsync: failed to set permissions on "filename": Permission denied (13)

이 오류는 파일의 권한 문제로 인해 발생할 수 있습니다. rsync가 파일에 대한 읽기 권한이 없으면 해당 파일을 복사할 수 없습니다. 이 경우, sudo를 사용하여 권한을 부여할 수 있습니다.

sudo rsync -av /home/user/Documents/ user@remote-server:/backup/

5.2. SSH 연결 오류

rsync: connection unexpectedly closed (0 bytes received so far)

이 오류는 SSH 연결이 끊어졌거나 연결에 문제가 있을 때 발생합니다. SSH 설정을 확인하고, 서버와의 네트워크 상태를 점검해야 합니다. 예를 들어, 서버의 SSH 포트가 막혀 있는지, 방화벽 설정이 올바른지 확인해야 합니다.

6. 참고 문서

• rsync manual
• rsync 공식 사이트