SA/Migration2 [Migration] Rclone을 이용한 대용량 데이터 마이그레이션 ✍ Posted by Immersive Builder Seong 1. 시작하며 얼마 전에, MSP 기술 지원 업무를 수행하면서 클라우드 버킷 내 보관되어 있는 TB 단위의 대용량 파일 데이터(텍스트, 이미지, 영상, 문서 등 첨부파일)를 외장하드로 이관해달라는 요청사항이 있었다. 이 때, 사용한 Rclone 명령어와 전송 최적화를 고려하여 작성한 스크립트, 그리고 마이그레이션 단계에서 직면한 이슈 상황과 해당 이슈를 해결해나간 사례를 소개하고자 한다. 우선 네트워크를 통해 원격으로 데이터를 이관하는 유틸리티로는 Rclone과 Rsync가 있으며, 2가지 방법 모두 데이터를 이관함에 있어 사용하기에는 무리가 없다. 차이라고 한다면 소스/타겟 저장소의 유형이 무엇이냐와 압축 지원 여부 정도가 아닐까 한다.. 2025. 5. 20. [Migration] Rsync를 이용한 대용량 데이터 마이그레이션 ✍ Posted by Immersive Builder Seong 1. 시작하며 고객사 클라우드 전환 사업을 수행하면서 정보시스템별로 최소 GB 단위에서 시작하여 최대 TB 단위에 이르는 대용량 파일 데이터(텍스트, 이미지, 영상, 문서 등 첨부파일)를 이관하기 위해 제가 사용한 Rsync 명령어와 스크립트를 소개하고자 합니다. 한 번은 정리하겠다고 마음만 먹은지 1년.. 프로젝트를 수행한지 어언 1년이 지나버렸습니다. 시간이 더 지나기 전에 글로 정리하여 기록으로 남기고자 합니다. 2. Rsync 소개 1) Rsync 란? Rsync는 네트워크를 통해서 로컬 서버와 원격 서버 간 데이터를 동기화하는 프로그램입니다. 일반적으로 파일 이관, 동기화, 그리고 백업을 하기 위한 용도로 사용합니다. ※ CentO.. 2023. 11. 7. 이전 1 다음
