AWS DataSync 란
·
Data Engineering/AWS
들어가며기업에서는 파일 서버나 NAS(Network Attached Storage), 온프레미스 스토리지에 저장된 데이터를 AWS로 이전하거나, AWS 서비스 간 데이터를 주기적으로 동기화해야 하는 경우가 많습니다. 물론 aws s3 cp나 aws s3 sync 명령어를 이용해 데이터를 복사할 수도 있지만, 대용량 데이터나 지속적인 동기화 환경에서는 성능과 관리 측면에서 한계가 있습니다. 이를 해결하기 위해 AWS에서는 AWS DataSync를 제공합니다. 이번 글에서는 DataSync의 개념부터 동작 방식, Agent, 증분 복사(Incremental Transfer), 데이터 검증(Verification)까지 함께 알아보겠습니다.1. AWS DataSync란?AWS DataSync는 온프레미스와 AW..