AWS Snow Family 및 스토리지 마이그레이션 솔루션 정리
1. AWS Snow Family 개요 (Offline Data Transfer & Edge Computing)
- AWS로 대용량 데이터를 안전하고 효율적으로 마이그레이션하기 위한 물리적 디바이스 기반의 오프라인 전송 솔루션
- 클라우드 접속이 어렵거나 대역폭이 부족한 지역에서의 엣지 컴퓨팅 환경 지원
Snowcone | 소형 엣지 컴퓨팅 & 전송 | 2.1kg, 8~14TB 스토리지, USB-C, DataSync 사전설치 |
Snowball Edge | 대규모 전송/컴퓨팅 | 80~210TB, 컴퓨트 최적화, EC2/Lambda 실행 |
Snowmobile | 초대형 마이그레이션 | 트럭 단위, 100PB급, 보안 트레일러 운송 |
2. 데이터 마이그레이션 (Data Migration)
- 목적: 대규모 데이터를 빠르게 AWS로 이동 (네트워크 전송보다 수일~수주 빠름)
- 보안: 저장 중, 이동 중, 전송 완료 후 모두 암호화 및 디바이스 초기화
- 절차:
- AWS Console에서 주문 및 작업 정의
- 장치 수령 후 로컬에서 데이터 업로드 (OpsHub 또는 CLI 사용)
- AWS로 반송 → 자동으로 S3에 업로드 후 데이터 삭제
3. 엣지 컴퓨팅 (Edge Computing)
- 정의: 인터넷이 불안정하거나 대역폭 제한이 있는 현장에서 데이터 전처리 수행
- 활용:
- 실시간 스트림 분석
- 이미지 전처리/추론
- ML/IoT 워크로드
- 지원 기능:
- EC2 인스턴스 실행
- Lambda 함수 실행
- AWS IoT Greengrass 연동
- 클러스터링 (Snowball Edge 최대 16노드)
4. Snow 장비 비교
Snowcone / Snowball Edge (스토리지형/컴퓨트형) / Snowmobile
무게 | 2.1kg | 약 20kg+ | 트레일러 |
용량 | 8TB~14TB | 최대 210TB | 최대 100PB |
EC2 | 2 vCPU, 4GB | 104 vCPU, 416GB RAM | 미지원 |
전송 | DataSync/직접 | CLI/OpsHub/DataSync | 전담 팀 파견 |
대상 | 소규모 엣지/리모트 | 온프레미스 → AWS | 대형 데이터센터 폐쇄 |
5. AWS OpsHub
- GUI 기반 관리도구, Snow 장비의 로컬 설정/파일 업로드/시스템 상태 확인 지원
- CLI 기반 관리보다 간편함
- 윈도우/리눅스 지원
6. Amazon FSx 개요
FSx for Windows File Server | NTFS/SMB 기반 윈도우 파일 시스템 |
FSx for Lustre | HPC/ML용 고성능 리눅스 파일 시스템 |
FSx for NetApp ONTAP | NAS 마이그레이션용, 멀티 프로토콜(NFS, SMB, iSCSI) |
FSx for OpenZFS | 관리형 ZFS, NFS 호환, 고성능 스토리지 |
- 모든 FSx는 온프레미스와 Direct Connect/VPN을 통해 연결 가능
- 일부 FSx는 S3와 직접 통합 가능 (입출력 최적화)
7. AWS Storage Gateway
- 온프레미스 ↔ AWS 스토리지 간 가상 브리지
- 클라우드 통합, 로컬 캐시, 백업/복구, 하이브리드 스토리지에 적합
S3 파일 게이트웨이 | SMB/NFS 통해 S3 접근, 로컬 캐시 포함 |
FSx 파일 게이트웨이 | FSx for Windows에 온프레미스에서 접근 |
볼륨 게이트웨이 | iSCSI 기반 볼륨을 S3로 백업 (캐시/저장 모드) |
테이프 게이트웨이 | VTL 기반 백업 → S3, Glacier로 저장 |
- 게이트웨이는 소프트웨어 또는 하드웨어 어플라이언스로 설치 가능
8. AWS DataSync
- 에이전트를 통해 온프레미스 → AWS 간 자동화된 대규모 데이터 복제 수행
- 지원 대상: S3, EFS, FSx 전 제품군, 외부 NFS/SMB 서버
- 특징:
- ACL/타임스탬프/퍼미션 등 메타데이터 보존
- 예약 동기화 가능
- 네트워크 대역폭 제어
- 초당 최대 10Gbps 처리 가능
9. AWS 전송 서비스 (AWS Transfer Family)
- S3/EFS를 FTP, FTPS, SFTP로 마운트
- 기존 FTP 시스템을 클라우드로 이전 가능
- LDAP, AD, Cognito 등 사용자 인증 연동 가능
- SFTP 서버를 관리형으로 운영 가능
10. 스토리지 선택 가이드
S3 | 객체 스토리지 (이미지, 로그 등) |
S3 Glacier | 장기 보관용 아카이브 |
EBS | 단일 EC2 인스턴스 블록 스토리지 |
EFS | 멀티 AZ 간 POSIX 파일 시스템 공유 |
FSx for Windows | 윈도우 파일 서버 마이그레이션 |
FSx for Lustre | HPC/ML 처리용 고성능 |
FSx for ONTAP | 기존 NAS 이전용, 복제/스냅샷 기능 |
FSx for OpenZFS | ZFS 기반 시스템 마이그레이션 |
Storage Gateway | 온프레미스 ↔ AWS 연결, 캐시/백업 용도 |
Transfer Family | SFTP/FTP 기반 전송 필요 시 |
DataSync | 대규모 동기화 및 자동화 전송 |
Snow Family | 오프라인, 엣지, 대규모 마이그레이션 |
요약 정리
네트워크 전송 불가한 대용량 데이터 이동 | Snow Family |
고성능 파일 시스템 구축 | FSx |
온프레미스 ↔ AWS 하이브리드 스토리지 | Storage Gateway |
FTP/SFTP 기반 시스템 통합 | AWS Transfer Family |
자동화된 대량 데이터 동기화 | AWS DataSync |
'Certificate > AWS SAA-C03' 카테고리의 다른 글
[AWS-SAA] 12. 컨테이너, ECS, Fargate, ECR, EKS 요약 (0) | 2025.03.28 |
---|---|
[AWS-SAA] 11. SQS, SNS, Kinesis, Amazon MQ 요약 (0) | 2025.03.28 |
[AWS-SAA] 09. CloudFront 요약 (0) | 2025.03.28 |
[AWS-SAA] 08. S3 요약 (0) | 2025.03.28 |
[AWS-SAA] 07. Route53 요약 (0) | 2025.03.28 |