본문 바로가기

Certificate/AWS SAA-C03

[AWS-SAA] 10. AWS Snow Family 요약

AWS Snow Family 및 스토리지 마이그레이션 솔루션 정리

1. AWS Snow Family 개요 (Offline Data Transfer & Edge Computing)

  • AWS로 대용량 데이터를 안전하고 효율적으로 마이그레이션하기 위한 물리적 디바이스 기반의 오프라인 전송 솔루션
  • 클라우드 접속이 어렵거나 대역폭이 부족한 지역에서의 엣지 컴퓨팅 환경 지원
Snowcone 소형 엣지 컴퓨팅 & 전송 2.1kg, 8~14TB 스토리지, USB-C, DataSync 사전설치
Snowball Edge 대규모 전송/컴퓨팅 80~210TB, 컴퓨트 최적화, EC2/Lambda 실행
Snowmobile 초대형 마이그레이션 트럭 단위, 100PB급, 보안 트레일러 운송

2. 데이터 마이그레이션 (Data Migration)

  • 목적: 대규모 데이터를 빠르게 AWS로 이동 (네트워크 전송보다 수일~수주 빠름)
  • 보안: 저장 중, 이동 중, 전송 완료 후 모두 암호화 및 디바이스 초기화
  • 절차:
    1. AWS Console에서 주문 및 작업 정의
    2. 장치 수령 후 로컬에서 데이터 업로드 (OpsHub 또는 CLI 사용)
    3. AWS로 반송 → 자동으로 S3에 업로드 후 데이터 삭제

3. 엣지 컴퓨팅 (Edge Computing)

  • 정의: 인터넷이 불안정하거나 대역폭 제한이 있는 현장에서 데이터 전처리 수행
  • 활용:
    • 실시간 스트림 분석
    • 이미지 전처리/추론
    • ML/IoT 워크로드
  • 지원 기능:
    • EC2 인스턴스 실행
    • Lambda 함수 실행
    • AWS IoT Greengrass 연동
    • 클러스터링 (Snowball Edge 최대 16노드)

4. Snow 장비 비교

Snowcone / Snowball Edge (스토리지형/컴퓨트형) / Snowmobile

 

무게 2.1kg 약 20kg+ 트레일러
용량 8TB~14TB 최대 210TB 최대 100PB
EC2 2 vCPU, 4GB 104 vCPU, 416GB RAM 미지원
전송 DataSync/직접 CLI/OpsHub/DataSync 전담 팀 파견
대상 소규모 엣지/리모트 온프레미스 → AWS 대형 데이터센터 폐쇄

5. AWS OpsHub

  • GUI 기반 관리도구, Snow 장비의 로컬 설정/파일 업로드/시스템 상태 확인 지원
  • CLI 기반 관리보다 간편함
  • 윈도우/리눅스 지원

6. Amazon FSx 개요

FSx for Windows File Server NTFS/SMB 기반 윈도우 파일 시스템
FSx for Lustre HPC/ML용 고성능 리눅스 파일 시스템
FSx for NetApp ONTAP NAS 마이그레이션용, 멀티 프로토콜(NFS, SMB, iSCSI)
FSx for OpenZFS 관리형 ZFS, NFS 호환, 고성능 스토리지
  • 모든 FSx는 온프레미스와 Direct Connect/VPN을 통해 연결 가능
  • 일부 FSx는 S3와 직접 통합 가능 (입출력 최적화)

7. AWS Storage Gateway

  • 온프레미스 ↔ AWS 스토리지 간 가상 브리지
  • 클라우드 통합, 로컬 캐시, 백업/복구, 하이브리드 스토리지에 적합
S3 파일 게이트웨이 SMB/NFS 통해 S3 접근, 로컬 캐시 포함
FSx 파일 게이트웨이 FSx for Windows에 온프레미스에서 접근
볼륨 게이트웨이 iSCSI 기반 볼륨을 S3로 백업 (캐시/저장 모드)
테이프 게이트웨이 VTL 기반 백업 → S3, Glacier로 저장
  • 게이트웨이는 소프트웨어 또는 하드웨어 어플라이언스로 설치 가능

8. AWS DataSync

  • 에이전트를 통해 온프레미스 → AWS 간 자동화된 대규모 데이터 복제 수행
  • 지원 대상: S3, EFS, FSx 전 제품군, 외부 NFS/SMB 서버
  • 특징:
    • ACL/타임스탬프/퍼미션 등 메타데이터 보존
    • 예약 동기화 가능
    • 네트워크 대역폭 제어
    • 초당 최대 10Gbps 처리 가능

9. AWS 전송 서비스 (AWS Transfer Family)

  • S3/EFS를 FTP, FTPS, SFTP로 마운트
  • 기존 FTP 시스템을 클라우드로 이전 가능
  • LDAP, AD, Cognito 등 사용자 인증 연동 가능
  • SFTP 서버를 관리형으로 운영 가능

10. 스토리지 선택 가이드

S3 객체 스토리지 (이미지, 로그 등)
S3 Glacier 장기 보관용 아카이브
EBS 단일 EC2 인스턴스 블록 스토리지
EFS 멀티 AZ 간 POSIX 파일 시스템 공유
FSx for Windows 윈도우 파일 서버 마이그레이션
FSx for Lustre HPC/ML 처리용 고성능
FSx for ONTAP 기존 NAS 이전용, 복제/스냅샷 기능
FSx for OpenZFS ZFS 기반 시스템 마이그레이션
Storage Gateway 온프레미스 ↔ AWS 연결, 캐시/백업 용도
Transfer Family SFTP/FTP 기반 전송 필요 시
DataSync 대규모 동기화 및 자동화 전송
Snow Family 오프라인, 엣지, 대규모 마이그레이션

요약 정리

네트워크 전송 불가한 대용량 데이터 이동 Snow Family
고성능 파일 시스템 구축 FSx
온프레미스 ↔ AWS 하이브리드 스토리지 Storage Gateway
FTP/SFTP 기반 시스템 통합 AWS Transfer Family
자동화된 대량 데이터 동기화 AWS DataSync