Amazon Web Services 한국 블로그

AWS Snowball 및 Snowball Edge, 대용량 데이터 이동 서비스 서울 리전 출시

AWS의 대용량 데이터 이동 장치 서비스인 AWS Snowball 및 Snowball Edge가 서울 리전에 출시되었습니다. Snowball 및 Snowball Edge는 안전하고 견고한 장치를 사용하여 데이터 마이그레이션, 에지 컴퓨팅, 기계 학습 및 분석을 위해 Amazon S3로의 페타 바이트 단위로 데이터를 이동하는 전송 서비스입니다.

AWS Snowball 및 AWS Snowball Edge는 기존 저장소에서 네트워크 대역폭이 충분하지 않을 때, 대용량 데이터 세트를 클라우드로 이전하는데 도움이 됩니다.

AWS Snowball Edge는 원격 위치, 인터넷 연결이 끊어진 환경 등에서 엣지 컴퓨팅을 위해 특정 Amazon EC2 인스턴스를 실행할 수 있게 해줍니다. AWS 클라우드에서 애플리케이션 개발 및 테스트 한 다음, Snowball Edge 장치에 배포하여 이미지 분석 또는 기계 학습을위한 데이터를 수집하고 사전 처리 할 수 있습니다. 데이터 저장 및 추가 처리를 위해 저장 장치를 AWS로 다시 보낼 수 있습니다.

데이터 이전 작업 생성하기

이제 AWS Snowball 이전 작업을 관리 콘솔에서 하는 방법을 잠깐 살펴보겠습니다. (물론 AWS 커맨드라인 인터페이스에서도 가능합니다.) 먼저 작업 계획을 선택합니다. 현재 여러분이 가진 스토리지에서 장치로 복사해서 Amazon S3로 가져가거나, 아니면 반대로 내보내기도 가능합니다. Snowball Edge를 주문해서 로컬 컴퓨팅 및 스토리지 용도로도 사용할 수 있습니다.

Amazon S3로 데이터를 이동하기를 선택했다면, 데이터 복사를 수행하기 위해 Snowball 장치를 배송 받을 (이전에 가지고 있거나 새로운) 주소를 입력함으로서 시작할 수 있습니다. 정해진 택배사를 통해 며칠안에 Snowball 장치가 도착할 것입니다.

 

이제 작업할 세부 정보를 입력합니다. 작업 이름과 장치를 선택합니다. Snowball 장치는 80TB, Snowball Edge는 100TB까지 한번에 이동 가능합니다. 장치에 저장한 데이터를 저장할 S3 버킷도 선택합니다.

이제 장치 운송 중에 데이터를 보안하기 위한 작업 권한과 암호화 방식을 설정합니다. IAM 역할 및 KMS 암호화 키를  선택할 수 있습니다.

이제 알림 설정을 하면 거의 끝났습니다. 새로운 SNS 토픽을 원하는 이메일로 받을 수 있고 알림을 원하는 상태 등을 선택 가능합니다.

신청 사항에 대해 최종 확인을 끝나면 작업이 활성화 됩니다. 이제 장치를 기다리시면 됩니다.

데이터 장치에 복사하기

일단 Snowball 기기를 받으시면 플러그를 꼽고 네트웍에 연결하신 후 IP 설정(DHCP로 자동 인식하거나 설정 가능) 후, S3 Adapter for Snowball나 SnowBall 클라이언트를 설정합니다. 클라이언트 프로그램은 리소스 페이지에서 다운로드 가능합니다.

콘솔에서 신청 시 받은 작업용 manifest 및 25자리 언락(unlock) 코드를 입력하면 기기 사용을 시작할 수 있습니다.

아래 명령어를 통하면 바로 시작 가능합니다.

$ snowball start -i DEVICE_IP -m PATH_TO_MANIFEST -p UNLOCK_CODE

이제 데이터를 Snowball에 복사하면 됩니다. 데이터는 256비트 암호화되어 기기에 저장되며, 제한된 네트웍 접근을 가진 사설 서브넷으로 구성됩니다.

80테라바이트까지 데이터를 복사할 수 있고, 연결을 해제하면 e-ink 디스플레이가 자동으로 표시가 됩니다. 이제 장치를 저희에게 보내주시면 됩니다. 저희가 받은 후 데이터를 복호화 및 여러분이 처음 지정한 S3 버킷으로 복사해 드립니다. 절차가 완료되면 National Institute of Standards and Technology Special Publication 800-88 (미디어 장치 영구 삭제 가이드)에 따라 데이터는 완벽하게 삭제됩니다.

이러한 모든 절차는 Amazon Simple Notification Service (SNS) 토픽을 통해 여러분의 이메일 주소로 전달됩니다. SNS 알림을 통해 데이터 가져오는 과정을 자체 이전 워크플로 시스템과 통합할 수도 있습니다.

추가 정보

AWS Snowball 시리즈에 대한 더 자세한 출시 현황 및 관련 사항은 아래 블로그를 참고하시면 됩니다.

Snowball에 대한 더 자세한 것은 제품 페이지, Snowball 개발자 가이드 혹은 Snowball Edge 개발자 가이드를 참고하시기 바랍니다.

– Channy (윤석찬);