참조 배포

Data Lake Foundation on AWS

Amazon Redshift, Amazon Kinesis, AWS Glue 및 Amazon SageMaker 등 AWS 서비스 사용

이 Quick Start는 Amazon Simple Storage Service (Amazon S3), Amazon Redshift, Amazon Kinesis, Amazon Athena, AWS Glue, Amazon Elasticsearch Service (Amazon ES), Amazon SageMaker 및 Amazon QuickSight 등 Amazon Web Services (AWS) 서비스를 통합하는 데이터 레이크 파운데이션을 배포합니다.

데이터 레이크 파운데이션은 이러한 AWS 서비스를 사용하여 데이터 제출, 수집 처리, 데이터세트 관리, 데이터 변환 및 분석, machine learning 도구 개발 및 배포, 시각화 등의 기능을 제공합니다. 이러한 파운데이션이 배치되면 ISV 및 SaaS 도구를 사용하여 데이터 레이크를 강화할 수 있습니다.

이 참조 아키텍처는 특정 요구 사항을 충족하도록 사용자 지정할 수 있는 AWS CloudFormation 템플릿에 의해 자동화됩니다.

다음 사항도 참조하십시오: 이 아키텍처가 특정 요구 사항을 충족시키지 못하면 Quick Start 카탈로그의 다른 데이터 레이크 배포를 참조하십시오.

이 Quick Start는 AWS에서 개발했습니다.

  •  구축할 내용
  • 다음 인프라가 포함된 데이터 레이크용 Quick Start 아키텍처:

    • 가상 프라이빗 클라우드 (VPC)는 두 개의 가용 영역으로 확장되고 두 개의 퍼블릭 서브넷과 두 개의 프라이빗 서브넷을 포함합니다.*
    • 인터넷 액세스를 제공하는 인터넷 게이트웨이.*
    • 퍼블릭 서브넷에서 프라이빗 서브넷의 리소스에 대한 아웃바운드 인터넷 액세스를 허용하기 위한 관리형 NAT 게이트웨이.*
    • 퍼블릭 서브넷에서, 퍼블릭 및 프라이빗 서브넷의 EC2 인스턴스에 인바운드 SSH(Secure Shell) 액세스를 허용하는 Auto Scaling 그룹의 Linux 배스천 호스트.*
    • 예를 들어, Amazon Redshift 및 Amazon Athena가 조정된 데이터 세트에 읽고 쓸 수 있도록 허용하는 등 AWS 리소스에 대한 액세스 권한을 제공하기 위한 AWS Identity and Access Management(IAM) 역할.
    • 프라이빗 서브넷에서, 새로 조정되고 게시된 데이터 세트의 데이터 집계, 분석, 변환 및 생성을 위한 Amazon Redshift.
    • AWS 인증을 사용하여 액세스할 수 있는 Amazon SageMaker 인스턴스.
    • Amazon S3, Amazon Athena, AWS Glue, AWS Lambda, Amazon ES(Kibana 포함), Amazon Kinesis 및 Amazon QuickSight 등 기타 Amazon 서비스와의 통합.

    * 기존 VPC에 Quick Start를 배포하는 템플릿은 별표로 표시된 태스크를 건너뛰고 기존 VPC 구성을 묻는 메시지를 표시합니다.

  •  배포 방법
  • AWS에서 데이터 레이크 환경을 구축하려면, 배포 가이드의 지침을 따르세요. 배포 프로세스는 50분가량 걸리며 다음 단계를 포함합니다.

    1. 아직 AWS 계정이 없으면 https://aws.amazon.com에서 가입합니다.
    2. Quick Start를 시작합니다. 다음 2가지 옵션 중에서 선택할 수 있습니다.
    3. Quick Start에서 생성된 리소스를 확인하여 배포를 테스트합니다.

    Quick Start에는 사용자 지정할 수 있는 파라미터가 포함되어 있습니다. 예를 들어, 네트워크를 구성하거나 Amazon Redshift, Kinesis 및 Elasticsearch 설정을 사용자 지정할 수 있습니다.  

    Amazon은 이 파트너 솔루션에서 AWS와 협업하는 AWS 파트너와 사용자 배포 정보를 공유할 수 있습니다.  

  •  비용 및 라이선스
  • 이 Quick Start 참조 배포를 실행하는 동안 사용되는 AWS 서비스 비용은 고객이 부담해야 합니다. Quick Start 사용에 따르는 추가 비용은 없습니다.

    이 Quick Start를 위한 AWS CloudFormation 템플릿에는 사용자 지정할 수 있는 구성 매개 변수가 포함되어 있습니다. 인스턴스 유형과 같은 일부 설정에 따라 배포 비용이 달라집니다. 예상 비용은 사용하려는 각 AWS 서비스에 대한 요금 페이지를 참조하십시오.

    이 Quick Start는 AWS 기본 솔루션 구성 요소를 사용하므로 AWS 인프라 비용을 초과하는 비용이나 라이선스 요구 사항은 없습니다. 이 Quick Start는 Amazon ES에 포함된 오픈 소스 도구인 Kibana도 배포합니다.

  •  리소스
  • 이 Quick Start 참조 배포는 솔루션 개요, AWS Competency Partners가 제작한 옵션 컨설팅 제안 및 개념 증명(PoC) 프로젝트의 AWS 공동 투자가 포함되어 있는 Solution Space의 솔루션과 관련이 있습니다. 이 리소스에 대한 추가 정보가 필요한 경우 Solution Space를 방문하십시오.