게시된 날짜: Oct 19, 2023
이제 AWS Glue for Apache Spark는 Google BigQuery에 대한 네이티브 연결을 지원하므로 사용자는 Google BigQuery 커넥터 라이브러리를 설치하거나 관리할 필요 없이 Google BigQuery의 데이터를 효율적으로 읽고 쓸 수 있습니다. 사용자는 이제 AWS Glue Studio의 노코드 드래그 앤 드롭 시각적 인터페이스에서 BigQuery를 소스 또는 대상으로 추가하거나 AWS Glue ETL 작업 스크립트에서 직접 커넥터를 사용할 수 있습니다. 이 새로운 커넥터를 AWS Glue의 추출, 전환, 적재(ETL) 기능과 결합하면 ETL 파이프라인 생성이 간소화되어 ETL 개발자가 데이터 파이프라인을 구축하고 유지 관리하는 시간을 절약할 수 있습니다.
시작하려면 AWS Glue 데이터 카탈로그 내에 새로운 Google BigQuery 연결을 생성하고 Glue ETL 작업에 Google BigQuery 소스 또는 대상을 추가하면 됩니다. BigQuery에서 읽을 때 개발자는 BigQuery 테이블을 소스로 직접 선택하거나 BigQuery SQL을 사용하여 사용자 지정 소스를 정의할 수 있습니다. BigQuery에 쓸 때 사용자는 기존 BigQuery 연결을 재사용하거나 대상으로 사용할 새 연결을 생성할 수 있습니다. ETL 개발자는 이러한 기능을 통해 다양한 시나리오에서 BigQuery와 AWS Glue를 사용할 수 있습니다.
이 기능은 AWS Glue가 제공되는 모든 상용 AWS 리전에서 사용할 수 있습니다.
자세한 내용은 AWS Glue 설명서에서 확인하세요.