게시된 날짜: Nov 17, 2023
이제 AWS Glue for Apache Spark는 Amazon OpenSearch Service에 대한 네이티브 연결을 지원하므로 사용자는 OpenSearch 커넥터 라이브러리를 설치하거나 관리할 필요 없이 Amazon OpenSearch Service의 데이터를 효율적으로 읽고 쓸 수 있습니다. 사용자는 이제 OpenSearch Service에 저장된 데이터를 AWS Glue Studio의 노코드 드래그 앤 드롭 시각적 인터페이스에서 소스 또는 대상으로 사용하거나, AWS Glue ETL 작업 스크립트에서 직접 사용할 수 있습니다. 이 새로운 커넥터를 AWS Glue의 추출, 전환, 적재(ETL) 기능과 결합하면 ETL 파이프라인 생성이 간소화되어 ETL 개발자가 데이터 파이프라인을 구축하고 유지 관리하는 시간을 절약할 수 있습니다.
시작하려면 AWS Glue 데이터 카탈로그 내에 새로운 Amazon OpenSearch Service 연결을 생성하고 Glue ETL 작업에 OpenSearch Service 소스 또는 대상을 추가하면 됩니다. OpenSearch Service에서 데이터를 읽을 때 개발자는 전체 OpenSearch Service 인덱스를 소스로 선택하거나 쿼리를 제출하여 특정 인덱스 데이터를 선택할 수 있습니다. OpenSearch Service에 데이터를 쓸 때 사용자는 결과를 OpenSearch Service 인덱스에 로드하기 전에 Glue에서 데이터를 강화, 정리 및 변환할 수 있습니다. ETL 개발자는 이러한 기능을 통해 다양한 시나리오에서 OpenSearch Service와 AWS Glue를 사용할 수 있습니다.