Amazon MSK, 이제 Amazon Bedrock을 사용한 벡터 임베딩 생성 지원
이제 Amazon Managed Streaming for Apache Kafka(Amazon MSK)는 Amazon Bedrock을 사용하여 벡터 임베딩을 생성하는 새로운 Managed Streaming for Apache Flink 블루프린트를 지원합니다. 이에 따라 최신 컨텍스트 데이터로 구동되는 실시간 AI 애플리케이션을 더 쉽게 구축할 수 있게 되었습니다. 이 블루프린트를 사용하면 실시간 데이터 스트림, 벡터 데이터베이스 및 대규모 언어 모델을 통합하기 위해 사용자 지정 코드를 작성할 필요가 없어 Amazon MSK 스트리밍 파이프라인의 최신 데이터를 생성형 AI 모델에 통합하는 프로세스가 간소화됩니다.
고객은 몇 번의 클릭만으로 Bedrock의 임베딩 모델을 사용하여 벡터 임베딩을 지속적으로 생성하도록 블루프린트를 구성한 다음, Amazon OpenSearch에서 Amazon MSK 데이터 스트림의 임베딩을 인덱싱할 수 있습니다. 따라서 고객은 실시간 데이터의 컨텍스트를 Bedrock의 강력한 대규모 언어 모델과 결합하여 사용자 지정 코드를 작성하지 않고도 정확한 최신 AI 응답을 생성할 수 있습니다. 또한 고객은 모델 수집을 위한 고품질 입력을 지원하는 오픈 소스 라이브러리인 LangChain의 데이터 청킹 기술에 대해 기본 제공되는 지원을 통해 데이터 검색의 효율성을 개선할 수 있습니다. 이 블루프린트는 MSK, 선택한 임베딩 모델, Open Search 벡터 스토어 간의 데이터 통합 및 처리를 관리하므로 고객은 기본 통합을 관리하는 대신 AI 애플리케이션 구축에 집중할 수 있습니다.
실시간 벡터 임베딩 블루프린트는 미국 동부(버지니아 북부), 미국 동부(오하이오), 미국 서부(오리건), 유럽(파리), 유럽(런던), 유럽(아일랜드) 및 남아메리카(상파울루) AWS 리전에서 정식 버전으로 제공됩니다. 향후 몇 주에 걸쳐 지원이 추가될 리전 목록은 Amazon MSK 설명서를 참조하세요. 블루프린트를 사용하여 Amazon MSK 데이터에서 실시간 벡터 임베딩을 생성하는 방법을 자세히 알아보려면 AWS Blog로 이동하세요.