Amazon MSK já oferece suporte à geração de incorporação vetorial usando o Amazon Bedrock
Agora, o Amazon MSK (Managed Streaming for Apache Kafka) oferece suporte aos novos esquemas de streaming gerenciado para Apache Flink para gerar incorporações vetoriais usando o Amazon Bedrock, facilitando a criação de aplicações de IA em tempo real com base em dados contextuais atualizados. Esse esquema simplifica o processo de incorporação dos dados mais recentes de pipelines de streaming do Amazon MSK em modelos de IA generativa, eliminando a necessidade de escrever código personalizado para integrar fluxos de dados em tempo real, bancos de dados de vetores e grandes modelos de linguagem.
Com apenas alguns cliques, os clientes podem configurar o esquema para gerar continuamente incorporações vetoriais usando os modelos de incorporação do Bedrock e indexá-las no Amazon OpenSearch para fluxos de dados do Amazon MSK. Esse recurso permite que os clientes combinem o contexto de dados em tempo real com os grandes modelos de linguagem avançados do Bedrock para gerar respostas de IA precisas e atualizadas sem escrever código personalizado. Os clientes também podem optar por melhorar a eficiência da recuperação de dados usando o suporte integrado para técnicas de fragmentação de dados da LangChain, uma biblioteca de código aberto que oferece suporte a entradas de alta qualidade para ingestão de modelos. O esquema gerencia a integração e o processamento de dados entre o MSK, o modelo de incorporação escolhido e o armazenamento vetorial do Open Search, permitindo que os clientes se concentrem na criação de aplicações de IA em vez de gerenciar a integração subjacente.
O esquema de incorporação vetorial em tempo real está disponível ao público em geral nas regiões da AWS Leste dos EUA (Norte da Virgínia), Leste dos EUA (Ohio), Oeste dos EUA (Oregon), Europa (Paris), Europa (Londres), Europa (Irlanda) e América do Sul (São Paulo). Acesse a documentação do Amazon MSK para ver a lista de regiões adicionais que terão suporte nas próximas semanas. Para saber mais sobre como usar o esquema para gerar incorporações vetoriais em tempo real a partir de dados do Amazon MSK, acesse o Blog da AWS.