Esquemas de incorporação de vetores em tempo real

O Amazon MSK (Managed Streaming for Apache Kafka) oferece suporte a planos do Amazon Managed Service for Apache Flink para gerar incorporações vetoriais usando o Amazon Bedrock, simplificando o processo de criação de aplicações de IA em tempo real baseados em dados contextuais atualizados. O esquema do MSF simplifica o processo de incorporação dos dados mais recentes de seus pipelines de streaming do Amazon MSK em seus modelos de IA generativa, eliminando a necessidade de escrever código personalizado para integração em tempo real de fluxos de dados, bancos de dados de vetores e grandes modelos de linguagem (LLMs).

Você pode configurar o esquema do MSF para gerar continuamente incorporações vetoriais usando os modelos de incorporação do Bedrock e, em seguida, indexar essas incorporações no OpenSearch Service para seus fluxos de dados do Amazon MSK. Isso permite combinar o contexto de dados em tempo real com os poderosos modelos de linguagem ampla do Bedrock para gerar respostas de IA precisas e atualizadas sem escrever código personalizado. Você também pode optar por melhorar a eficiência da recuperação de dados usando o suporte integrado em técnicas de agrupamento de dados do LangChain, uma biblioteca de código aberto compatível com entradas de alta qualidade para ingestão de modelos. O esquema gerencia a integração e o processamento de dados entre o MSK, o modelo de incorporação escolhido, e o armazenamento vetorial do OpenSearch, permitindo que você se concentre na criação de suas aplicações de IA, em vez de gerenciar a integração subjacente.

Os esquemas de incorporação de vetores em tempo real estão disponíveis nas seguintes regiões da AWS: