Trabajar con consultas directas OpenSearch de Amazon Service - OpenSearch Servicio Amazon

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Trabajar con consultas directas OpenSearch de Amazon Service

Utilice Amazon OpenSearch Service Direct Query para analizar los datos de Amazon CloudWatch Logs, Amazon S3 y Amazon Security Lake sin crear canalizaciones de ingestión. Esta integración sin ETL le permite consultar datos in situ mediante OpenSearch SQL o PPL y explorarlos en Discover.

Para empezar, configure la fuente de datos en la OpenSearch consola de servicio. Para Amazon S3, utilice conexiones de dominio y cree tablas con SQL en Query Workbench. CloudWatch Los registros y Security Lake utilizan fuentes y AWS Glue Data Catalog tablas preconfiguradas.

Cuotas de las consultas directas

Su cuenta tiene las siguientes cuotas relacionadas con las consultas directas OpenSearch del Servicio.

Cuotas para Amazon S3

Cada vez que inicia una consulta a una fuente de datos de Amazon S3, OpenSearch Service abre una sesión y la mantiene activa durante al menos tres minutos. Esto reduce la latencia de las consultas al eliminar el tiempo de inicio de la sesión en las consultas posteriores.

Description (Descripción) Máximo Puede anular
Conexiones por dominio 10
Origen de datos por dominio 20
Índices por dominio 5
Sesiones simultáneas por origen de datos 10
OCU máxima por consulta 60
Tiempo máximo de ejecución de consulta (minutos) 30
Máximo OCUs por aceleración 20
Almacenamiento efímero máximo 20

Cuotas de CloudWatch registros

nota

Si desea realizar consultas directas con CloudWatch Logs Insights, asegúrese de consultarInformación adicional para los usuarios de CloudWatch Logs Insights que utilizan SQL OpenSearch .

Description (Descripción) Valor ¿El límite es flexible? Notas
Límite de TPS a nivel de cuenta en todas las consultas directas APIs 3 TPS
Número máximo de orígenes de datos 20 El límite es por. Cuenta de AWS
Número máximo de índices o vistas materializadas que se actualizan automáticamente 30 El límite es por origen de datos.
Máximo de consultas simultáneas 30

El límite es por fuente de datos y se aplica a las consultas en estado pendiente o en ejecución.

Incluye consultas interactivas (por ejemplo, comandos de recuperación de datosSELECT) y consultas de índice (por ejemplo, operaciones comoCREATE/ALTER).

OCU simultáneas máximas por consulta 512

OpenSearch Unidades de cómputo (OCU). El límite se basa en 15 ejecutores y 1 controlador, cada uno con 16 vCPU y 32 GB de memoria. Representa la potencia de procesamiento simultáneo.

Tiempo máximo de ejecución de consulta en minutos 60 No El límite se aplica a las consultas de OpenSearch PPL/SQL en Logs Insights. CloudWatch
Periodo para eliminar una consulta obsoleta IDs 90 días Este es el período de tiempo después del cual el OpenSearch Servicio purga los metadatos de las consultas de las entradas más antiguas. Por ejemplo, se llama GetDirectQuery o GetDirectQueryResult se produce un error en el caso de consultas de más de 90 días.

Cuotas para Security Lake

Description (Descripción) Valor ¿El límite es flexible? Notas
Límite de TPS a nivel de cuenta en todas las consultas directas APIs 3 TPS
Número máximo de orígenes de datos 20 El límite es por. Cuenta de AWS
Número máximo de índices o vistas materializadas que se actualizan automáticamente 30

Se aplica un límite por origen de datos.

Solo incluye índices y vistas materializadas (MVs) con la actualización automática establecida en true.

Máximo de consultas simultáneas 30

El límite se aplica a las consultas en estado pendiente o en ejecución.

Incluye consultas interactivas (por ejemplo, comandos de recuperación de datos como SELECT) y consultas de índice (por ejemplo, operaciones como CREATE, ALTER y DROP).

OCU simultáneas máximas por consulta 512

OpenSearch Unidades de cómputo (OCU). El límite se basa en 15 ejecutores y 1 controlador, cada uno con 16 vCPU y 32 GB de memoria. Representa la potencia de procesamiento simultáneo.

Tiempo máximo de ejecución de consulta en minutos 30 No Se aplica solo a consultas interactivas (por ejemplo, comandos de recuperación de datos como SELECT). En el caso de las consultas REFRESH, el límite es de 6 horas.
Período para purgar una consulta obsoleta IDs 90 días

Este es el período de tiempo después del cual el OpenSearch Servicio purga los metadatos de las consultas de las entradas más antiguas. Por ejemplo, se llama GetDirectQuery o GetDirectQueryResult se produce un error en el caso de consultas de más de 90 días.

Soportado Regiones de AWS

Regiones de AWS Se admite lo siguiente para las consultas directas de OpenSearch servicio en Amazon S3, CloudWatch Logs y Security Lake:

Disponible Regiones de AWS para Amazon S3

  • Asia-Pacífico (Hong Kong)

  • Asia-Pacífico (Mumbai)

  • Asia-Pacífico (Seúl)

  • Asia-Pacífico (Singapur)

  • Asia-Pacífico (Sídney)

  • Asia-Pacífico (Tokio)

  • Canadá (centro)

  • Europa (Fráncfort)

  • Europa (Irlanda)

  • Europa (Estocolmo)

  • Este de EE. UU. (Norte de Virginia)

  • Este de EE. UU. (Ohio)

  • Oeste de EE. UU. (Oregón)

Disponible Regiones de AWS para CloudWatch registros

  • Asia-Pacífico (Mumbai)

  • Asia-Pacífico (Hong Kong)

  • Asia-Pacífico (Osaka)

  • Asia-Pacífico (Seúl)

  • Asia-Pacífico (Singapur)

  • Asia-Pacífico (Sídney)

  • Asia-Pacífico (Tokio)

  • Canadá (centro)

  • Europa (Fráncfort)

  • Europa (Irlanda)

  • Europa (Estocolmo)

  • Europa (Milán)

  • Europa (España)

  • Este de EE. UU. (Norte de Virginia)

  • Este de EE. UU. (Ohio)

  • Oeste de EE. UU. (Oregón)

  • Oeste de EE. UU. (Norte de California)

  • Europa (París)

  • Europa (Londres)

  • América del Sur (São Paulo)

Regiones de AWS disponibles para Security Lake

  • Asia-Pacífico (Mumbai)

  • Asia-Pacífico (Singapur)

  • Asia-Pacífico (Sídney)

  • Asia-Pacífico (Tokio)

  • Canadá (centro)

  • Europa (Fráncfort)

  • Europa (Irlanda)

  • Europa (Estocolmo)

  • Este de EE. UU. (Norte de Virginia)

  • Este de EE. UU. (Ohio)

  • Oeste de EE. UU. (Oregón)

  • Europa (París)

  • Europa (Londres)

  • América del Sur (São Paulo)