Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Almacenamiento de varios niveles para Amazon Service OpenSearch

El almacenamiento en varios niveles para Amazon OpenSearch Service es una solución de gestión de datos inteligente que optimiza el rendimiento y los costes mediante la gestión de los datos en diferentes niveles de almacenamiento. Esta arquitectura permite a las organizaciones equilibrar de manera eficiente el equilibrio entre rendimiento y costo al mantener los datos a los que se accede con frecuencia en un almacenamiento en caliente de alto rendimiento y, al mismo tiempo, transferir los datos a los que se accede con menos frecuencia a un almacenamiento en caliente más rentable.

Amazon OpenSearch Service ofrece dos opciones de arquitectura para el nivel hot/warm de almacenamiento:

Arquitectura de almacenamiento de varios niveles

Ventajas principales

Requisitos previos

Limitaciones

Puntos a tener en cuenta

Crear un dominio de varios niveles

Paso 1: Crear el dominio

aws opensearch create-domain \
      --domain-name my-domain \
      --engine-version OpenSearch_3.3 \
      --cluster-config InstanceCount=3,InstanceType=or2.large.search,DedicatedMasterEnabled=true,DedicatedMasterType=m6g.large.search,DedicatedMasterCount=3,WarmEnabled=true,WarmCount=3,WarmType=oi2.2xlarge.search \
      --ebs-options EBSEnabled=true,VolumeType=gp2,VolumeSize=11 \
      --node-to-node-encryption-options Enabled=true \
      --encryption-at-rest-options Enabled=true \
      --domain-endpoint-options EnforceHTTPS=true,TLSSecurityPolicy=Policy-Min-TLS-1-2-2019-07 \
      --advanced-security-options '{"Enabled":true,"InternalUserDatabaseEnabled":true,"MasterUserOptions":{"MasterUserName":"user_name","MasterUserPassword":"your_pass"}}' \
      --access-policies '{"Version": "2012-10-17",		 	 	  "Statement":[{"Effect":"Allow","Principal":"*","Action":"es:*","Resource":"*"}]}' \
      --region us-east-1

Paso 2: Verificar los nodos calientes

aws opensearch describe-domain-nodes --domain-name my-domain --region us-east-1

Ejemplo de respuesta (extracto):

{
      "NodeType": "Warm",
      "InstanceType": "oi2.large.search",
      "NodeStatus": "Active"
    }

Gestión de las migraciones de niveles

Compatibilidad con dominios de varios niveles:

Nueva estratificación APIs

Migrar un índice a cálido:

curl -XPOST 'https://localhost:9200/index-name/_tier/warm'

Respuesta:

{"acknowledged": true}

Migrar un índice a caliente:

curl -XPOST 'https://localhost:9200/index-name/_tier/hot'

Respuesta:

{"acknowledged": true}

Compruebe el estado de la organización por niveles:

curl -XGET 'https://localhost:9200/index-name/_tier'

Ejemplo de respuesta:

{
      "tiering_status": {
         "index": "index-name",
         "state": "RUNNING_SHARD_RELOCATION",
         "source": "HOT",
         "target": "WARM",
         "start_time": 1745836500563,
         "shard_level_status": {
           "running": 0,
           "total": 100,
           "pending": 100,
           "succeeded": 0
         }
      }
    }

Vista compartida detallada:

curl 'https://localhost:9200/index1/_tier?detailed=true'

Enumere todas las migraciones en curso (texto):

curl 'https://localhost:9200/_tier/all'

Enumere todas las migraciones en curso (JSON):

curl 'https://localhost:9200/_tier/all?format=json'

Filtrar por nivel de destino:

curl 'https://localhost:9200/_tier/all?target=_warm'

Legado UltraWarm APIs por motivos de compatibilidad

Migre a una zona cálida:

curl -XPOST localhost:9200/_ultrawarm/migration/index2/_warm

Migrar a calor:

curl -XPOST localhost:9200/_ultrawarm/migration/index2/_hot

Compruebe el estado:

curl -XGET localhost:9200/_ultrawarm/migration/index2/_status

Configuración de seguridad

Si habilitas el almacenamiento de varios niveles en un dominio de Amazon OpenSearch Service preexistente, es posible que la storage_tiering_manager función no esté definida en el dominio. Los usuarios que no sean administradores deben estar asignados a este rol para poder administrar índices templados en los dominios mediante un control de acceso detallado. Para crear el rol storage_tiering_manager de forma manual, siga estos pasos:

Prácticas recomendadas

Al implementar el almacenamiento de varios niveles en sus dominios de Amazon OpenSearch Service, tenga en cuenta las siguientes prácticas recomendadas:

Supervisión de métricas

Los dominios de almacenamiento de varios niveles proporcionan métricas adicionales para monitorear el rendimiento de los niveles intermedios. Estas métricas incluyen tanto las UltraWarm métricas existentes como las nuevas métricas específicas de la arquitectura de instancias OpenSearch optimizadas:

Nuevas métricas