Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Penyimpanan multi-tier untuk Layanan Amazon OpenSearch

Penyimpanan multi-tier untuk Amazon OpenSearch Service adalah solusi manajemen data cerdas yang mengoptimalkan kinerja dan biaya dengan mengelola data di berbagai tingkatan penyimpanan. Arsitektur ini memungkinkan organisasi untuk secara efisien menyeimbangkan trade-off antara kinerja dan biaya dengan menyimpan data yang sering diakses dalam penyimpanan panas berkinerja tinggi sambil memindahkan data yang lebih jarang diakses ke penyimpanan hangat yang lebih hemat biaya.

Amazon OpenSearch Service menawarkan dua opsi arsitektur untuk tingkat hot/warm penyimpanan:

Arsitektur penyimpanan multi-tier

Manfaat utama

Prasyarat

Batasan

Hal yang perlu diperhatikan

Membuat domain multi-tier

Langkah 1: Buat domain

aws opensearch create-domain \
      --domain-name my-domain \
      --engine-version OpenSearch_3.3 \
      --cluster-config InstanceCount=3,InstanceType=or2.large.search,DedicatedMasterEnabled=true,DedicatedMasterType=m6g.large.search,DedicatedMasterCount=3,WarmEnabled=true,WarmCount=3,WarmType=oi2.2xlarge.search \
      --ebs-options EBSEnabled=true,VolumeType=gp2,VolumeSize=11 \
      --node-to-node-encryption-options Enabled=true \
      --encryption-at-rest-options Enabled=true \
      --domain-endpoint-options EnforceHTTPS=true,TLSSecurityPolicy=Policy-Min-TLS-1-2-2019-07 \
      --advanced-security-options '{"Enabled":true,"InternalUserDatabaseEnabled":true,"MasterUserOptions":{"MasterUserName":"user_name","MasterUserPassword":"your_pass"}}' \
      --access-policies '{"Version": "2012-10-17",		 	 	  "Statement":[{"Effect":"Allow","Principal":"*","Action":"es:*","Resource":"*"}]}' \
      --region us-east-1

Langkah 2: Verifikasi node hangat

aws opensearch describe-domain-nodes --domain-name my-domain --region us-east-1

Sampel respon (kutipan):

{
      "NodeType": "Warm",
      "InstanceType": "oi2.large.search",
      "NodeStatus": "Active"
    }

Mengelola migrasi tingkat

Dukungan domain multi-tier:

Tiering baru APIs

Migrasikan indeks ke pemanasan:

curl -XPOST 'https://localhost:9200/index-name/_tier/warm'

Respons:

{"acknowledged": true}

Migrasikan indeks ke hot:

curl -XPOST 'https://localhost:9200/index-name/_tier/hot'

Respons:

{"acknowledged": true}

Periksa status tingkatan:

curl -XGET 'https://localhost:9200/index-name/_tier'

Contoh respons:

{
      "tiering_status": {
         "index": "index-name",
         "state": "RUNNING_SHARD_RELOCATION",
         "source": "HOT",
         "target": "WARM",
         "start_time": 1745836500563,
         "shard_level_status": {
           "running": 0,
           "total": 100,
           "pending": 100,
           "succeeded": 0
         }
      }
    }

Tampilan pecahan terperinci:

curl 'https://localhost:9200/index1/_tier?detailed=true'

Daftar semua migrasi yang sedang berlangsung (teks):

curl 'https://localhost:9200/_tier/all'

Daftar semua migrasi yang sedang berlangsung (JSON):

curl 'https://localhost:9200/_tier/all?format=json'

Filter berdasarkan tingkat target:

curl 'https://localhost:9200/_tier/all?target=_warm'

Warisan UltraWarm APIs untuk kompatibilitas

Migrasi ke hangat:

curl -XPOST localhost:9200/_ultrawarm/migration/index2/_warm

Migrasi ke panas:

curl -XPOST localhost:9200/_ultrawarm/migration/index2/_hot

Periksa status:

curl -XGET localhost:9200/_ultrawarm/migration/index2/_status

Konfigurasi keamanan

Jika Anda mengaktifkan penyimpanan multi-tier pada domain OpenSearch Layanan Amazon yang sudah ada sebelumnya, storage_tiering_manager peran tersebut mungkin tidak ditentukan pada domain. Pengguna non-admin harus dipetakan ke peran ini untuk mengelola indeks hangat pada domain menggunakan kontrol akses berbutir halus. Untuk membuat secara manual peran storage_tiering_manager, lakukan langkah-langkah berikut:

Praktik terbaik

Saat Anda menerapkan penyimpanan multi-tier di domain OpenSearch Layanan Amazon, pertimbangkan praktik terbaik berikut:

Metrik pemantauan

Domain penyimpanan multi-tier menyediakan metrik tambahan untuk memantau kinerja tingkat hangat. Metrik ini mencakup metrik yang ada dan UltraWarm metrik baru yang spesifik untuk arsitektur Instans yang OpenSearch Dioptimalkan:

Metrik baru