Amazon Redshift tidak akan lagi mendukung penggunaan Python UDF setelah 30 Juni 2026. Kami akan mulai menegakkannya secara bertahap. Untuk informasi lebih lanjut tentang detail opsi akhir masa pakai dan migrasi Python, lihat posting blog yang diterbitkan pada 30 Juni 2025.

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Integrasi tabel sistem dengan Tabel S3

Gunakan integrasi tabel sistem dengan Amazon S3 Tables untuk menyimpan data tabel sistem Amazon Redshift Anda di luar periode retensi dalam klaster 7 hari. Ini membantu Anda memenuhi persyaratan kepatuhan, audit, dan pengamatan. Saat Anda mengaktifkan fitur ini, Redshift menulis log tabel sistem ke Tabel S3 dalam Apache Iceberg format dan mengelola partisi, pemadatan, dan pemeliharaan snapshot. Anda dapat menyimpan data ini selama Anda butuhkan untuk analisis dan audit. Karena data disimpan dalam format Iceberg terbuka, Anda dapat menanyainya dengan Redshift, Amazon Athena, atau mesin lainnya. Iceberg-compatible Anda juga dapat menggunakan keterampilan agen AI untuk kueri bahasa alami (lihat Keterampilan tabel sistem untuk Toolkit AWS Agen di situs web). GitHub

Saat Anda mengaktifkan fitur ini melalui konsol, Redshift CLI, atau SDK, Redshift mulai menulis baris baru dari tabel sistem yang Anda pilih ke Tabel S3 segera setelahnya pada frekuensi tetap. Anda memilih tabel sistem mana yang akan dipublikasikan; Tabel S3 memberlakukan durasi retensi yang Anda konfigurasikan.

Ini mendukung kasus penggunaan berikut:

Fitur ini tersedia untuk instans Amazon Redshift Provisioned RA3 dan RG dan Amazon Redshift Serverless di semua Wilayah AWS komersial di mana Tabel Redshift dan S3 didukung. Dalam topik ini, data warehouse mengacu pada cluster yang disediakan atau kelompok kerja Redshift Serverless.

Cara kerjanya

Setelah Anda mengaktifkan fitur dan memilih satu atau beberapa tabel sistem yang didukung, Redshift menulis catatan yang baru selesai dari tabel sistem tersebut ke Tabel S3. Data dikirim dalam batch pada frekuensi tetap.

Tabel sistem ada di AWS akun Anda tetapi dikelola layanan: AWS memiliki dan mengoperasikan pengiriman data dan manajemen tabel, termasuk yang berikut:

Tidak ada infrastruktur untuk dibangun atau dipelihara dan tidak berdampak pada beban kerja Anda.

Anda mengonfigurasi berapa lama untuk menyimpan data melalui kedaluwarsa catatan Tabel S3. Untuk informasi selengkapnya, lihat Mengkonfigurasi retensi.

Karena tabel dikelola oleh AWS, Anda tidak dapat mengubah atau menghapus baris yang diberikan Redshift. Data yang dikirim tidak dapat diubah. Anda hanya mengontrol akses baca ke tabel. Untuk informasi selengkapnya, lihat Tata kelola data.

Hanya aktivitas yang diselesaikan yang dikirimkan ke Tabel S3. Tabel sistem di gudang data Anda dapat menampilkan aktivitas dalam penerbangan, tetapi hanya catatan yang telah mencapai keadaan akhir yang disalin. Misalnya, kueri selesai, dibatalkan, atau dibatalkan dikirimkan, tetapi kueri yang masih berjalan tidak dikirimkan sampai mencapai status akhir.

Mengaktifkan integrasi tabel sistem dengan Tabel S3

Untuk mengaktifkan integrasi tabel sistem dengan Tabel S3, gunakan Redshift API yang ada dengan tipe tujuan log baru. s3table Saat diaktifkan, Redshift membuat bucket tabel S3 yang diberi nama aws-redshift di akun Anda. Anda mengelola fitur dengan operasi yang sama yang Anda gunakan untuk tujuan log lainnya: untuk cluster yang disediakan,, enable-loggingdisable-logging, dandescribe-logging-status; untuk Redshift Serverless, dan. update-namespace get-namespace

Perizinan

Prinsipal yang mengaktifkan, memodifikasi, atau menonaktifkan fitur harus memiliki izin berikut:

Setelah bucket dibuat, Redshift membuat ruang nama dan tabel di dalamnya menggunakan hubungan kepercayaan layanan antara Redshift dan Tabel S3. Prinsip pengaktifan tidak memerlukan izin untuk membuat ruang nama atau tabel.

Opsi deployment

Anda dapat mengonfigurasi pengiriman dalam salah satu dari dua pola. Gudang data tertentu menggunakan satu pola pada satu waktu.

Model penerapan menentukan bagaimana data diatur dalam Tabel S3. Dalam model per-gudang, nama namespace Tabel S3 berisi pengidentifikasi unik untuk gudang data, sehingga setiap data gudang secara fisik dipisahkan menjadi namespace sendiri. Dalam model konsolidasi, nama namespace Tabel S3 berisi nomor AWS akun, dan data dari semua gudang di akun dan Wilayah itu disimpan bersama dalam namespace dan tabel yang sama.

Kedua opsi didukung dalam satu AWS akun dan satu Wil AWS ayah. Untuk menganalisis data di seluruh Wilayah atau akun, gabungkan hasil dari tabel masing-masing Wilayah atau akun pada waktu kueri. Untuk akses lintas akun, Anda dapat menggunakan berbagi Katalog AWS Glue Data. Untuk informasi selengkapnya, lihat Memberikan akses lintas akun di Panduan Peng AWS Glue embang.

Menggunakan konsol

Untuk berhenti menerbitkan tabel sistem, kembali ke pengaturan dan hapus. Data yang sudah dipublikasikan disimpan sampai Anda mengonfigurasi kedaluwarsa melalui Tabel S3.

Anda dapat meninjau status integrasi dari halaman detail cluster atau namespace. Perluas Pemetaan tabel View S3 untuk melihat pemetaan antara setiap tabel sistem dan nama tabel S3 dan namespace yang sesuai. Anda juga dapat melihat data yang dipublikasikan dari konsol Tabel S3.

Menggunakan AWS CLI

Parameter berikut mengkonfigurasi penerbitan Tabel S3:

Cluster yang disediakan

Aktifkan pengiriman. --log-exportsmenerima all atau daftar tabel sistem yang didukung yang dipisahkan spasi, dan --s3-table-granularity menerima cluster (per gudang) atau account (konsolidasi).

aws redshift enable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports all \
    --s3-table-granularity account

Untuk mengaktifkan pengiriman hanya untuk tabel sistem tertentu:

aws redshift enable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports sys_query_history sys_query_text sys_userlog \
    --s3-table-granularity cluster

Periksa status pengiriman.

aws redshift describe-logging-status \
    --cluster-identifier my-redshift-cluster

Nonaktifkan pengiriman untuk semua tabel sistem, atau untuk tabel tertentu dengan--log-exports:

aws redshift disable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports sys_stream_scan_states

Redshift Tanpa Server

Di Redshift Serverless, Anda mengonfigurasi fitur per namespace dengan. update-namespace Nama tabel sistem diteruskan --s3-table-names (tidak--log-exports).

Aktifkan pengiriman.

aws redshift-serverless update-namespace \
    --namespace-name my-namespace \
    --log-destination-type s3table \
    --s3-table-action Enable \
    --s3-table-names all \
    --s3-table-granularity namespace

Nonaktifkan pengiriman untuk tabel sistem tertentu (atauall):

aws redshift-serverless update-namespace \
    --namespace-name my-namespace \
    --log-destination-type s3table \
    --s3-table-action Disable \
    --s3-table-names sys_stream_scan_states

Periksa status pengiriman.

aws redshift-serverless get-namespace \
    --namespace-name my-namespace

Untuk melanjutkan pengiriman setelah bucket tabel S3 atau tabel dijatuhkan, jalankan perintah enable lagi.

Mendaftar dengan AWS Glue Data Catalog

Sebelum Anda dapat menanyakan data yang disimpan dengan Redshift, Athena, atau layanan analitik lainnya, bucket tabel S3 yang dikelola layanan harus diintegrasikan dengan. AWS Glue Data Catalog Ini adalah langkah satu kali per akun dan Wilayah. Jika Anda telah mengintegrasikan Tabel S3 dengan AWS Glue Data Catalog, tidak ada tindakan tambahan yang diperlukan.

Untuk petunjuk integrasi, lihat Meng integrasikan Tabel Amazon S3 dengan AWS Glue Data Catalog di Panduan AWS Glue Pengembang.

Mengkonfigurasi enkripsi

Secara default, data yang dikirim ke Tabel S3 dienkripsi dengan S3-managed kunci Amazon (SSE-S3). Untuk menggunakan kunci yang dikelola AWS KMS pelanggan sebagai gantinya, tentukan ARN-nya --s3-table-kms-key-id saat Anda mengaktifkan pengiriman:

aws redshift enable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports all \
    --s3-table-granularity account \
    --s3-table-kms-key-id arn:aws:kms:us-west-2:111122223333:key/key-id

Jika Anda menggunakan kunci yang dikelola pelanggan, kebijakan kuncinya harus mengizinkan prinsipal layanan integrasi tabel sistem Redshift untuk menghasilkan kunci data saat menulis tabel sistem Anda, dan prinsipal layanan pemeliharaan Tabel S3 untuk menggunakan kunci selama pemeliharaan tabel (seperti pemadatan). Tambahkan pernyataan berikut ke kebijakan utama, ganti REGIONACCOUNT, dan KEY_ID dengan nilai Anda sendiri.

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Sid": "EnableRedshiftSystemTableKeyUsage",
      "Effect": "Allow",
      "Principal": {
        "Service": "systemtables.redshift.amazonaws.com"
      },
      "Action": [
        "kms:DescribeKey",
        "kms:GenerateDataKey",
        "kms:Decrypt"
      ],
      "Resource": "arn:aws:kms:REGION:ACCOUNT:key/KEY_ID",
      "Condition": {
        "StringEquals": {
          "aws:SourceAccount": "ACCOUNT"
        }
      }
    },
    {
      "Sid": "EnableS3TableMaintenanceKeyUsage",
      "Effect": "Allow",
      "Principal": {
        "Service": "maintenance.s3tables.amazonaws.com"
      },
      "Action": [
        "kms:GenerateDataKey",
        "kms:Decrypt"
      ],
      "Resource": "arn:aws:kms:REGION:ACCOUNT:key/KEY_ID",
      "Condition": {
        "StringLike": {
          "kms:EncryptionContext:aws:s3:arn": "arn:aws:s3tables:REGION:ACCOUNT:bucket/aws-redshift/*"
        }
      }
    }
  ]
}

Jika kebijakan kunci tidak memberikan izin ini, Redshift tidak dapat menulis ke Tabel S3 terenkripsi dan pengiriman gagal.

Tabel sistem yang didukung

Anda dapat memilih salah satu tampilan pem SYS_* antauan berikut untuk diintegrasikan dengan Tabel S3. Untuk deskripsi kolom di setiap tampilan, pilih nama tampilan.

Kolom metadata ditambahkan ke setiap tabel

Setiap tabel S3 berisi semua kolom dari SYS_* tampilan sumber, ditambah lima kolom metadata berikut yang ditambahkan Redshift untuk mengidentifikasi sumber setiap baris dan kapan itu dikirimkan.

Mengkonfigurasi retensi

Redshift tidak menentukan kebijakan retensi untuk data yang dikirimkan ke Tabel S3. Anda mengonfigurasi berapa lama untuk menyimpan data dengan menetapkan kebijakan kedaluwarsa catatan melalui Tabel S3. Anda menentukan jumlah hari (misalnya, 5 hari, 100 hari, atau 365 hari), dan Tabel S3 secara otomatis menghapus data yang menua melewati durasi yang dikonfigurasi.

Jika Anda tidak mengonfigurasi kebijakan kedaluwarsa, data disimpan tanpa batas waktu.

Saat Anda menonaktifkan integrasi atau menghapus tabel sistem, Redshift berhenti menulis data baru tetapi data yang dikirim sebelumnya tetap berada di Tabel S3 dan terus tunduk pada kebijakan kedaluwarsa apa pun yang telah Anda konfigurasikan.

Untuk informasi selengkapnya, lihat Mengkonfigurasi kedaluwarsa rekaman untuk bucket tabel S3 di Panduan Pengguna Amazon S3.

Tata kelola data

Anda mengatur akses ke data tabel sistem yang disimpan; Redshift tidak menerapkan izin baca atas nama Anda dan tidak menutupi data.

Pengiriman dan perilaku siklus hidup

Memeriksa status pengiriman

Anda dapat meninjau konfigurasi saat ini dan waktu pengiriman terbaru per tabel sistem kapan saja:

Redshift Tanpa Server

Pengiriman tidak membuat kelompok kerja tetap terjaga atau menghabiskan komputasi Anda. Sebelum workgroup berhenti, Redshift memastikan batch yang tertunda dikirimkan.

Praktik terbaik

Penagihan

Menulis data tabel sistem ke Tabel S3 gratis. Anda dikenakan biaya untuk penyimpanan dan pemeliharaan Tabel S3 standar untuk data yang disimpan, dan untuk mesin kueri yang Anda gunakan untuk membaca data, sesuai dengan harga mesin tersebut. Untuk informasi selengkapnya, lihat Harga Tabel Amazon S3.

Pertimbangan dan batasan