Amazon Redshift non supporterà più l'uso delle UDF Python dopo il 30 giugno 2026. Inizieremo ad applicarlo per fasi. Per ulteriori informazioni sulla fine del ciclo di vita e sulle opzioni di migrazione di Python, consulta il post del blog pubblicato il 30 giugno 2025.

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Integrazione delle tabelle di sistema con le tabelle S3

Usa l'integrazione delle tabelle di sistema con Amazon S3 Tables per conservare i dati delle tabelle di sistema di Amazon Redshift oltre il periodo di conservazione all'interno del cluster di 7 giorni. Questo ti aiuta a soddisfare i requisiti di conformità, controllo e osservabilità. Quando abiliti questa funzione, Redshift scrive i log delle tabelle di sistema su S3 Tables in Apache Iceberg formato e gestisce il partizionamento, la compattazione e la manutenzione delle istantanee. Puoi conservare questi dati per tutto il tempo necessario per l'analisi e il controllo. Poiché i dati sono archiviati in formato aperto Iceberg, puoi interrogarli con Redshift, Amazon Athena o qualsiasi altro motore. Iceberg-compatible Puoi anche utilizzare le competenze degli agenti di intelligenza artificiale per le query in linguaggio naturale (consulta la tabella delle competenze di sistema per AWS Agent Toolkit sul sito Web). GitHub

Quando abiliti questa funzionalità tramite la console, la CLI o SDK di Redshift, Redshift inizia a scrivere nuove righe dalle tabelle di sistema selezionate in tabelle S3 poco dopo a una frequenza fissa. Sei tu a scegliere quali tabelle di sistema pubblicare; S3 Tables applica la durata di conservazione che configuri.

Ciò supporta i seguenti casi d'uso:

Questa funzionalità è disponibile per le istanze RA3 e RG Provisioned di Amazon Redshift e Amazon Redshift Serverless in tutte le regioni commerciali in cui sono supportate le tabelle Redshift e S3. AWS In questo argomento, il data warehouse si riferisce a un cluster con provisioning o a un gruppo di lavoro Redshift Serverless.

Come funziona

Dopo aver abilitato la funzionalità e selezionato una o più tabelle di sistema supportate, Redshift scrive i record appena completati da tali tabelle di sistema su S3 Tables. I dati vengono consegnati in batch a una frequenza fissa.

Le tabelle di sistema si trovano nel tuo AWS account ma sono gestite dal servizio: AWS possiede e gestisce la distribuzione dei dati e la gestione delle tabelle, tra cui:

Non vi è alcuna infrastruttura da creare o mantenere e nessun impatto sui carichi di lavoro.

Puoi configurare per quanto tempo conservare i dati fino alla scadenza del record di S3 Tables. Per ulteriori informazioni, consulta Configurazione della conservazione.

Poiché le tabelle sono gestite da AWS, non è possibile modificare o eliminare le righe fornite da Redshift. I dati forniti sono immutabili. Puoi controllare solo l'accesso in lettura alle tabelle. Per ulteriori informazioni, consulta Governance dei dati.

Solo l'attività completata viene consegnata a S3 Tables. Le tabelle di sistema del data warehouse possono mostrare le attività in corso, ma vengono copiati solo i record che hanno raggiunto uno stato finale. Ad esempio, viene consegnata una query completata, interrotta o annullata, ma una query ancora in esecuzione non viene consegnata finché non raggiunge lo stato finale.

Abilitazione dell'integrazione delle tabelle di sistema con S3 Tables

Per abilitare l'integrazione delle tabelle di sistema con S3 Tables, utilizza le API Redshift esistenti con un nuovo tipo di destinazione del registro di. s3table Se abilitato, Redshift crea un bucket di tabelle S3 denominato nel tuo account. aws-redshift La funzionalità viene gestita con le stesse operazioni utilizzate per altre destinazioni di log: per i cluster con provisioning, enable-loggingdisable-logging, edescribe-logging-status; per Redshift Serverless e. update-namespace get-namespace

Permissions

Il responsabile che abilita, modifica o disabilita la funzionalità deve disporre delle seguenti autorizzazioni:

Dopo la creazione del bucket, Redshift crea namespace e tabelle al suo interno utilizzando una relazione di fiducia del servizio tra Redshift e S3 Tables. L'ente abilitante non necessita di autorizzazioni per creare namespace o tabelle.

Opzioni di implementazione

È possibile configurare la consegna in uno dei due modelli. Un determinato data warehouse utilizza un modello alla volta.

Il modello di distribuzione determina il modo in cui i dati sono organizzati nelle tabelle S3. Nel modello per magazzino, il nome dello spazio dei nomi S3 Tables contiene un identificatore univoco per il data warehouse, quindi i dati di ogni warehouse sono fisicamente separati nel proprio namespace. Nel modello consolidato, il nome dello spazio dei nomi S3 Tables contiene il numero di conto e i dati di tutti i magazzini di quell' AWS account e della regione vengono archiviati insieme nello stesso namespace e nelle stesse tabelle.

Entrambe le opzioni sono supportate all'interno di un singolo account e di una singola regione. AWS AWS Per analizzare i dati tra regioni o account, combina i risultati delle tabelle di ciascuna regione o account al momento della richiesta. Per l'accesso tra più account, puoi utilizzare la condivisione del catalogo AWS Glue dati. Per ulteriori informazioni, consulta Concessione dell'accesso con più account nella Guida per gli AWS Glue sviluppatori.

Utilizzo della console

Per interrompere la pubblicazione di una tabella di sistema, torna alle impostazioni e rimuovila. I dati già pubblicati vengono conservati fino alla configurazione della scadenza tramite S3 Tables.

Puoi rivedere lo stato dell'integrazione dalla pagina dei dettagli del cluster o del namespace. Espandi Visualizza mappatura della tabella S3 per visualizzare la mappatura tra ogni tabella di sistema e il nome e lo spazio dei nomi della tabella S3 corrispondenti. Puoi anche visualizzare i dati pubblicati dalla console S3 Tables.

Utilizzo di AWS CLI

I seguenti parametri configurano la pubblicazione di tabelle S3:

Cluster con provisioning

Abilita la consegna. --log-exportsaccetta all o contiene un elenco separato da spazi delle tabelle di sistema supportate e --s3-table-granularity accetta cluster (per magazzino) o account (consolidate).

aws redshift enable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports all \
    --s3-table-granularity account

Per abilitare la consegna solo per tabelle di sistema specifiche:

aws redshift enable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports sys_query_history sys_query_text sys_userlog \
    --s3-table-granularity cluster

Controlla lo stato della consegna.

aws redshift describe-logging-status \
    --cluster-identifier my-redshift-cluster

Disabilita la consegna per tutte le tabelle di sistema o per tabelle specifiche con--log-exports:

aws redshift disable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports sys_stream_scan_states

Redshift Serverless

In Redshift Serverless, si configura la funzionalità per namespace con. update-namespace I nomi delle tabelle di sistema vengono trasmessi (non). --s3-table-names --log-exports

Abilita la consegna.

aws redshift-serverless update-namespace \
    --namespace-name my-namespace \
    --log-destination-type s3table \
    --s3-table-action Enable \
    --s3-table-names all \
    --s3-table-granularity namespace

Disabilita la consegna per tabelle di sistema specifiche (oall):

aws redshift-serverless update-namespace \
    --namespace-name my-namespace \
    --log-destination-type s3table \
    --s3-table-action Disable \
    --s3-table-names sys_stream_scan_states

Controlla lo stato della consegna.

aws redshift-serverless get-namespace \
    --namespace-name my-namespace

Per riprendere la consegna dopo l'eliminazione del bucket della tabella S3 o di una tabella, esegui nuovamente il comando enable.

Registrazione con AWS Glue Data Catalog

Prima di poter interrogare i dati conservati con Redshift, Athena o altri servizi di analisi, il bucket di tabelle S3 gestito dal servizio deve essere integrato con. AWS Glue Data Catalog Si tratta di un passaggio una tantum per account e regione. Se hai già integrato S3 Tables con AWS Glue Data Catalog, non è richiesta alcuna azione aggiuntiva.

Per istruzioni sull'integrazione, consulta Integrating Amazon S3 Tables with AWS Glue Data Catalog nella Developer Guide. AWS Glue

Configurazione della crittografia

Per impostazione predefinita, i dati inviati a S3 Tables sono crittografati con S3-managed le chiavi Amazon ()SSE-S3. Per utilizzare invece una chiave gestita AWS KMS dal cliente, specifica il relativo ARN con --s3-table-kms-key-id quando abiliti la consegna:

aws redshift enable-logging \
    --cluster-identifier my-redshift-cluster \
    --log-destination-type s3table \
    --log-exports all \
    --s3-table-granularity account \
    --s3-table-kms-key-id arn:aws:kms:us-west-2:111122223333:key/key-id

Se utilizzi una chiave gestita dal cliente, la relativa politica chiave deve consentire al responsabile del servizio di integrazione delle tabelle di sistema Redshift di generare chiavi di dati quando scrive le tabelle di sistema e al responsabile del servizio di manutenzione di S3 Tables di utilizzare la chiave durante la manutenzione delle tabelle (ad esempio la compattazione). Aggiungete le seguenti dichiarazioni alla policy chiave REGIONACCOUNT, sostituendola KEY_ID con i vostri valori.

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Sid": "EnableRedshiftSystemTableKeyUsage",
      "Effect": "Allow",
      "Principal": {
        "Service": "systemtables.redshift.amazonaws.com"
      },
      "Action": [
        "kms:DescribeKey",
        "kms:GenerateDataKey",
        "kms:Decrypt"
      ],
      "Resource": "arn:aws:kms:REGION:ACCOUNT:key/KEY_ID",
      "Condition": {
        "StringEquals": {
          "aws:SourceAccount": "ACCOUNT"
        }
      }
    },
    {
      "Sid": "EnableS3TableMaintenanceKeyUsage",
      "Effect": "Allow",
      "Principal": {
        "Service": "maintenance.s3tables.amazonaws.com"
      },
      "Action": [
        "kms:GenerateDataKey",
        "kms:Decrypt"
      ],
      "Resource": "arn:aws:kms:REGION:ACCOUNT:key/KEY_ID",
      "Condition": {
        "StringLike": {
          "kms:EncryptionContext:aws:s3:arn": "arn:aws:s3tables:REGION:ACCOUNT:bucket/aws-redshift/*"
        }
      }
    }
  ]
}

Se la policy chiave non concede queste autorizzazioni, Redshift non può scrivere sulle tabelle S3 crittografate e la consegna non riesce.

Tabelle di sistema supportate

È possibile selezionare una delle seguenti viste di SYS_* monitoraggio da integrare con S3 Tables. Per una descrizione delle colonne di ogni vista, scegli il nome della vista.

Colonne di metadati aggiunte a ciascuna tabella

Ogni tabella S3 contiene tutte le colonne della SYS_* vista sorgente, più le seguenti cinque colonne di metadati che Redshift aggiunge per identificare l'origine di ogni riga e la data di consegna.

Configurazione della conservazione

Redshift non definisce una politica di conservazione per i dati che fornisce a S3 Tables. Puoi configurare per quanto tempo conservare i dati impostando una politica di scadenza dei record tramite S3 Tables. Specifichi il numero di giorni (ad esempio, 5 giorni, 100 giorni o 365 giorni) e S3 Tables rimuove automaticamente i dati che invecchiano oltre la durata configurata.

Se non si configura una politica di scadenza, i dati vengono conservati a tempo indeterminato.

Quando disabiliti l'integrazione o rimuovi una tabella di sistema, Redshift interrompe la scrittura di nuovi dati ma i dati precedentemente forniti rimangono in S3 Tables e continuano a essere soggetti a qualsiasi politica di scadenza configurata.

Per ulteriori informazioni, consulta Configurazione della scadenza dei record per i bucket di tabelle S3 nella Amazon S3 User Guide.

Governance dei dati

Sei tu a governare l'accesso ai dati delle tabelle di sistema conservati; Redshift non applica autorizzazioni di lettura per tuo conto e non maschera i dati.

Comportamento della distribuzione e del ciclo di vita

Verifica dello stato della consegna

È possibile rivedere la configurazione corrente e i tempi di consegna più recenti per tabella di sistema in qualsiasi momento:

Redshift Serverless

La distribuzione non tiene sveglio un gruppo di lavoro né consuma il tuo computer. Prima che il gruppo di lavoro si interrompa, Redshift assicura la consegna di qualsiasi batch in sospeso.

Best practice

Fatturazione

La scrittura dei dati delle tabelle di sistema su S3 Tables è gratuita. Ti verranno addebitati i costi di archiviazione e manutenzione standard di S3 Tables per i dati conservati e per il motore di query utilizzato per leggere i dati, in base ai prezzi di tale motore. Per ulteriori informazioni, consulta i prezzi di Amazon S3 Tables.

Considerazioni e limitazioni