Schema delle tabelle di inventario in tempo reale di S3 Metadata - Amazon Simple Storage Service

Schema delle tabelle di inventario in tempo reale di S3 Metadata

La tabella di inventario in tempo reale fornisce un inventario semplice e sottoponibile a query di tutti gli oggetti e delle relative versioni presenti nel bucket in modo da poter determinare lo stato più recente dei dati. Gli aggiornamenti degli oggetti si riflettono in genere nella tabella di inventario in tempo reale entro un’ora.

È possibile utilizzare questa tabella per semplificare e velocizzare i flussi di lavoro aziendali e i processi relativi ai big data individuando gli oggetti che si desidera elaborare per vari carichi di lavoro. Ad esempio, puoi eseguire query sulla tabella di inventario in tempo reale per effettuare le seguenti operazioni:

  • Trovare tutti gli oggetti archiviati nella classe di archiviazione S3 Glacier Deep Archive.

  • Creare una distribuzione di tag di oggetto o trovare oggetti senza tag.

  • Trovare tutti gli oggetti che non sono crittografati utilizzando la crittografia lato server con chiavi AWS Key Management Service (AWS KMS) (SSE-KMS).

Se si abilita la tabella di inventario per la configurazione della tabella dei metadati, la tabella viene sottoposta a un processo noto come riempimento, durante il quale Amazon S3 analizza il bucket per uso generico per recuperare i metadati iniziali per tutti gli oggetti presenti nel bucket. A seconda del numero di oggetti nel bucket, questo processo può richiedere da minuti (minimo 15 minuti) a ore. Al termine del processo di riempimento, lo stato della tabella di inventario passa da Riempimento in corso ad Attivo. Una volta completato il riempimento, gli aggiornamenti degli oggetti si riflettono in genere nella tabella di inventario entro un’ora.

Nota

Il riempimento della tabella di inventario viene addebitato. Se il bucket per uso generico contiene più di un miliardo di oggetti, verrà addebitata anche una tariffa mensile per la tabella di inventario. Per ulteriori informazioni, consulta Prezzi di Amazon S3.

Le tabelle di inventario di Amazon S3 Metadata contengono righe e colonne. Ogni riga rappresenta lo stato corrente di un oggetto presente nel bucket per uso generico. La tabella di inventario in tempo reale fornisce un inventario semplice e sottoponibile a query di tutti gli oggetti presenti nel bucket in modo da poter determinare lo stato corrente dei dati.

Di seguito è riportato un esempio di tabella di inventario per un bucket per uso generico denominato amzn-s3-demo-bucket:

bucket key sequence_number version_id is_delete_marker size last_modified_date e_tag storage_class is_multipart encryption_status is_bucket_key_enabled kms_key_arn checksum_algorithm object_tags user_metadata amzn-s3-demo-bucket Finance/statement1.pdf 80e737d8b4d82f776affffffffffffffff006737d8b4d82f776a00000000000000000000000000000000000000000000000072 FALSE 6223 11/15/2024 23:26 e131b86632dda753aac4018f72192b83 STANDARD FALSE SSE-KMS FALSE arn:aws:kms:us-east-1:111122223333:key/1234abcd-12ab-34cd-56ef-1234567890df SSECRC32 {} {count -> Asia, customs -> false, family -> true, location -> Mary, name -> football, user -> United States} amzn-s3-demo-bucket s3-dg.pdf 80e737d8b4e39f1dbdffffffffffffffff006737d8b4e39f1dbd00000000000000000000000000000000000000000000000072 FALSE 3554 11/15/2024 23:26 9bb49efc2d92c05558ddffbbde8636d5 STANDARD FALSE DSSE-KMS FALSE arn:aws:kms:us-east-1:936810216292:key/0dcebce6-49fd-4cae-b2e2-5512ad281afd SSESHA1 {} {} amzn-s3-demo-bucket Development/Projects.xls 80e737d8b4ed9ac5c6ffffffffffffffff006737d8b4ed9ac5c600000000000000000000000000000000000000000000000072 FALSE 7746 11/15/2024 23:26 729a6863e47fb9955b31bfabce984908 STANDARD FALSE SSE-S3 FALSE NULL SSECRC32 {} {count -> Asia, customs -> Canada, family -> Billiards, filter -> true, location -> Europe, name -> Asia, user -> United States}

Le tabelle di inventario hanno il seguente schema:

Nome colonna Obbligatorio? Tipo di dati

bucket

Stringa Il nome del bucket per uso generico. Per ulteriori informazioni, consulta Regole di denominazione dei bucket per uso generico.

key

Stringa Nome della chiave dell'oggetto (o della chiave) che identifica in modo univoco l'oggetto in un bucket. Per ulteriori informazioni, consulta Denominazione di oggetti Amazon S3.

sequence_number

Stringa

Il numero di sequenza, che è un ordinale incluso nei record di un determinato oggetto. Per ordinare i record dello stesso bucket e della stessa chiave, è possibile ordinare su sequence_number. Per un determinato bucket e chiave, un valore sequence_number più grande a livello di lessicografia implica che il record è stato introdotto nel bucket più recentemente.

version_id

No Stringa

L'ID versione dell'oggetto. Quando viene attivata la funzione Controllo delle versioni in un bucket, Amazon S3 assegna un numero di versione agli oggetti aggiunti al bucket. Per ulteriori informazioni, consulta Conservazione di più versioni degli oggetti con Controllo delle versioni S3.

Gli oggetti memorizzati nel bucket prima di impostare lo stato del controllo delle versioni hanno un ID versione pari a null.

is_delete_marker

No Booleano

Stato del marcatore di cancellazione dell'oggetto. Se l'oggetto è un marcatore di cancellazione, questo valore è True. In caso contrario, è False. Per ulteriori informazioni, consulta Utilizzo dei contrassegni di eliminazione.

Nota

Le righe aggiunte per i marcatori di cancellazione hanno un valore record_type di DELETE, non UPDATE_METADATA. Se il marcatore di cancellazione viene creato come risultato di una scadenza del ciclo di vita S3, il valore requester è s3.amazonaws.com.

size

No Long

La dimensione dell'oggetto in byte, escluse le dimensioni dei caricamenti multiparte incompleti o dei metadati dell'oggetto. Se is_delete_marker è True, la dimensione è 0. Per ulteriori informazioni, consulta Metadata di oggetti definiti dal sistema.

last_modified_date

No Timestamp NTZ (nessun fuso orario)

Data di creazione dell'oggetto o data dell'ultima modifica, scegliendo la più recente delle due. Per i caricamenti multiparte, la data di creazione dell'oggetto è la data di avvio del caricamento multiparte. Per ulteriori informazioni, consulta Metadata di oggetti definiti dal sistema.

e_tag

No Stringa

Il tag dell'entità (ETag), che è un hash dell'oggetto. L'ETag riflette solo i cambiamenti ai contenuti di un oggetto, non ai suoi metadati. Questo ETag può essere o meno un digest MD5 dei dati oggetto. Il fatto che l'ETag sia un digest MD5 dipende da come è stato creato l'oggetto e da come è stato crittografato. Per ulteriori informazioni, consulta Object nella documentazione di riferimento delle API di Amazon S3.

storage_class

No Stringa

La classe di storage utilizzata per memorizzare l'oggetto. Uno tra STANDARD, REDUCED_REDUNDANCY, STANDARD_IA, ONEZONE_IA, INTELLIGENT_TIERING, GLACIER, DEEP_ARCHIVE o GLACIER_IR. Per ulteriori informazioni, consulta Comprensione e gestione delle classi di storage Amazon S3.

is_multipart

No Booleano

Il tipo di caricamento dell'oggetto. Se l'oggetto è stato caricato come caricamento multiparte, questo valore è True. In caso contrario, è False. Per ulteriori informazioni, consulta Caricamento e copia di oggetti utilizzando il caricamento multiparte in Amazon S3.

encryption_status

No Stringa

Lo stato di crittografia lato server dell'oggetto, a seconda del tipo di chiave di crittografia utilizzata: crittografia lato server con chiavi gestite da Amazon S3 (SSE-S3), crittografia lato server con chiavi AWS Key Management Service (AWS KMS) (SSE-KMS), crittografia lato server dual-layer con AWS KMS keys (DSSE-KMS) o crittografia lato server con chiavi fornite dal cliente (SSE-C). Se l'oggetto non è crittografato, questo valore è null. I valori possibili sono SSE-S3, SSE-KMS, DSSE-KMS, SSE-C o null. Per ulteriori informazioni, consulta Protezione dei dati con la crittografia.

is_bucket_key_enabled

No Booleano

Stato di abilitazione della chiave S3 Bucket dell'oggetto. Se l'oggetto utilizza una chiave S3 Bucket per SSE-KMS, questo valore è True. In caso contrario, è False. Per ulteriori informazioni, consulta Configurazione di una chiave bucket S3 a livello di oggetto.

kms_key_arn

No Stringa

Il nome della risorsa Amazon (ARN) per la chiave KMS con cui l'oggetto è crittografato, per le righe in cui encryption_status è SSE-KMS o DSSE-KMS. Se l'oggetto non è crittografato con SSE-KMS o DSSE-KMS, il valore è null. Per ulteriori informazioni, consulta Utilizzo della crittografia lato server con chiavi AWS KMS (SSE-KMS) e Utilizzo della crittografia lato server a doppio livello con chiavi AWS KMS (DSSE-KMS).

Nota

Se una riga rappresenta una versione dell'oggetto che non esisteva più al momento dell'elaborazione di un evento di cancellazione o sovrascrittura, kms_key_arn contiene un valore nullo, anche se il valore della colonna encryption_status è SSE-KMS o DSSE-KMS.

checksum_algorithm

No Stringa

L'algoritmo utilizzato per creare il checksum dell'oggetto, uno tra CRC64-NVME, CRC32, CRC32C, SHA1 o SHA256. Se non è presente alcun checksum, questo valore è null. Per ulteriori informazioni, consulta Utilizzo di algoritmi di checksum supportati.

object_tags

No Mappa <String, String>

I tag dell'oggetto che sono associati all'oggetto. I tag degli oggetti sono memorizzati come una mappa di coppie chiave-valore. Se un oggetto non ha tag oggetto, viene memorizzata una mappa vuota ({}). Per ulteriori informazioni, consulta Classificazione degli oggetti utilizzando i tag.

Nota

Se il valore record_type è DELETE, la colonna object_tags contiene un valore nullo. Se il valore record_type è CREATE o UPDATE_METADATA, le righe che rappresentano versioni di oggetti non più esistenti al momento dell'elaborazione di un evento di cancellazione o sovrascrittura conterranno un valore nullo nella colonna object_tags.

user_metadata

No Mappa <String, String>

I metadati utente che sono associati all'oggetto. I metadati utente sono memorizzati come una mappa di coppie chiave-valore. Se un oggetto non ha metadati utente, viene memorizzata una mappa vuota ({}). Per ulteriori informazioni, consulta Metadati di oggetti definiti dall'utente.

Nota

Se il valore record_type è DELETE, la colonna user_metadata contiene un valore nullo. Se il valore record_type è CREATE o UPDATE_METADATA, le righe che rappresentano versioni di oggetti non più esistenti al momento dell'elaborazione di un evento di cancellazione o sovrascrittura conterranno un valore nullo nella colonna user_metadata.