Noções básicas sobre esquemas de exportação da Lente de Armazenamento do Amazon S3 - Amazon Simple Storage Service

Noções básicas sobre esquemas de exportação da Lente de Armazenamento do Amazon S3

Os esquemas de exportação da Lente de Armazenamento do S3 variam de acordo com o destino de exportação. Escolha o esquema apropriado com base no local para o qual você está exportando, se buckets de uso geral do S3 ou tabelas do S3.

Esquema de exportação para buckets de uso geral do S3

A tabela a seguir contém o esquema de exportação de métricas da Lente de Armazenamento do S3 ao exportar para buckets de uso geral do S3.

Nome do atributo Tipo de dados Nome da coluna Descrição
VersionNumber String version_number A versão das métricas do S3 Storage Lens que está sendo usada.
ConfigurationId String configuration_id O configuration_id da configuração da Lente de Armazenamento do S3.
ReportDate String report_date A data em que as métricas foram monitoradas.
AwsAccountNumber String aws_account_number Número da sua Conta da AWS.
AwsRegion String aws_region A Região da AWS para a qual as métricas estão sendo rastreadas.
StorageClass String storage_class A classe de armazenamento do bucket em questão.
RecordType ENUM record_type O tipo de artefato que está sendo relatado (ACCOUNT, BUCKET ou PREFIX).
RecordValue String record_value O valor do artefato RecordType.
nota

record_value é codificado em URL.

BucketName String bucket_name O nome do intervalo que está sendo relatado.
MetricName String metric_name O nome da métrica que está sendo relatada.
MetricValue Longo metric_value O valor da métrica que está sendo relatada.

Exemplo de exportação de métricas do S3 Storage Lens

Veja a seguir um exemplo de uma exportação de métricas do S3 Storage Lens com base nesse esquema.

nota

Você pode identificar métricas para grupos da Lente de Armazenamento procurando os valores STORAGE_LENS_GROUP_BUCKET ou STORAGE_LENS_GROUP_ACCOUNT na coluna record_type. A coluna record_value exibirá o nome do recurso da Amazon (ARN) para o grupo da Lente de Armazenamento, por exemplo, arn:aws:s3:us-east-1:123456789012:storage-lens-group/slg-1.

Um exemplo de arquivo de exportação de métricas da Lente de Armazenamento do S3.

Veja a seguir um exemplo de exportação de métricas da Lente de Armazenamento do S3 com dados de grupos da Lente de Armazenamento.

Um exemplo de arquivo de exportação de métricas da Lente de Armazenamento do S3 com dados de grupos da Lente de Armazenamento.

Esquemas de exportação para tabelas do S3

Ao exportar métricas da Lente de Armazenamento do S3 para tabelas do S3, os dados são organizados em três esquemas de tabela separados: métricas de armazenamento, métricas de propriedades de bucket e métricas de atividade.

Esquema de tabela de métricas de armazenamento

Nome Tipo Descrição
version_number string Identificador de versão do esquema da tabela.
configuration_id string Nome da configuração da Lente de Armazenamento do S3.
report_time timestamptz Data à qual o relatório da Lente de Armazenamento do S3 se refere.
aws_account_id string ID da conta ao qual a entrada se refere.
aws_region string Região
storage_class string Classe de armazenamento
record_type string Tipo de registro, related ao nível de agregação de dados. Valores: ACCOUNT, BUCKET, PREFIX, LENS GROUP.
record_value string Desambiguador para tipos de registro que têm mais de um registro abaixo deles. É usado para fazer referência ao prefixo.
bucket_name string Nome do bucket
object_count longo Número de objetos armazenados para o item referido no momento.
storage_bytes DECIMAL(38,0) Número de bytes armazenados para o item referido no momento.
bucket_key_sse_kms_object_count longo Número de objetos criptografados com uma chave gerenciada pelo cliente armazenados para o item referido no momento.
bucket_key_sse_kms_storage_bytes DECIMAL(38,0) Número de bytes criptografados com uma chave gerenciada pelo cliente armazenados para o item referido no momento.
current_version_object_count longo Número de objetos da versão atual armazenados para o item referido no momento.
current_version_storage_bytes DECIMAL(38,0) Número de bytes da versão atual armazenados para o item referido no momento.
delete_marker_object_count longo Número de objetos de marcador de exclusão armazenados para o item referido no momento.
delete_marker_storage_bytes DECIMAL(38,0) Número de bytes de marcador de exclusão armazenados para o item referido no momento.
encrypted_object_count longo Número de objetos criptografados armazenados para o item referido no momento.
encrypted_storage_bytes DECIMAL(38,0) Número de bytes criptografados armazenados para o item referido no momento.
incomplete_mpu_object_older_than_7_days_count longo Número de objetos de multipart upload incompleto com mais de sete dias armazenados para o item referido no momento.
incomplete_mpu_storage_older_than_7_days_bytes DECIMAL(38,0) Número de bytes de multipart upload incompleto com mais de sete dias armazenados para o item referido no momento.
incomplete_mpu_object_count longo Número de objetos de multipart upload incompleto armazenados para o item referido no momento.
incomplete_mpu_storage_bytes DECIMAL(38,0) Número de bytes de multipart upload incompleto armazenados para o item referido no momento.
non_current_version_object_count longo Número de objetos de uma versão não atual armazenados para o item referido no momento.
non_current_version_storage_bytes DECIMAL(38,0) Número de bytes de uma versão não atual armazenados para o item referido no momento.
object_lock_enabled_object_count longo Número de objetos armazenados para objetos com bloqueio habilitado no item referido no momento.
object_lock_enabled_storage_bytes DECIMAL(38,0) Número de bytes armazenados para objetos com bloqueio habilitado no item referido no momento.
replicated_object_count longo Número de objetos replicados para o item referido no momento.
replicated_storage_bytes DECIMAL(38,0) Número de bytes replicados para o item referido no momento.
replicated_object_source_count longo Número de objetos replicados como origem armazenados para o item referido no momento.
replicated_storage_source_bytes DECIMAL(38,0) Número de bytes replicados como origem para o item referido no momento.
sse_kms_object_count longo Número de objetos criptografados com a chave SSE armazenados para o item referido no momento.
sse_kms_storage_bytes DECIMAL(38,0) Número de bytes criptografados com a chave SSE armazenados para o item referido no momento.
object_0kb_count longo Número de objetos com tamanho igual a 0 KB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_0kb_to_128kb_count longo Número de objetos com tamanhos acima de 0 KB e inferiores ou iguais a 128 KB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_128kb_to_256kb_count longo Número de objetos com tamanhos acima de 128 KB e inferiores ou iguais a 256 KB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_256kb_to_512kb_count longo Número de objetos com tamanhos acima de 256 KB e inferiores ou iguais a 512 KB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_512kb_to_1mb_count longo Número de objetos com tamanhos acima de 512 KB e inferiores ou iguais a 1 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_1mb_to_2mb_count longo Número de objetos com tamanhos acima de 1 MB e inferiores ou iguais a 2 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_2mb_to_4mb_count longo Número de objetos com tamanhos acima de 2 MB e inferiores ou iguais a 4 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_4mb_to_8mb_count longo Número de objetos com tamanhos acima de 4 MB e inferiores ou iguais a 8 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_8mb_to_16mb_count longo Número de objetos com tamanhos acima de 8 MB e inferiores ou iguais a 16 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_16mb_to_32mb_count longo Número de objetos com tamanhos acima de 16 MB e inferiores ou iguais a 32 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_32mb_to_64mb_count longo Número de objetos com tamanhos acima de 32 MB e inferiores ou iguais a 64 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_64mb_to_128mb_count longo Número de objetos com tamanhos acima de 64 MB e inferiores ou iguais a 128 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_128mb_to_256mb_count longo Número de objetos com tamanhos acima de 128 MB e inferiores ou iguais a 256 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_256mb_to_512mb_count longo Número de objetos com tamanhos acima de 256 MB e inferiores ou iguais a 512 MB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_512mb_to_1gb_count longo Número de objetos com tamanhos acima de 512 MB e inferiores ou iguais a 1 GB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_1gb_to_2gb_count longo Número de objetos com tamanhos acima de 1 GB e inferiores ou iguais a 2 GB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_2gb_to_4gb_count longo Número de objetos com tamanhos acima de 2 GB e inferiores ou iguais a 4 GB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.
object_larger_than_4gb_count longo Número de objetos com tamanhos acima de 4 GB, como versão atual, versões não atuais, multipart uploads incompletos e marcadores de exclusão.

Esquema de tabela de métricas de propriedade de bucket

Nome Tipo Descrição
version_number string Identificador de versão do esquema da tabela.
configuration_id string Nome da configuração da Lente de Armazenamento do S3.
report_time timestamptz Data à qual o relatório da Lente de Armazenamento do S3 se refere.
aws_account_id string ID da conta ao qual a entrada se refere.
record_type string Tipo de registro, relacionado ao nível de agregação de dados. Valores: ACCOUNT, BUCKET, PREFIX, LENS GROUP.
record_value string Desambiguador para tipos de registro que têm mais de um registro abaixo deles. É usado para fazer referência ao prefixo.
aws_region string Região
storage_class string Classe de armazenamento
bucket_name string Nome do bucket
versioning_enabled_bucket_count longo Número de buckets com versionamento habilitado para o item referido no momento.
mfa_delete_enabled_bucket_count longo Número de buckets com exclusão de MFA habilitada para o item referido no momento.
sse_kms_enabled_bucket_count longo Número de buckets com o KMS habilitado para o item referido no momento.
object_ownership_bucket_owner_enforced_bucket_count longo Número de buckets com a configuração de propriedade de objeto “Imposto pelo proprietário do bucket” para o item referido no momento.
object_ownership_bucket_owner_preferred_bucket_count longo Número de buckets com a configuração de propriedade de objeto “Proprietário do bucket preferido” para o item referido no momento.
object_ownership_object_writer_bucket_count longo Número de buckets com a configuração de propriedade de objeto “Autor do objeto” para o item referido no momento.
transfer_acceleration_enabled_bucket_count longo Número de buckets com a Aceleração de Transferência habilitada para o item referido no momento.
event_notification_enabled_bucket_count longo Número de buckets com a notificação de eventos habilitada para o item referido no momento.
transition_lifecycle_rule_count longo Número de regras de ciclo de vida de transição para o item referido no momento.
expiration_lifecycle_rule_count longo Número de regras de ciclo de vida de expiração para o item referido no momento.
non_current_version_transition_lifecycle_rule_count longo Número de regras de ciclo de vida de transição de versão não atual para o item referido no momento.
non_current_version_expiration_lifecycle_rule_count longo Número de regras de ciclo de vida de expiração de versão não atual para o item referido no momento.
abort_incomplete_multipart_upload_lifecycle_rule_count longo Número de regras de ciclo de vida de multipart uploads incompletos cancelados para o item referido no momento.
expired_object_delete_marker_lifecycle_rule_count longo Número de regras de ciclo de vida de marcador de exclusão de objetos expirados para o item referido no momento.
same_region_replication_rule_count longo Número de contagem de regras de replicação na mesma região para o item referido no momento.
cross_region_replication_rule_count longo Número de contagem de regras de replicação entre regiões para o item referido no momento.
same_account_replication_rule_count longo Número de contagem de regras de replicação na mesma conta para o item referido no momento.
cross_account_replication_rule_count longo Número de contagem de regras de replicação entre contas para o item referido no momento.
invalid_destination_replication_rule_count longo Número de buckets com replicação de destino inválida para o item referido no momento.

Esquema de tabela de métricas de atividade

Nome Tipo Descrição
version_number string Identificador de versão do esquema da tabela.
configuration_id string Nome da configuração da Lente de Armazenamento do S3.
report_time timestamptz Data à qual o relatório da Lente de Armazenamento do S3 se refere.
aws_account_id string ID da conta ao qual a entrada se refere.
aws_region string Região
storage_class string Classe de armazenamento
record_type string Tipo de registro, relacionado ao nível de agregação de dados. Valores: ACCOUNT, BUCKET, PREFIX.
record_value string Desambiguador para tipos de registro que têm mais de um registro abaixo deles. É usado para fazer referência ao prefixo.
bucket_name string Nome do bucket
all_request_count longo Número de solicitações _all_ para o item referido no momento.
all_sse_kms_encrypted_request_count longo Número de solicitações criptografadas do KMS para o item referido no momento.
all_unsupported_sig_request_count longo Número de solicitações de assinatura não compatíveis para o item referido no momento.
all_unsupported_tls_request_count longo Número de solicitações TLS não compatíveis para o item referido no momento.
bad_request_error_400_count longo Número de erros 400 Bad Request para o item referido no momento.
delete_request_count longo Número de solicitações excluídas para o item referido no momento.
downloaded_bytes decimal(0,0) Número de bytes baixados para o item referido no momento.
error_4xx_count longo Número de erros 4xx para o item referido no momento.
error_5xx_count longo Número de erros 5xx para o item referido no momento.
forbidden_error_403_count longo Número de erros 403 Forbidden para o item referido no momento.
get_request_count longo Número de solicitações Get para o item referido no momento.
head_request_count longo Número de solicitações Head para o item referido no momento.
internal_server_error_500_count longo Número de erros 500 Internal Server para o item referido no momento.
list_request_count longo Número de solicitações List para o item referido no momento.
not_found_error_404_count longo Número de erros 404 Not Found para o item referido no momento.
ok_status_200_count longo Número de solicitações 200 OK para o item referido no momento.
partial_content_status_206_count longo Número de solicitações 206 Partial Content para o item referido no momento.
post_request_count longo Número de solicitações Post para o item referido no momento.
put_request_count longo Número de solicitações Put para o item referido no momento.
select_request_count longo Número de solicitações Select para o item referido no momento.
select_returned_bytes decimal(0,0) Número de bytes retornados por solicitações Select para o item referido no momento.
select_scanned_bytes decimal(0,0) Número de bytes verificados por solicitações Select para o item referido no momento.
service_unavailable_error_503_count longo Número de erros 503 Service Unavailable para o item referido no momento.
uploaded_bytes decimal(0,0) Número de bytes carregados para o item referido no momento.
average_first_byte_latency longo Tempo médio por solicitação entre o momento em que um bucket do S3 recebe uma solicitação completa e o momento em que começa a exibir a resposta, medido nas últimas 24 horas.
average_total_request_latency longo Tempo médio decorrido por solicitação entre o primeiro byte recebido e o último byte enviado a um bucket do S3, medido nas últimas 24 horas.
read_0kb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 0 KB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_0kb_to_128kb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 0 KB e até 128 KB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_128kb_to_256kb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 128 KB e até 256 KB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_256kb_to_512kb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 256 KB e até 512 KB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_512kb_to_1mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 512 KB e até 1 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_1mb_to_2mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 1 MB e até 2 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_2mb_to_4mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 2 MB e até 4 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_4mb_to_8mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 4 MB e até 8 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_8mb_to_16mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 8 MB e até 16 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_16mb_to_32mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 16 MB e até 32 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_32mb_to_64mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 32 MB e até 64 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_64mb_to_128mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 64 MB e até 128 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_128mb_to_256mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 128 MB e até 256 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_256mb_to_512mb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 256 MB e até 512 MB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_512mb_to_1gb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 512 MB e até 1 GB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_1gb_to_2gb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 1 GB e até 2 GB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_2gb_to_4gb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 2 GB e até 4 GB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
read_larger_than_4gb_request_count longo Número de solicitações GetObject com tamanhos de dados acima de 4 GB, incluindo tanto solicitações baseadas em intervalos quanto solicitações de objetos inteiros.
write_0kb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados de 0 KB.
write_0kb_to_128kb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 0 KB e até 128 KB.
write_128kb_to_256kb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 128 KB e até 256 KB.
write_256kb_to_512kb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 256 KB e até 512 KB.
write_512kb_to_1mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 512 KB e até 1 MB.
write_1mb_to_2mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 1 MB e até 2 MB.
write_2mb_to_4mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 2 MB e até 4 MB.
write_4mb_to_8mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 4 MB e até 8 MB.
write_8mb_to_16mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 8 MB e até 16 MB.
write_16mb_to_32mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 16 MB e até 32 MB.
write_32mb_to_64mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 32 MB e até 64 MB.
write_64mb_to_128mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 64 MB e até 128 MB.
write_128mb_to_256mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 128 MB e até 256 MB.
write_256mb_to_512mb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 256 MB e até 512 MB.
write_512mb_to_1gb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 512 MB e até 1 GB.
write_1gb_to_2gb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 1 GB e até 2 GB.
write_2gb_to_4gb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 2 GB e até 4 GB.
write_larger_than_4gb_request_count longo Número de solicitações PutObject, UploadPart e CreateMultipartUpload com tamanhos de dados acima de 4 GB.
concurrent_put_503_error_count longo Número de erros 503 gerados devido a gravações simultâneas no mesmo objeto.
cross_region_request_count longo Número de solicitações originadas de um cliente em uma região diferente da região de origem do bucket.
cross_region_transferred_bytes decimal(0,0) Número de bytes transferidos de chamadas em uma região diferente da região de origem do bucket.
cross_region_without_replication_request_count longo Número de solicitações originadas de um cliente em uma região diferente da região de origem do bucket, exceto solicitações de replicação entre regiões.
cross_region_without_replication_transferred_bytes decimal(0,0) Número de bytes transferidos de chamadas em uma região diferente da região de origem do bucket, exceto bytes de replicação entre regiões.
inregion_request_count longo Número de solicitações originadas de um cliente na mesma região que a região de origem do bucket.
inregion_transferred_bytes decimal(0,0) Número de bytes transferidos de chamadas da mesma região que a região de origem do bucket.
unique_objects_accessed_daily_count longo Número de objetos que foram acessados pelo menos uma vez nas últimas 24 horas.