Criar uma tabela para uma trilha em toda a organização usando particionamento manual
Para criar uma tabela para arquivos de log do CloudTrail em toda a organização no Athena, siga as etapas listadas em Criar uma tabela de logs do CloudTrail no Athena usando particionamento manual, mas faça as modificações observadas no procedimento a seguir.
Criar uma tabela do Athena para logs do CloudTrail em toda a organização
-
Na instrução
CREATE TABLE, modifique a cláusulaLOCATIONpara incluir o ID da organização, como no exemplo a seguir:LOCATION 's3://amzn-s3-demo-bucket/AWSLogs/organization_id/' -
Na cláusula
PARTITIONED BY, adicione uma entrada para o ID da conta como cadeia de caracteres, como no exemplo a seguir:PARTITIONED BY (account string, region string, year string, month string, day string)O exemplo a seguir mostra o resultado combinado:
... PARTITIONED BY (account string, region string, year string, month string, day string) ROW FORMAT SERDE 'org.apache.hive.hcatalog.data.JsonSerDe' STORED AS INPUTFORMAT 'com.amazon.emr.cloudtrail.CloudTrailInputFormat' OUTPUTFORMAT 'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat' LOCATION 's3://amzn-s3-demo-bucket/AWSLogs/organization_id/Account_ID/CloudTrail/' -
Na instrução
ALTER TABLE, na cláusulaADD PARTITION, inclua o ID da organização, como no exemplo a seguir:ALTER TABLE table_name ADD PARTITION (account='111122223333', region='us-east-1', year='2022', month='08', day='08') -
Na instrução
ALTER TABLE, na cláusulaLOCATION, inclua o ID da organização, o ID da conta e a partição que você deseja adicionar, como no exemplo a seguir:LOCATION 's3://amzn-s3-demo-bucket/AWSLogs/organization_id/Account_ID/CloudTrail/us-east-1/2022/08/08/'No exemplo a seguir, a instrução
ALTER TABLEmostra o resultado combinado:ALTER TABLE table_name ADD PARTITION (account='111122223333', region='us-east-1', year='2022', month='08', day='08') LOCATION 's3://amzn-s3-demo-bucket/AWSLogs/organization_id/111122223333/CloudTrail/us-east-1/2022/08/08/'
Observe que, em uma grande organização, usar esse método para adicionar e manter manualmente uma partição para cada ID de conta da organização pode ser complicado. Nesse cenário, considere usar o CloudTrail Lake em vez do Athena. O CloudTrail Lake oferece as seguintes vantagens:
-
Agrega automaticamente os logs em toda a organização
-
Não requer configuração ou manutenção de partições ou de uma tabela do Athena
-
As consultas são executadas diretamente no console do CloudTrail
-
Usa uma linguagem de consultas compatível com SQL
Para obter mais informações, consulte Trabalhar com o AWS Lake, no Guia do usuário do AWS CloudTrail.