Lavorare con DAGs Amazon MWAA - Amazon Managed Workflows for Apache Airflow
Panoramica dei bucket Amazon S3

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Lavorare con DAGs Amazon MWAA

Per eseguire Directed Acyclic Graphs (DAGs) su un ambiente Amazon Managed Workflows for Apache Airflow, copia i file nel bucket di storage Amazon S3 collegato al tuo ambiente, quindi comunica ad Amazon MWAA dove si trovano i tuoi file e DAGs quelli di supporto sulla console Amazon MWAA. Amazon MWAA si occupa della sincronizzazione DAGs tra lavoratori, pianificatori e server Web. Questa guida descrive come aggiungere o aggiornare DAGs e installare plugin personalizzati e dipendenze Python in un ambiente Amazon MWAA.

Argomenti

Panoramica dei bucket Amazon S3

Un bucket Amazon S3 per un ambiente Amazon MWAA deve avere l'accesso pubblico bloccato. Per impostazione predefinita, tutte le risorse Amazon S3 (bucket, oggetti e risorse secondarie correlate (ad esempio, la configurazione del ciclo di vita) sono private.

  • Solo il proprietario della risorsa, l' AWS account che ha creato il bucket, può accedere alla risorsa. Il proprietario della risorsa (ad esempio l'amministratore) può concedere le autorizzazioni di accesso ad altri scrivendo una politica di controllo degli accessi.

  • La politica di accesso che configuri deve avere l'autorizzazione per l'aggiunta DAGs, plug-in personalizzati e dipendenze requirements.txt Python nel plugins.zip tuo bucket Amazon S3. Per un esempio di politica che contiene le autorizzazioni richieste, consulta Amazon MWAAFull ConsoleAccess.

Un bucket Amazon S3 per un ambiente Amazon MWAA deve avere il controllo delle versioni abilitato. Quando il controllo delle versioni del bucket Amazon S3 è abilitato, ogni volta che viene creata una nuova versione, viene creata una nuova copia.

  • Il controllo delle versioni è abilitato per i plug-in personalizzati in a e le dipendenze Python in un plugins.zip bucket requirements.txt Amazon S3.

  • È necessario specificare la versione di plugins.zip e requirements.txt sulla console Amazon MWAA ogni volta che questi file vengono aggiornati sul bucket Amazon S3.