Pacotes do provedor Apache Airflow instalados em ambientes Amazon MWAA
Esta página lista os pacotes do provedor Apache Airflow instalados pelo Amazon MWAA para todos os ambientes do Apache Airflow. Para obter mais informações sobre esses pacotes, consulte Referência do Apache Airflow para extras do pacote
nota
Para garantir que a compatibilidade com o registro em log do CloudWatch não seja substituída por outras instalações da biblioteca Python, o Amazon MWAA instala o Watchtower versão 2.0.1pip3 install -r requirements.txt.
Arquivo de restrições
A partir do Apache Airflow v2.7.2, seu arquivo de requisitos deve incluir uma declaração --constraint. Se você não fornecer uma restrição, o Amazon MWAA especificará uma para garantir que os pacotes listados em seus requisitos sejam compatíveis com a versão do Apache Airflow que você estiver usando.
Os arquivos de restrições do Apache Airflow especificam as versões do provedor disponíveis no momento de um lançamento do Apache Airflow. No entanto, em muitos casos os provedores mais novos são compatíveis com essa versão do Apache Airflow. Como você deve usar restrições, para especificar uma versão mais recente de um pacote de provedor, é possível modificar o arquivo de restrições para uma versão específica do provedor:
-
Baixe o arquivo de restrições específicas da versão no GitHub, por exemplo, https://raw.githubusercontent.com/apache/airflow/constraints-2.7.2/constraints-3.11.txt
(substitua “2.7.2” pela versão que você deseja usar). -
Salve o arquivo de restrições modificado na pasta DAGs do Amazon S3 do seu ambiente Amazon MWAA, por exemplo, como
constraints-3.11-updated.txt. -
Especifique seus requisitos conforme mostrado a seguir.
--constraint "/usr/local/airflow/dags/constraints-3.11-updated.txt" apache-airflow-providers-amazon==version-numbernota
Se você estiver usando um servidor Web privado, recomendamos que você empacote as bibliotecas necessárias como arquivos WHL usando o aws-mwaa-docker-images
.
Pacotes de fornecedores específicos da versão
Instalação de pacotes do provedor que você pode usar para acessar um tipo de conexão na IU do Apache Airflow. Também significa que você não precisa especificar esses pacotes como uma dependência do Python em seu arquivo requirements.txt. Esta página lista os pacotes do provedor Apache Airflow instalados pelo Amazon MWAA para todos os ambientes do Apache Airflow.
nota
Para o Apache Airflow v2 e versões posteriores, o Amazon MWAA instala o Watchtower versão 2.0.1pip3 install -r requirements.txt para garantir que a compatibilidade com o registro de log do CloudWatch não seja substituída por outras instalações da biblioteca Python.
É possível especificar a versão mais recente compatível de apache-airflow-providers-amazon para atualizar este provedor.
Versões compatíveis do Apache Airflow:
