Paquetes de proveedores de Apache Airflow instalados en entornos Amazon MWAA
En esta página, se enumeran los paquetes de proveedores de Apache Airflow que Amazon MWAA instala en todos los entornos compatibles de Apache Airflow. Para obtener más información sobre estos paquetes, consulte la referencia de Apache Airflow para paquetes extra
nota
Amazon MWAA instala la versión 2.0.1 de Watchtowerpip3 install -r requirements.txt para garantizar que otras instalaciones de bibliotecas de Python no anulen la compatibilidad con los registros de CloudWatch.
Archivo de restricciones
A partir de la versión 2.7.2 de Apache Airflow, su archivo de requisitos debe incluir una instrucción --constraint. Si no proporciona ninguna restricción, Amazon MWAA especificará una para garantizar que los paquetes que figuran en sus requisitos sean compatibles con la versión de Apache Airflow que se está usando.
Los archivos de restricciones de Apache Airflow especifican las versiones de proveedores disponibles en el momento de la publicación de Apache Airflow. En muchos casos, de todos modos, los proveedores más recientes son compatibles con esa versión de Apache Airflow. Como debe usar restricciones, para especificar una versión más reciente de un paquete de proveedores, puede modificar el archivo de restricciones para una versión de proveedor específica:
-
Descargue el archivo de restricciones específicas de la versión desde GitHub, por ejemplo, https://raw.githubusercontent.com/apache/airflow/constraints-2.7.2/constraints-3.11.txt
(reemplace “2.7.2” por la versión que desee usar). -
Guarde el archivo de restricciones modificado en la carpeta “Amazon S3 DAGs” (DAG de Amazon S3) de su entorno de Amazon MWAA como
constraints-3.11-updated.txt, por ejemplo. -
Especifique sus requisitos como se muestra a continuación.
--constraint "/usr/local/airflow/dags/constraints-3.11-updated.txt" apache-airflow-providers-amazon==version-numbernota
Si usa un servidor web privado, recomendamos que empaquete las bibliotecas necesarias como archivos WHL usando aws-mwaa-docker-images
.
Paquetes de proveedores específicos para cada versión
La instalación de paquetes de proveedores le permite ver un tipo de conexión en la UI de Apache Airflow. También significa que no necesita especificar estos paquetes como una dependencia de Python en su archivo requirements.txt. En esta página, se enumeran los paquetes de proveedores de Apache Airflow que Amazon MWAA instala en todos los entornos compatibles de Apache Airflow.
nota
Para Apache Airflow v2 y versiones posteriores, Amazon MWAA instala la versión 2.0.1 de Watchtowerpip3 install -r requirements.txt para garantizar que otras instalaciones de bibliotecas de Python no anulen la compatibilidad con los registros de CloudWatch.
Puede especificar la última versión compatible de apache-airflow-providers-amazon para actualizar este proveedor.
Versiones de Apache Airflow compatibles:
