Creación de entornos de Amazon MWAA - Amazon Managed Workflows para Apache Airflow

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Creación de entornos de Amazon MWAA

Amazon Managed Workflows para Apache Airflow configura Apache Airflow en un entorno de la versión que elija utilizando el mismo Airflow de código abierto y la misma interfaz de usuario que Apache. En esta guía se describen los pasos para crear entornos de Amazon MWAA.

Antes de empezar

  • La red de VPC que especifica para su entorno no se puede cambiar después crearlo.

  • Necesita un bucket de Amazon S3 configurado para bloquear todo el acceso público, con el control de versiones del bucket activado.

  • Necesita un Cuenta de AWS con permisos para usar Amazon MWAA y permiso en AWS Identity and Access Management (IAM) para crear funciones de IAM. Si elige el modo de acceso a la red privada para el servidor web Apache Airflow, que limita el acceso de Apache Airflow dentro de su Amazon VPC, necesitará permiso en IAM para crear puntos de enlace de Amazon VPC.

nota

Amazon MWAA determina la red de forma dinámica durante la creación. Si utiliza IPv6 subredes, Amazon MWAA crea una conectividad de enlace IPv6 privado con la base de datos y el servidor web. Amazon MWAA no admite la transición entre tipos de red y no puede actualizar los entornos existentes a ellos. IPv6

Versiones de Apache Airflow

Las siguientes versiones de Apache Airflow son compatibles con Amazon Managed Workflows para Apache Airflow.

nota
  • A partir del 30 de diciembre de 2025, Amazon MWAA dejará de dar soporte a las versiones v2.4.3, v2.5.1 y v2.6.3 de Apache Airflow. Para obtener más información, consulta Preguntas frecuentes y compatibilidad de Apache Airflow.

  • A partir de la versión 2.2.2 de Apache Airflow, Amazon MWAA admite la instalación de requisitos de Python, paquetes de proveedores y complementos personalizados directamente en el servidor web Apache Airflow.

  • A partir de la versión 2.7.2 de Apache Airflow, su archivo de requisitos debe incluir una instrucción --constraint. Si no proporciona ninguna restricción, Amazon MWAA se la especificará para garantizar que los paquetes enumerados en sus requisitos sean compatibles con la versión de Apache Airflow que utilice.

    Para obtener más información sobre la configuración de restricciones en su archivo de requisitos, consulte Instalación de dependencias de Python.

Versión de Apache Airflow Fecha de la versión de Apache Airflow Fecha de disponibilidad en Amazon MWAA Restricciones de Apache Airflow Versión de Python

v3.0.6

29 de agosto de 2025

1 de octubre de 2025

archivo de restricciones v3.0.6

Python 3.11

v2.10.3

4 de noviembre de 2024

18 de diciembre de 2024

archivo de restricciones v2.10.3

Python 3.11

v2.10.1

5 de septiembre de 2024

26 de septiembre de 2024

archivo de restricciones v2.10.1

Python 3.11

v2.9.2

10 de junio de 2024

9 de julio de 2024

archivo de restricciones v2.9.2

Python 3.11

v2.8.1

19 de enero de 2024

23 de febrero de 2024

archivo de restricciones v2.8.1

Python 3.11

v2.7.2

12 de octubre de 2023

6 de noviembre de 2023

archivo de restricciones v2.7.2

Python 3.11

Para obtener más información sobre la migración de las implementaciones autogestionadas de Apache Airflow o la migración de un entorno Amazon MWAA existente, incluidas las instrucciones para realizar copias de seguridad de la base de datos de metadatos, consulte la Guía de migración de Amazon MWAA.

Creación de un entorno

En la siguiente sección se describen los pasos para crear entornos de Amazon MWAA.

Paso 1: especificar los detalles

Pasos para especificar los detalles del entorno
  1. Abra la consola de Amazon MWAA.

  2. Seleccione su. Región de AWS

  3. Seleccione Crear entorno.

  4. Siga los pasos que se detallan a continuación en la página Especificar detalles, en Detalles del entorno:

    1. Escriba un nombre único para su entorno en Nombre.

    2. Elija la versión Apache Airflow en versión de Airflow.

      nota

      Si no se especifica ningún valor, el valor predeterminado será la última versión de Apache Airflow. La última versión disponible es Apache Airflow v3.0.6.

  5. En Código DAG de Amazon S3, especifique lo siguiente:

    1. Un bucket de S3. Elija Explorar S3 y seleccione su bucket de Amazon S3 o introduzca el URI de Amazon S3.

    2. DAGs folder. Elija Explorar S3 y seleccione la carpeta dags en su bucket de Amazon S3 o introduzca el URI de Amazon S3.

    3. Un archivo de complementos (opcional). Elija Explorar S3 y seleccione el archivo plugins.zip en su bucket de Amazon S3 o introduzca el URI de Amazon S3.

    4. Un archivo de requisitos (opcional). Elija Explorar S3 y seleccione el archivo requirements.txt en su bucket de Amazon S3 o introduzca el URI de Amazon S3.

    5. Un archivo de script de inicio (opcional). Elija Explorar S3 y seleccione el archivo de script en su bucket de Amazon S3 o introduzca el URI de Amazon S3.

  6. Elija Siguiente.

Paso 2: configurar los ajustes avanzados

Configuración de opciones avanzadas
  1. En la página Configurar los ajustes avanzados, en Redes,

    1. Elija su Amazon VPC.

      Este paso rellena dos de las subredes privadas de su Amazon VPC.

  2. En Acceso al servidor web, selecciona el modo de acceso a Apache Airflow que prefieras:

    1. Una red privada. Esto limita el acceso a la interfaz de usuario de Apache Airflow a los usuarios de su Amazon VPC a los que se les ha concedido acceso a la política de IAM de su entorno. Para este paso, necesita permiso para crear puntos de conexión de VPC de Amazon.

      nota

      Elija la opción Red privada si solo se accede a la interfaz de usuario de Apache Airflow desde una red corporativa y no necesita acceso a repositorios públicos para la instalación de los requisitos del servidor web. Si elige esta opción de modo de acceso, necesitará crear un mecanismo para acceder a su servidor web Apache Airflow en su Amazon VPC. Para obtener más información, consulta Acceso al punto final de la VPC para su servidor web Apache Airflow (acceso a la red privada).

    2. Red pública. Esto permite que los usuarios con acceso a la política de IAM de su entorno accedan a la interfaz de usuario de Apache Airflow a través de Internet.

  3. En Grupos de seguridad, elija el grupo de seguridad utilizado para proteger su Amazon VPC:

    1. Por defecto, Amazon MWAA crea un grupo de seguridad en su VPC de Amazon con reglas de entrada y salida específicas en Crear un nuevo grupo de seguridad.

    2. Opcional. Desactive la casilla de verificación de Crear nuevo grupo de seguridad para seleccionar hasta 5 grupos de seguridad.

      nota

      Debe configurarse un grupo de seguridad de Amazon VPC existente con reglas de entrada y salida específicas para permitir el tráfico de red. Para obtener más información, consulte. Seguridad en la VPC en Amazon MWAA

  4. En Clase de entorno, elija una clase de entorno.

    Le recomendamos que elija el tamaño más pequeño necesario para soportar su carga de trabajo. Puede cambiar la clase de entorno en cualquier momento.

  5. En Número máximo de procesos de trabajo, especifique el número máximo de procesos de trabajo de Apache Airflow que se ejecutarán en el entorno.

    Para obtener más información, consulta Ejemplo de caso de uso de alto rendimiento.

  6. Especifique el número máximo de servidores web y el número mínimo de servidores web para configurar la forma en la que Amazon MWAA escala los servidores web Apache Airflow en su entorno.

    Para obtener más información sobre el escalado automático de servidores web, consulteConfiguración del escalado automático del servidor web Amazon MWAA.

  7. En Cifrado, elija una opción de cifrado de datos:

    1. De forma predeterminada, Amazon MWAA utiliza una clave AWS propia para cifrar los datos.

    2. Opcional. Seleccione Personalizar la configuración de cifrado (avanzada) para elegir una clave diferente. AWS KMS Si decide especificar una clave administrada por el cliente en este paso, debe especificar un ID de AWS KMS clave o un ARN. AWS KMS Amazon MWAA no admite alias ni claves multirregionales. Si especificó una clave de Amazon S3 para el cifrado del servidor en su bucket de Amazon S3, debe especificar la misma clave para su entorno de Amazon MWAA.

      nota

      Debe tener permisos sobre la clave para seleccionarla en la consola de Amazon MWAA. También debe conceder permisos para que Amazon MWAA utilice la clave adjuntando la política descrita en Asociación de políticas de claves.

  8. Recomendado. En Supervisión, elija una o más categorías de registro para la configuración de registro de Airflow para enviar los registros CloudWatch de Apache Airflow a Logs:

    1. Registros de tareas de Airflow. Elija el tipo de registros de tareas de Apache Airflow para enviarlos al nivel CloudWatch Logs in Log.

    2. Registros del servidor web de Airflow. Elija el tipo de registros del servidor web Apache Airflow para enviarlos al nivel CloudWatch Logs in Log.

    3. Registros del programador de Airflow. Elija el tipo de registros del programador de Apache Airflow para enviarlos al nivel CloudWatch Logs in Log.

    4. Registros de procesos de trabajo de Airflow. Elija el tipo de registros de trabajo de Apache Airflow para enviarlos al nivel CloudWatch Logs in Log.

    5. Registros de procesamiento del DAG de Airflow. Elija el tipo de registros de procesamiento del DAG de Apache Airflow para enviarlos al nivel CloudWatch Logs in Log.

  9. Opcional. Para ver las opciones de configuración de Airflow, elija Agregar una opción de configuración personalizada.

    Puede elegir de la lista desplegable sugerida de opciones de configuración de Apache Airflow para su versión de Apache Airflow o especificar opciones de configuración personalizadas. Por ejemplo, core.default_task_retries: 3.

  10. Opcional. En Etiquetas, elija Agregar nueva etiqueta para asociar etiquetas a su entorno. Por ejemplo, Environment: Staging.

  11. En Permisos, elija un rol de ejecución:

    1. Por defecto, Amazon MWAA crea un rol de ejecución en Crear un rol nuevo. Para usar esta opción, debe tener permiso para crear roles de IAM.

    2. Opcional. Elija Introduzca el ARN del rol para escribir el nombre de recurso de Amazon (ARN) de un rol de ejecución existente.

  12. Elija Siguiente.

Paso 3: consultar y crear

Pasos para consultar un resumen del entorno
  • Consulte el resumen del entorno y elija Creación de entorno.

    nota

    Se tarda entre 20 y 30 minutos en crear un entorno.