Visualización de registros para trabajos de AWS Glue
Puede ver registros en tiempo real mediante la consola de AWS Glue o la consola de Amazon CloudWatch.
Para ver registros en tiempo real mediante el panel de la consola de AWS Glue
Inicie sesión en la AWS Management Console y abra la consola de AWS Glue en https://console.aws.amazon.com/glue/
. -
En el panel de navegación, seleccione Trabajos.
-
Añada o inicie el trabajo que ya tiene. Elija Action (Acción), Run job (Ejecutar trabajo).
Cuando inicia la ejecución de un trabajo, puede ir a una página que contiene información sobre el trabajo en ejecución:
-
La pestaña Logs (Registros) muestra los registros de la aplicación agregados más antiguos.
-
La pestaña Registros muestra una barra de progreso en tiempo real cuando el trabajo se ejecuta con
glueContext
inicializado. -
La pestaña Registros también incluye los Registros del controlador, que capturan en tiempo real los registros del controlador de Apache Spark, así como los registros de la aplicación generados por el script mediante el registrador de la aplicación de AWS Glue cuando el trabajo está en ejecución.
-
-
Para trabajos más antiguos también puede ver los registros en tiempo real en la vista Job History (Historial de trabajos) eligiendo Logs (Registros). Esta acción lo lleva a la consola de CloudWatch que muestra todos los flujos de registro del controlador de Spark, ejecutor y barra de progreso para ese trabajo ejecutado.
Para ver registros en tiempo real mediante el panel de la consola de CloudWatch
-
Abra la consola de CloudWatch en https://console.aws.amazon.com/cloudwatch/
. -
En el panel de navegación, elija Log (Registro).
-
Elija el grupo de registro /aws-glue/jobs/error/.
-
En el cuadro Filter (Filtro), pegue ID del trabajo en ejecución.
Puede ver los registros del controlador, los registros del ejecutor y la barra de progreso (si utiliza el filtro estándar).