Anzeigen von Protokollen für AWS Glue-Aufträge
Sie können Echtzeitprotokolle mit der AWS Glue-Konsole oder der Amazon-CloudWatch-Konsole anzeigen.
So zeigen Sie Echtzeit-Protokolle mit dem AWS Glue-Konsolen-Dashboard an
Melden Sie sich bei der AWS Management Console an und öffnen Sie die AWS Glue-Konsole unter https://console.aws.amazon.com/glue/
. -
Wählen Sie im Navigationsbereich die Option Jobs (Aufträge) aus.
-
Fügen Sie einen Auftrag hinzu oder starten Sie einen vorhandenen Auftrag. Wählen Sie Action (Aktion), Run job (Auftrag ausführen) aus.
Wenn Sie einen Auftrag starten, navigieren Sie zu einer Seite mit Informationen über den laufenden Auftrag:
-
Die Registerkarte Logs (Protokolle) zeigt die älteren aggregierten Anwendungsprotokolle an.
-
Die Registerkarte Protokolle zeigt einen Echtzeit-Fortschrittsbalken an, wenn der Auftrag ausgeführt wird und
glueContextinitialisiert ist. -
Die Registerkarte Protokolle enthält zudem die Treiberprotokolle, die Echtzeit-Treiberprotokolle von Apache Spark sowie Anwendungsprotokolle des protokollierten Skripts, die mit dem AWS Glue-Anwendungs-Logger protokolliert werden, während der Auftrag ausgeführt wird.
-
-
Für ältere Aufträge können Sie auch die Echtzeitprotokolle unter Job History (Auftragsverlauf) anzeigen, indem Sie Jobs (Aufträge) auswählen. Mit dieser Aktion gelangen Sie zur CloudWatch-Konsole, die alle Spark-Treiber, -Executors und Fortschrittsbalken-Protokoll-Streams für die Auftragsausführung anzeigt.
Echtzeit-Protokolle mit dem CloudWatch-Konsolen-Dashboard anzeigen
-
Öffnen Sie die CloudWatch-Konsole unter https://console.aws.amazon.com/cloudwatch/
. -
Wählen Sie im Navigationsbereich Log (Protokoll) aus.
-
Wählen Sie die Protokollgruppe /aws-glue/jobs/error/ aus.
-
Fügen Sie die Auftragsausführung-ID in das Feld Filter ein.
Sie können die Treiberprotokolle, die Executor-Protokolle und den Fortschrittsbalken anzeigen (wenn der Standard filter (Standardfilter) verwendet wird).
