AWS Glue-Spark- und PySpark-Aufträge

AWS Glue unterstützt Spark- und PySpark-Aufträge. Ein Spark-Auftrag wird in einer von verwalteten Apache-Spark-Umgebung ausgeführt AWS Glue. Er verarbeitet Daten in Batches. Ein Streaming-ETL-Auftrag ähnelt einem Spark-Auftrag, mit der Ausnahme, dass er ETL für Datenstreams ausführt. Er verwendet das Framework Apache Spark Structured Streaming. Einige Features von Spark-Aufträgen sind für Streaming-ETL-Aufträge nicht verfügbar.

In den folgenden Abschnitten finden Sie entsprechende Informationen über AWS Glue Spark- und PySpark-Aufträge.