Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
# Migrieren Sie Workloads von AWS Data Pipeline zu Amazon MWAA
AWS hat den AWS Data Pipeline Dienst 2012 gestartet. Zu dieser Zeit wünschten sich Kunden einen Service, mit dem sie eine Vielzahl von Rechenoptionen nutzen konnten, um Daten zwischen verschiedenen Datenquellen zu verschieben. Da sich die Anforderungen an die Datenübertragung im Laufe der Zeit geändert haben, haben sich auch die Lösungen für diese Anforderungen geändert. Sie haben jetzt die Möglichkeit, die Lösung zu wählen, die Ihren Geschäftsanforderungen am besten entspricht. Sie können Ihre Workloads auf jeden der folgenden AWS Dienste migrieren:
+ Verwenden Sie Amazon Managed Workflows for Apache Airflow (Amazon MWAA), um die Workflow-Orchestrierung für Apache Airflow zu verwalten.
+ Verwenden Sie Step Functions, um Workflows zwischen mehreren AWS-Services zu orchestrieren.
+ Wird verwendet AWS Glue , um Apache Spark-Anwendungen auszuführen und zu orchestrieren.
Welche Option Sie wählen, hängt von Ihrer aktuellen Arbeitslast ab AWS Data Pipeline. In diesem Thema wird erklärt, wie Sie von AWS Data Pipeline zu Amazon MWAA migrieren.
**Topics**
+ [Amazon MWAA wählen](#migrating-pipeline-workloads-mwaa)
+ [Architektur und Konzeptkartierung](#migrating-pipeline-workloads-concept-mapping)
+ [Beispielimplementierungen](#migrating-pipeline-workloads-examples)
+ [Vergleich der Preise](#migrating-pipeline-workloads-price-comparison)
+ [Zugehörige Ressourcen](#migrating-pipeline-workloads-resources)
## Amazon MWAA wählen
Amazon Managed Workflows for Apache Airflow (Amazon MWAA) ist ein verwalteter Orchestrierungsservice für Apache Airflow, mit dem Sie end-to-end Daten-Pipelines in der Cloud in großem Umfang einrichten und betreiben können. [Apache Airflow](https://airflow.apache.org/) *ist ein Open-Source-Tool zum programmgesteuerten Erstellen, Planen und Überwachen von Prozess- und Aufgabensequenzen, die als Workflows bezeichnet werden.* Mit Amazon MWAA können Sie Apache Airflow und die Programmiersprache Python verwenden, um Workflows zu erstellen, ohne die zugrunde liegende Infrastruktur im Hinblick auf Skalierbarkeit, Verfügbarkeit und Sicherheit verwalten zu müssen. Amazon MWAA passt seine Workflow-Kapazität automatisch an Ihre Bedürfnisse an und ist in AWS Sicherheitsservices integriert, um Ihnen einen schnellen und sicheren Zugriff auf Ihre Daten zu ermöglichen.
Im Folgenden werden einige der Vorteile einer Migration von Amazon AWS Data Pipeline MWAA hervorgehoben:
+ **Verbesserte Skalierbarkeit und Leistung** — Amazon MWAA bietet ein flexibles und skalierbares Framework für die Definition und Ausführung von Workflows. Dies ermöglicht es Benutzern, große und komplexe Workflows mühelos zu handhaben und Funktionen wie dynamische Aufgabenplanung, datengesteuerte Workflows und Parallelität zu nutzen.
+ **Verbesserte Überwachung und Protokollierung** — Amazon MWAA lässt sich in Amazon integrieren CloudWatch , um die Überwachung und Protokollierung Ihrer Workflows zu verbessern. Amazon MWAA sendet automatisch Systemmetriken und Protokolle an. CloudWatch Das bedeutet, dass Sie den Fortschritt und die Leistung Ihrer Workflows in Echtzeit verfolgen und auftretende Probleme identifizieren können.
+ **Bessere Integrationen mit AWS Diensten und Software von Drittanbietern** [https://www.snowflake.com/en/](https://www.snowflake.com/en/) Auf diese Weise können Sie Daten zwischen verschiedenen Umgebungen und Diensten verarbeiten und übertragen.
+ **Open-Source-Daten-Pipeline-Tool** — Amazon MWAA nutzt dasselbe Open-Source-Produkt Apache Airflow, mit dem Sie vertraut sind. Apache Airflow ist ein speziell entwickeltes Tool, das für alle Aspekte des Daten-Pipeline-Managements entwickelt wurde, einschließlich Aufnahme, Verarbeitung, Übertragung, Integritätstests, Qualitätsprüfungen und Sicherstellung der Datenherkunft.
+ **Moderne und flexible Architektur** — Amazon MWAA nutzt Containerisierung und Cloud-native, serverlose Technologien. Das bedeutet mehr Flexibilität und Portabilität sowie eine einfachere Bereitstellung und Verwaltung Ihrer Workflow-Umgebungen.
## Architektur und Konzeptkartierung
AWS Data Pipeline und Amazon MWAA haben unterschiedliche Architekturen und Komponenten, die sich auf den Migrationsprozess und die Art und Weise, wie Workflows definiert und ausgeführt werden, auswirken können. In diesem Abschnitt werden die Architektur und die Komponenten für beide Dienste beschrieben und einige der wichtigsten Unterschiede hervorgehoben.
AWS Data Pipeline Sowohl Amazon MWAA als auch Amazon sind vollständig verwaltete Services. Wenn Sie Ihre Workloads zu Amazon MWAA migrieren, müssen Sie sich möglicherweise mit neuen Konzepten vertraut machen, um Ihre bestehenden Workflows mit Apache Airflow zu modellieren. Sie müssen sich jedoch nicht um die Infrastruktur kümmern, Worker patchen und Betriebssystem-Updates verwalten.
In der folgenden Tabelle werden die wichtigsten Konzepte AWS Data Pipeline denen in Amazon MWAA zugeordnet. Verwenden Sie diese Informationen als Ausgangspunkt für die Erstellung eines Migrationsplans.
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/de_de/mwaa/latest/migrationguide/migrating-pipeline-workloads.html)
## Beispielimplementierungen
In vielen Fällen können Sie Ressourcen, mit denen Sie derzeit orchestrieren, AWS Data Pipeline nach der Migration zu Amazon MWAA wiederverwenden. Die folgende Liste enthält Beispielimplementierungen mit Amazon MWAA für die häufigsten AWS Data Pipeline Anwendungsfälle.
+ [Einen Amazon EMR-Job ausführen](https://catalog.us-east-1.prod.workshops.aws/workshops/795e88bb-17e2-498f-82d1-2104f4824168/en-US/workshop-2-2-2/m1-processing/emr) (AWS Workshop)
+ [Erstellen eines benutzerdefinierten Plugins für Apache Hive und Hadoop](https://docs.aws.amazon.com/mwaa/latest/userguide/samples-hive.html) (*Amazon MWAA-Benutzerhandbuch*)
+ [Daten von S3 nach Redshift kopieren](https://catalog.us-east-1.prod.workshops.aws/workshops/795e88bb-17e2-498f-82d1-2104f4824168/en-US/workshop-2-2-2/m1-processing/redshift) (AWS Workshop)
+ [Ausführen eines Shell-Skripts auf einer Amazon ECS-Remoteinstanz](https://docs.aws.amazon.com/mwaa/latest/userguide/samples-ssh.html) (*Amazon MWAA-Benutzerhandbuch*)
+ [Orchestrierung hybrider (vor Ort) Workflows (Blogbeitrag)](https://dev.to/aws/orchestrating-hybrid-workflows-using-amazon-managed-workflows-for-apache-airflow-mwaa-2boc)
Weitere Tutorials und Beispiele finden Sie im Folgenden:
+ [Amazon MWAA-Tutorials](https://docs.aws.amazon.com/mwaa/latest/userguide/tutorials.html)
+ [Amazon MWAA-Codebeispiele](https://docs.aws.amazon.com/mwaa/latest/userguide/sample-code.html)
## Vergleich der Preise
Die Preisgestaltung für AWS Data Pipeline richtet sich nach der Anzahl der Pipelines sowie nach der Nutzungsdauer der einzelnen Pipelines. Aktivitäten, die Sie mehr als einmal am Tag ausführen (hohe Frequenz), kosten 1 USD pro Monat und Aktivität. Aktivitäten, die Sie einmal am Tag oder weniger (niedrige Frequenz) ausführen, kosten 0,60 USD pro Monat und Aktivität. Inaktive Pipelines kosten 1\$1 pro Pipeline. Weitere Informationen finden Sie auf der Seite mit den [AWS Data Pipeline Preisen](https://aws.amazon.com/datapipeline/pricing/).
Die Preise für Amazon MWAA basieren auf der Dauer, in der Ihre verwaltete Apache Airflow Airflow-Umgebung existiert, sowie auf der zusätzlichen auto Skalierung, die erforderlich ist, um mehr Mitarbeiter bereitzustellen, oder auf der Kapazität des Planers. Sie zahlen für die Nutzung Ihrer Amazon MWAA-Umgebung auf Stundenbasis (in Rechnung gestellt mit einer Auflösung von einer Sekunde), wobei die Gebühren je nach Größe der Umgebung variieren. Amazon MWAA skaliert die Anzahl der Worker automatisch auf Grundlage Ihrer Umgebungskonfiguration. AWS berechnet die Kosten für zusätzliche Mitarbeiter separat. Weitere Informationen zu den stündlichen Kosten für die Nutzung verschiedener Amazon MWAA-Umgebungsgrößen finden Sie auf der [Amazon MWAA-Preisseite](https://aws.amazon.com/managed-workflows-for-apache-airflow/pricing/).
## Zugehörige Ressourcen
Weitere Informationen und bewährte Methoden für die Verwendung von Amazon MWAA finden Sie in den folgenden Ressourcen:
+ [Die Amazon MWAA API-Referenz](https://docs.aws.amazon.com/mwaa/latest/API/Welcome.html)
+ [Überwachen von Dashboards und Alarmen auf Amazon MWAA](https://docs.aws.amazon.com/mwaa/latest/userguide/monitoring-dashboard.html)
+ [Leistungsoptimierung für Apache Airflow auf Amazon MWAA](https://docs.aws.amazon.com/mwaa/latest/userguide/best-practices-tuning.html)