Veröffentlicht am: Nov 19, 2019
AWS Step Functions lässt sich jetzt in Amazon EMR integrieren. Dadurch können umfangreiche Datenverarbeitungs-Workflows in EMR jetzt schneller erstellt und leichter überwacht werden.
AWS Step Functions ermöglicht Ihnen, ausfallsichere Workflows mithilfe von AWS-Services wie AWS EMR, Amazon SageMaker und AWS Lambda zu erstellen. Amazon EMR ist die branchenführende Big-Data-Plattform, die nativ in der Cloud ist und es Teams ermöglicht, große Datenmengen schnell und kostengünstig zu verarbeiten. Mit Step Functions und Amazon EMR können Sie Big-Data-Workflows orchestrieren und gleichzeitig minimale Codeanpassungen vornehmen.
Mit Amazon EMR und AWS Step Functions können Sie jetzt effiziente Datenverarbeitungs-Workflows erstellen, mit denen sich Amazon EMR-Schritte sortieren, Abhängigkeiten verwalten und Arbeitsvorgänge parallel ausführen lassen. Sie können die Größe eines Clusters im Rahmen eines ETL-Workflows proaktiv an die jeweilige Aufgabe anpassen. Außerdem können Sie die Ausfallsicherheit Ihrer Datenverarbeitungs-Workflows verbessern, indem Sie festlegen, wie Ausnahmen gehandhabt werden, fehlgeschlagene Aufgaben wiederholen und Benutzer über Fehler informieren.
Durch die Kombination der Amazon EMR-Serviceintegration mit dem AWS Step Functions Data Science SDK können Sie durchgängige Data-Science-Workflows erstellen. Die EMR-Serviceintegration ist in allen Regionen verfügbar, in denen AWS Step Functions und Amazon EMR angeboten werden. Eine vollständige Liste der Regionen und Serviceangebote finden Sie unter AWS-Regionen.
Zum Einstieg können Sie sich die Dokumentation ansehen und ein Ein-Klick-Beispielprojekt bereitstellen. Dabei wird gezeigt, wie Sie einen Datenverarbeitungs-Workflow in Amazon EMR erstellen. Anschließend können Sie Ihren ersten eigenen Workflow entwickeln.
Weitere Informationen:
- Lesen Sie den Eintrag im AWS News Blog
- Stellen Sie ein Ein-Klick-Beispielprojekt für die Integration von AWS Step Functions in Amazon SageMaker bereit
- Informationen zum Verwalten von Amazon EMR-Aufgaben mit Step Functions finden Sie im AWS Step Functions-Entwicklerhandbuch