Amazon MWAA Serverless unterstützt jetzt PythonOperator und BashOperator
Amazon Managed Workflows for Apache Airflow (Amazon MWAA) Serverless unterstützt jetzt die Ausführung benutzerdefinierter Python-Funktionen und Shell-Skripte direkt in der serverlosen Runtime mithilfe von PythonOperator und BashOperator. Mit dieser Markteinführung können Datentechnikteams die Codemuster ausführen, auf die sie sich täglich verlassen, einschließlich Datentransformationen, Formatkonvertierungen und Datenqualitätsprüfungen, ohne zusätzliche Infrastruktur bereitstellen zu müssen.
Verpacken Sie Ihre Python-Module oder Shell-Skripte als Code-Pakete, laden Sie sie auf Amazon S3 hoch und verweisen Sie darauf, wenn Sie einen Workflow erstellen oder aktualisieren. Der Service erstellt bei der Workflow-Erstellung einen Snapshot Ihres Codes und verwendet diesen Snapshot für alle nachfolgenden Ausführungen, um die Konsistenz aller Ausführungen sicherzustellen.
Diese Funktion ist in allen AWS-Regionen verfügbar, in denen Amazon MWAA Serverless angeboten wird. Weitere Informationen finden Sie unter Python- und Bash-Operatoren verwenden.