Prefect

Pythonisches Workflow-Orchestrierungs-Framework für moderne Daten- und ML-Pipelines.

Prefect ist ein Open-Source-Framework zur Workflow-Orchestrierung für das Erstellen, Planen und Überwachen von Daten- und Machine-Learning-Pipelines in reinem Python. Flows und Tasks werden mit einfachen Dekoratoren definiert, während die Engine Retries, Caching, Scheduling, Observability und dynamische, parametrisierte Ausführungen hinzufügt, ohne eine starre DAG-Struktur vorzuschreiben. Es ist eine der beliebtesten Python-nativen Alternativen zu Airflow.