Öppen källkodAutomation20k
Prefect
Pythonskt arbetsflödesorkestreringsramverk för moderna data- och ML-pipelines.
Prefect är ett orkestreringsramverk med öppen källkod för att bygga, schemalägga och övervaka data- och maskininlärningspipelines i ren Python. Flöden och uppgifter definieras med enkla dekoratorer, och motorn tillför återförsök, caching, schemaläggning, observerbarhet och dynamiska, parameteriserade körningar utan att tvinga fram en stel DAG-struktur. Det är ett av de mest populära Python-nativa alternativen till Airflow.
Kodförråd
PrefectHQ/prefectSpråk
PythonVad du kan bygga med det
- Orkestrera data- och ML-pipelines i Python med återförsök, caching och schemaläggning
- Omsluta AI-batchjobb och ETL-flöden med observerbarhet och felnotifieringar
- Köra dynamiska, parameteriserade arbetsflöden som förgrenar sig baserat på körningsdata
Taggar
orchestrationpythondata-pipelinesml