Open SourceAutomatisering20k
Prefect
Pythonische workflow-orkestratie voor moderne data- en ML-pipelines.
Prefect is een open-source workflow-orkestratiframework voor het bouwen, plannen en monitoren van data- en machine-learning-pipelines in puur Python. Flows en taken worden gedefinieerd met eenvoudige decorators, en de engine voegt retries, caching, scheduling, observability en dynamische, geparametriseerde runs toe zonder een rigide DAG-structuur op te leggen. Het is een van de populairste Python-native alternatieven voor Airflow.
Opslagplaats
PrefectHQ/prefectTaal
PythonWat je ermee zou bouwen
- Orkestreren van data- en ML-pipelines in Python met retries, caching en scheduling
- AI-batchjobs en ETL-flows voorzien van observability en foutmeldingen
- Uitvoeren van dynamische, geparametriseerde workflows die vertakken op basis van runtime-data
Tags
orchestrationpythondata-pipelinesml