Tout l'open source
Open SourceAutomatisation20k

Prefect

Orchestration de workflows en Python pour les pipelines de données et ML modernes.

Prefect est un framework d'orchestration de workflows open-source pour construire, planifier et surveiller des pipelines de données et de machine learning en Python pur. Les flows et les tâches sont définis avec de simples décorateurs, et le moteur ajoute des relances, du cache, de la planification, de l'observabilité et des exécutions dynamiques paramétrées sans imposer une structure DAG rigide. C'est l'une des alternatives les plus populaires à Airflow pour le Python natif.

Dépôt

PrefectHQ/prefect

Langage

Python

Ce que vous pourriez construire avec

  • Orchestrer des pipelines de données et ML en Python avec relances, cache et planification
  • Encapsuler des tâches batch AI et des flux ETL avec observabilité et alertes en cas d'échec
  • Exécuter des workflows dynamiques et paramétrés qui se ramifient en fonction des données à l'exécution

Tags

orchestrationpythondata-pipelinesml