Open SourceLocal34k
LocalAI
API compatible OpenAI clé en main pour exécuter des modèles sur votre propre matériel.
LocalAI est un serveur d'inférence open source auto-hébergé qui expose une API compatible OpenAI clé en main pour exécuter des modèles en local. Il prend en charge plusieurs backends (dont llama.cpp, Whisper et des modèles de diffusion) afin qu'un seul endpoint puisse servir la génération de texte, les embeddings, la transcription audio et la génération d'images sans services cloud externes. Il fonctionne sur du matériel grand public et se distribue sous forme de binaire unique ou de conteneur.
Dépôt
mudler/LocalAILangage
GoCe que vous pourriez construire avec
- Remplacer les appels à l'API OpenAI par un endpoint compatible OpenAI auto-hébergé pour des raisons de confidentialité ou de maîtrise des coûts
- Faire tourner plusieurs modalités (chat, embeddings, speech-to-text, génération d'images) derrière une seule API locale
- Déployer l'inférence locale dans des environnements isolés ou sur site via Docker
Tags
self-hostedopenai-compatiblelocal