Open SourceLokal30k
Jan
Eine Open-Source-, Offline-Alternative zu ChatGPT, die vollständig auf dem eigenen Rechner läuft.
Jan ist eine Desktop-KI-App, die LLMs vollständig offline auf dem eigenen Computer ausführt und als Open-Source-Alternative zu ChatGPT positioniert ist. Sie bündelt eine eigene lokale Inferenz-Engine (Cortex, aufgebaut auf llama.cpp), ermöglicht das Herunterladen und Wechseln zwischen Open-Weight-Modellen und kann sich auch mit entfernten OpenAI-kompatiblen Anbietern verbinden. Sie stellt einen lokalen OpenAI-kompatiblen API-Server bereit, sodass andere Apps die lokalen Modelle aufrufen können.
Repository
menloresearch/janSprache
TypeScriptWas du damit bauen kannst
- Nicht-technischen Nutzern eine polierte Desktop-App zum Chatten mit lokalen Modellen ohne Setup bereitstellen
- Modelle vollständig offline für datenschutzsensible oder air-gapped Workflows betreiben
- Einen lokalen OpenAI-kompatiblen Endpunkt bereitstellen, damit andere Tools On-Device-Modelle ansprechen können
Tags
desktopofflinechatopenai-compatible