Alle open source
Open SourceLokaal74k

GPT4All

Draai privé, lokale LLM's op alledaagse desktops en laptops, geen GPU vereist.

GPT4All is een open-source ecosysteem van Nomic AI voor het draaien van lokale LLM's op consumer-CPU's en GPU's, inclusief een verzorgde desktop-chattoepassing. Het wordt geleverd met een één-klik-installer, een gecureerde modelcatalogus en een ingebouwde LocalDocs-functie voor retrieval-augmented chat over je eigen bestanden. Het biedt ook Python- en andere taalbindingen zodat ontwikkelaars lokale inferentie in hun apps kunnen inbedden.

Opslagplaats

nomic-ai/gpt4all

Taal

C++

Wat je ermee zou bouwen

  • Eindgebruikers privémodellen laten draaien op een laptop met een eenvoudige installer en zonder commandoregel
  • Chatten over lokale documenten met de ingebouwde LocalDocs RAG zonder data naar de cloud te sturen
  • On-device inferentie inbedden in apps via de GPT4All Python-bindingen

Tags

desktopcpuragbindings