GPT Crawler

Crawl et nettsted og produser en kunnskapsfil for en tilpasset GPT.

GPT Crawler er et Node.js-verktøy som crawler et nettsted fra en start-URL og samler det uttrakte innholdet til én enkelt kunnskapsfil klar til å drive en tilpasset GPT eller assistent. Det bruker Playwright under panseret med konfigurerbare selektorer, matchmønstre og sidegrenser. Det er kjent for å forenkle veien fra offentlig dokumentasjon til en fungerende RAG-klar kunnskapsbase.