All åpen kildekode
Åpen kildekodeSkraping60k

Firecrawl

Gjør et hvilket som helst nettsted om til ren LLM-klar markdown eller strukturerte data.

Firecrawl er en tjeneste og et åpen kildekode-verktøysett som crawler nettsteder og konverterer sider til rene, LLM-klare formater som markdown og strukturerte data, med håndtering av JavaScript-rendering og proxyer. Det eksponerer skrap-, crawl- og ekstraheringsendepunkter via et API og SDK-er. Det er kjent for å gjøre hele nettsteder om til innhold optimalisert for RAG- og LLM-inntak.

Kodelager

firecrawl/firecrawl

Språk

TypeScript

Det du kan bygge med den

  • Konvertere nettsteder til ren markdown for RAG og LLM-kontekst
  • Crawle alle sider på et nettsted via ett enkelt API-kall
  • Hente ut strukturerte data fra sider med skjemabasert ekstraksjon

Tagger

crawlingmarkdownllm-ready