Åpen kildekodeSkraping60k
Firecrawl
Gjør et hvilket som helst nettsted om til ren LLM-klar markdown eller strukturerte data.
Firecrawl er en tjeneste og et åpen kildekode-verktøysett som crawler nettsteder og konverterer sider til rene, LLM-klare formater som markdown og strukturerte data, med håndtering av JavaScript-rendering og proxyer. Det eksponerer skrap-, crawl- og ekstraheringsendepunkter via et API og SDK-er. Det er kjent for å gjøre hele nettsteder om til innhold optimalisert for RAG- og LLM-inntak.
Kodelager
firecrawl/firecrawlSpråk
TypeScriptDet du kan bygge med den
- Konvertere nettsteder til ren markdown for RAG og LLM-kontekst
- Crawle alle sider på et nettsted via ett enkelt API-kall
- Hente ut strukturerte data fra sider med skjemabasert ekstraksjon
Tagger
crawlingmarkdownllm-ready