Open SourceScraping60k
Firecrawl
Jede Website in sauberes, LLM-fertiges Markdown oder strukturierte Daten umwandeln.
Firecrawl ist ein Service und ein Open-Source-Toolkit, das Websites crawlt und Seiten in saubere, LLM-fertige Formate wie Markdown und strukturierte Daten konvertiert – inklusive JavaScript-Rendering und Proxy-Handling. Es stellt Scrape-, Crawl- und Extrakt-Endpunkte über eine API und SDKs bereit. Es zeichnet sich dadurch aus, ganze Sites in für RAG und LLM-Ingestion optimierten Content umzuwandeln.
Repository
firecrawl/firecrawlSprache
TypeScriptWas du damit bauen kannst
- Websites in sauberes Markdown für RAG und LLM-Kontext umwandeln
- Alle Seiten einer Website über einen einzigen API-Aufruf crawlen
- Strukturierte Daten aus Seiten mit schema-basierter Extraktion gewinnen
Tags
crawlingmarkdownllm-ready