Open SourceScraping27k
ScrapeGraphAI
LLM-gesteuerter Scraper, der aus einem einfachen Prompt Graph-Pipelines aufbaut.
ScrapeGraphAI ist eine Python-Web-Scraping-Bibliothek, die LLMs und eine graphbasierte Pipeline nutzt, um strukturierte Daten aus Websites anhand natürlichsprachlicher Prompts zu extrahieren. Anstatt CSS- oder XPath-Selektoren zu schreiben, beschreiben Nutzer die gewünschten Daten und die Bibliothek baut die Extraktionslogik auf. Sie zeichnet sich dadurch aus, dass LLM-Reasoning mit Scraping kombiniert wird, um schema-konformen Output zu erzeugen.
Repository
ScrapeGraphAI/Scrapegraph-aiSprache
PythonWas du damit bauen kannst
- Strukturierte Daten aus Seiten extrahieren, indem die gewünschten Felder in natürlicher Sprache beschrieben werden
- Scraper aufbauen, die sich an unterschiedliche Seitenlayouts anpassen, ohne handgeschriebene Selektoren
- JSON/schema-konformen Output direkt für nachgelagerte Pipelines erzeugen
Tags
ai-scrapergraphllm