Alle Open Source
Open SourceScraping27k

ScrapeGraphAI

LLM-gesteuerter Scraper, der aus einem einfachen Prompt Graph-Pipelines aufbaut.

ScrapeGraphAI ist eine Python-Web-Scraping-Bibliothek, die LLMs und eine graphbasierte Pipeline nutzt, um strukturierte Daten aus Websites anhand natürlichsprachlicher Prompts zu extrahieren. Anstatt CSS- oder XPath-Selektoren zu schreiben, beschreiben Nutzer die gewünschten Daten und die Bibliothek baut die Extraktionslogik auf. Sie zeichnet sich dadurch aus, dass LLM-Reasoning mit Scraping kombiniert wird, um schema-konformen Output zu erzeugen.

Repository

ScrapeGraphAI/Scrapegraph-ai

Sprache

Python

Was du damit bauen kannst

  • Strukturierte Daten aus Seiten extrahieren, indem die gewünschten Felder in natürlicher Sprache beschrieben werden
  • Scraper aufbauen, die sich an unterschiedliche Seitenlayouts anpassen, ohne handgeschriebene Selektoren
  • JSON/schema-konformen Output direkt für nachgelagerte Pipelines erzeugen

Tags

ai-scrapergraphllm