All åpen kildekode
Åpen kildekodeSkraping27k

ScrapeGraphAI

LLM-drevet skraper som bygger grafpipeliner fra en vanlig tekstprompt.

ScrapeGraphAI er et Python-basert web-skrapingsbibliotek som bruker LLM-er og en grafbasert pipeline for å hente ut strukturerte data fra nettsteder basert på naturspråklige prompter. I stedet for å skrive CSS- eller XPath-selektorer beskriver brukerne hvilke data de ønsker, og biblioteket bygger ekstraksjonslogikken. Det skiller seg ut ved å kombinere LLM-resonnering med skraping for å produsere skjemakonform utdata.

Kodelager

ScrapeGraphAI/Scrapegraph-ai

Språk

Python

Det du kan bygge med den

  • Hente ut strukturerte data fra sider ved å beskrive ønskede felt på naturlig språk
  • Bygge skrapere som tilpasser seg ulike sideoppsett uten håndskrevne selektorer
  • Produsere JSON/skjemakonform utdata direkte for nedstrøms pipelines

Tagger

ai-scrapergraphllm