Açık KaynakScraping27k
ScrapeGraphAI
Düz bir prompt'tan graf tabanlı pipeline'lar oluşturan LLM destekli scraper.
ScrapeGraphAI, LLM'leri ve graf tabanlı bir pipeline'ı kullanarak doğal dil prompt'larına dayanarak web sitelerinden yapılandırılmış veri çıkaran bir Python web scraping kütüphanesidir. CSS veya XPath selektörleri yazmak yerine, kullanıcılar istedikleri veriyi tanımlar ve kütüphane çıkarım mantığını kendisi oluşturur. LLM akıl yürütmesini scraping ile birleştirerek şemaya uygun çıktı üretmesiyle dikkat çeker.
Depo
ScrapeGraphAI/Scrapegraph-aiDil
PythonBununla neler kurabilirsin
- İstenen alanları düz dille tanımlayarak sayfalardan yapılandırılmış veri çıkarma
- Elle yazılmış selektörler olmadan farklı sayfa düzenlerine uyum sağlayan scraper'lar geliştirme
- Aşağı akış pipeline'ları için doğrudan JSON/şemaya uygun çıktı üretme
Etiketler
ai-scrapergraphllm