Open SourceScraping65k
Scrapling
Adaptiver Python-Scraper mit selbstheilenden Selektoren und eingebautem MCP.
Scrapling ist eine Python-Web-Scraping-Bibliothek, die sich auf adaptives, hochleistungsfähiges Parsing konzentriert und Elemente relokalisieren kann, wenn sich die Struktur einer Website ändert. Sie bietet schnelles HTML-Parsing, ähnlichkeitsbasiertes Element-Tracking und Stealth-Fetch-Optionen für den Umgang mit dynamischen und Bot-geschützten Seiten. Sie zeichnet sich durch selbstheilende Selektoren aus, die Scraper-Ausfälle über die Zeit reduzieren.
Repository
D4Vinci/ScraplingSprache
PythonWas du damit bauen kannst
- Websites scrapen, deren HTML-Struktur sich häufig ändert, ohne Selektoren neu schreiben zu müssen
- Seiten mit Anti-Bot-Schutz mithilfe von Stealth-Optionen abrufen
- Extrahierte Web-Inhalte in LLM- oder RAG-Pipelines einspeisen
Tags
scrapingstealthmcp