Öppen källkodScraping32k
Selenium
Den ursprungliga plattformsoberoende automatiseringssviten via WebDriver.
Selenium är den långvariga open-source-sviten för webbläsarautomatisering som styr riktiga webbläsare via W3C WebDriver-protokollet i många programspråk. Den driver Selenium Grid för distribuerad körning och används fortfarande brett för skrapning av sidor som kräver en genuin webbläsarmiljö. Den utmärker sig som det grundläggande verktyget som definierade webbläsarautomatisering och fortfarande utgör grunden för enorma test- och skrapekosystem.
Kodförråd
SeleniumHQ/seleniumSpråk
JavaVad du kan bygga med det
- Automatisera riktiga webbläsare för sidor som blockerar headless- eller HTTP-klienter
- Distribuera skrapjobb över flera maskiner med Selenium Grid
- Driva autentiserade flerstegssflöden för att nå skyddad data
Taggar
browser-automationwebdriverscraping