Open SourceScraping32k
Selenium
La suite historique d'automatisation cross-navigateur via WebDriver.
Selenium est la suite open-source de référence pour l'automatisation de navigateurs, pilotant de vrais navigateurs via le protocole W3C WebDriver dans de nombreux langages. Elle alimente Selenium Grid pour l'exécution distribuée et reste largement utilisée pour scraper des sites qui exigent un vrai environnement navigateur. Elle se distingue comme l'outil fondateur qui a défini l'automatisation de navigateurs et qui ancre encore d'immenses écosystèmes de test et de scraping.
Dépôt
SeleniumHQ/seleniumLangage
JavaCe que vous pourriez construire avec
- Automatiser de vrais navigateurs pour les sites qui bloquent les clients headless ou HTTP
- Distribuer les tâches de scraping sur plusieurs machines avec Selenium Grid
- Piloter des flux multi-étapes authentifiés pour accéder à des données protégées
Tags
browser-automationwebdriverscraping