Logiciel anti-scraping Anubis

Anubis est un programme logiciel open-source spécialisé conçu pour protéger les sites web des techniques agressives de web scraping et des crawlers automatisés. Créé par le technologue Xe Iaso, il a été initialement développé pour atténuer les surcharges du serveur causées par des crawlers web ignorant les protocoles d'exclusion traditionnels tels que robots.txt. Le logiciel fonctionne en introduisant un défi de preuve de travail (PoW) que le navigateur d'un visiteur doit réaliser avant d'accéder au site, rendant ainsi le scraping automatisé à grande échelle coûteux en computation et moins viable.

Depuis son lancement, Anubis a acquis une traction significative au sein de la communauté des logiciels gratuits et open-source (FOSS). Il est actuellement utilisé par des organisations et des projets de haut profil, y compris la liste de diffusion du noyau Linux, le projet GNOME, FFmpeg et Wine. En tant que projet open-source hébergé sur des plateformes telles que GitHub et maintenu par des contributeurs de la communauté, il n'a pas de lieu de fabrication d'entreprise traditionnel ni de propriétaire commercial unique ; il fait plutôt partie de l'infrastructure numérique mondiale disponible sous la licence MIT.