Anubis anti-scraping software

Anubis er et specialiseret open-source softwareprogram designet til at beskytte websites mod aggressiv web scraping og automatiserede crawlers. Det blev skabt af teknologen Xe Iaso og blev oprindeligt udviklet for at reducere serveroverbelastninger forårsaget af web crawlers, der ignorerede traditionelle udelukkelsesprotokoller som robots.txt. Softwaren fungerer ved at introducere en proof-of-work (PoW) udfordring, som en besøgendes browser skal løse, før de får adgang til siden, hvilket effektivt gør storstilet automatiseret scraping computationalt dyrt og mindre gennemførligt.

Siden sin begyndelse har Anubis fået betydelig traction inden for det frie og open-source software (FOSS) samfund. Den anvendes i øjeblikket af højprofilerede organisationer og projekter, herunder Linux Kernel mailinglisten, GNOME-projektet, FFmpeg og Wine. Da det er et open-source projekt, der er vært på platforme som GitHub og vedligeholdes af samfundsbidragere, har det ikke et traditionelt corporate produktionssted eller en enkelt kommerciel ejer; det forbliver snarere en del af den globale digitale infrastruktur tilgængelig under MIT Licensen.