Anubis Anti-Scraping-Software

Anubis ist ein spezialisiertes Open-Source-Softwareprogramm, das entwickelt wurde, um Websites vor aggressivem Web-Scraping und automatisierten Crawlers zu schützen. Es wurde von dem Technologen Xe Iaso geschaffen und ursprünglich entwickelt, um Serverüberlastungen zu reduzieren, die durch Web-Crawler verursacht wurden, die traditionelle Ausschlussprotokolle wie robots.txt ignorierten. Die Software funktioniert, indem sie eine Proof-of-Work (PoW)-Herausforderung einführt, die der Browser eines Besuchers lösen muss, bevor er auf die Site zugreifen kann. Dadurch wird automatisiertes Scraping in großem Maßstab rechnerisch teuer und weniger praktikabel.

Seit ihrer Einführung hat Anubis innerhalb der freien und Open-Source-Software (FOSS)-Gemeinschaft erheblich an Bedeutung gewonnen. Es wird derzeit von hochkarätigen Organisationen und Projekten wie der Linux Kernel Mailingliste, dem GNOME-Projekt, FFmpeg und Wine genutzt. Da es sich um ein Open-Source-Projekt handelt, das auf Plattformen wie GitHub gehostet und von Community-Mitgliedern gepflegt wird, hat es keinen traditionellen Unternehmensstandort oder einen einzigen kommerziellen Eigentümer; vielmehr bleibt es Teil der globalen digitalen Infrastruktur, die unter der MIT-Lizenz verfügbar ist.