Software anti-scraping Anubis

Anubis è un programma software open-source specializzato progettato per proteggere i siti web da scraping web aggressivo e crawler automatizzati. Creato dal tecnologo Xe Iaso, è stato inizialmente sviluppato per mitigare i sovraccarichi del server causati da crawler web che ignoravano protocolli di esclusione tradizionali come robots.txt. Il software funziona introducendo una sfida di proof-of-work (PoW) che il browser di un visitatore deve risolvere prima di accedere al sito, rendendo così lo scraping automatizzato su larga scala costoso dal punto di vista computazionale e meno praticabile.

Sin dalla sua creazione, Anubis ha guadagnato notevole attenzione all'interno della comunità software libero e open-source (FOSS). È attualmente utilizzato da organizzazioni e progetti di alto profilo, tra cui la mailing list del Kernel Linux, il Progetto GNOME, FFmpeg e Wine. Poiché è un progetto open-source ospitato su piattaforme come GitHub e mantenuto da contributori della comunità, non ha una sede di produzione aziendale tradizionale né un singolo proprietario commerciale; piuttosto, rimane parte dell'infrastruttura digitale globale disponibile sotto la Licenza MIT.