Dans le paysage numérique actuel, la lutte contre le scraping automatisé par les bots d’IA est devenue cruciale pour les propriétaires de sites web. Chaque jour, des millions de visites sur des sites proviennent de scrappeurs plutôt que d’utilisateurs humains, rendant la gestion de contenu en ligne de plus en plus compliquée et coûteuse. F5, une entreprise spécialisée en réseau de livraison d’application, rapporte que plus de la moitié des visites sur le web ne viennent pas de véritables utilisateurs, mais de bots tels qu’OpenAI et autres.
Pour répondre à cette problématique, Xe Iaso, éducateur technique et combattant de bots, a développé Anubis, un programme open-source qui cible spécifiquement ces nuisibles automatisés. Ce logiciel est conçu pour fonctionner comme un pare-feu web, empêchant ainsi les bots de scraper du contenu de valeur sur votre site.
Qu’est-ce qu’Anubis ?
Anubis sert de filtre entre le proxy inverse d’un site et son service cible, garantissant que toutes les connexions HTTP passent par lui avant d’atteindre le site lui-même. Cela permet de protéger particulièrement les petites organisations et les projets open-source contre le scraping indésirable.
Une des innovations d’Anubis est que, contrairement aux CAPTCHAs traditionnels, il utilise des défis computationnels que les ordinateurs ne peuvent pas résoudre facilement, tout en étant simples pour les utilisateurs humains. Le programme vérifie également le comportement des visiteurs, en analysant des facteurs comme JavaScript et les cookies, pour identifier les bots.
Depuis son lancement en janvier 2025, Anubis a été téléchargé plus de 200 000 fois et a déjà prouvé son efficacité en bloquant jusqu’à 90 % des requêtes non désirées sur des plateformes comme la bibliothèque de l’université Duke. L’initiative d’Iaso a reçu un accueil positif, avec des organisations telles que GNOME et UNESCO choisissant d’implémenter ce système pour améliorer leur infrastructure en ligne.
Comment Installer et Exécuter Anubis
L’installation d’Anubis est accessible et peut se faire de différentes manières. Il est conseillé de l’intégrer entre votre reverse proxy et votre service cible pour une protection optimale. Avoir un soutien gratuit est aussi une option, avec l’accès via la page GitHub associée ou en rejoignant le canal Discord de Patreon d’Iaso pour toute assistance.
Conclusion
Anubis représente une réponse moderne face à un défi ancien : la protection des contenus en ligne contre le scraping automatisé. Avec une fonctionnalité qui fusionne efficacité et simplicité d’utilisation, ce bot blocker s’impose comme un outil indispensable pour ceux qui souhaitent préserver l’intégrité de leur contenu sur le web.
Pour plus de détails sur cet outil prometteur et savoir comment vous pouvez l’installer sur votre propre serveur, consultez l’article complet sur ZDNet ici.
