
Google-Agent : Le nouveau visiteur du web vient d'obtenir une identité via @sejournal, @slobodanmanic
- ●Google a introduit Google-Agent en tant que récupérateur déclenché par l'utilisateur qui fonctionne différemment de Googlebot, et il ignore les règles de robots.txt.
- ●Les propriétaires de sites web doivent mettre en place une authentification côté serveur ou des contrôles d'accès pour restreindre l'accès de Google-Agent, car les méthodes traditionnelles comme robots.txt ne fonctionneront pas.
- ●L'adoption de Web Bot Auth pour l'identité cryptographique aide à distinguer les agents AI légitimes des scrapers, répondant au problème croissant d'identité sur le web.