
Google-Agent: El nuevo visitante de la web acaba de obtener una identidad via @sejournal, @slobodanmanic
- ●Google ha introducido Google-Agent como un recuperador activado por el usuario que opera de manera diferente a Googlebot, e ignora las reglas de robots.txt.
- ●Los propietarios de sitios web necesitan implementar autenticación del lado del servidor o controles de acceso para restringir el acceso de Google-Agent, ya que los métodos tradicionales como robots.txt no funcionarán.
- ●La adopción de Web Bot Auth para la identidad criptográfica ayuda a distinguir los agentes de IA legítimos de los scrapers, abordando el creciente problema de identidad en la web.