Bloquea la IA de Google en tu web
Similar al Applebot-Extended, Google tiene un rastreador que se puede bloquear en robots.txt llamado Google-Extended.
Google tiene un rastreador llamado Google-Extended
que puedes utilizar para controlar si tu contenido puede ayudar a mejorar las API generativas de los productos de Google AI.
Por lo tanto, si quieres impedir que la IA generativa de Google utilice tu contenido, añade el agente de usuario Google-Extended
en tu archivo robots.txt.
Google no rastrea desde Google-Extended
, Google sigue rastreando desde su Googlebot normal u otros robots.
Pero el uso de Google-Extended
comunicará a Google que no utilice ese contenido para los proyectos de Google AI.
Añade esto en tu robots.txt para pedirle a Google que no use (a partir de ese momento) tus contenidos para entrenar los proyectos de Google AI:
User-agent: Googlebot Disallow: /
Información basada en la publicación en el blog de Google «An update on web publisher controls» y el artículo de ayuda de desarrollo de Google «Overview of Google crawlers and fetchers (user agents)«.