Con el auge de la inteligencia artificial, se ha puesto sobre la mesa el debate sobre el origen de los datos de entrenamiento de los grandes modelos de lenguaje. OpenAI y Google han proporcionado indicaciones a aquellos propietarios de sitios web que prefieren evitar que el contenido de sus sitios se incorpore a los datasets de entrenamiento de estas IAs. Para bloquear el acceso de estos modelos a tu sitio, debes incluir en tu archivo robots.txt las siguientes líneas: Para ChatGPT: User-agent: GPTBot Disallow: / Para Google Bard: User-agent: Google-Extended Disallow: /
