Pide una auditoría

Inicio / RoloPedia / GEOpedia

GEOpedia · Técnico

ClaudeBot

ClaudeBot es el crawler que Anthropic usa para recopilar contenido de entrenamiento para sus modelos Claude. No es el que permite que Claude te cite cuando busca en la web: esa función es de Claude-SearchBot, que indexa para búsqueda, y de Claude-User, que visita páginas en vivo cuando un usuario le pide a Claude que consulte algo.

La lógica es la misma que con GPTBot. Bloquear ClaudeBot es una decisión editorial y legal sobre el entrenamiento y no cuesta citas, siempre que Claude-SearchBot y Claude-User sigan permitidos. Bloquear cualquiera de estos dos sí te deja fuera de las respuestas de Claude con búsqueda.

Para aparecer en esas respuestas hace falta algo más que el robots.txt. La capa de búsqueda de Claude es, con mucha probabilidad aunque sin confirmación oficial, el índice de Brave Search, que es independiente de Google y de Bing. Estar en Google no implica estar en Brave, así que hay que comprobarlo. Y, como el resto de bots de IA salvo Googlebot y Bingbot, los de Anthropic no ejecutan JavaScript.

Ejemplos

  • Política mixta: Disallow: / para ClaudeBot y Allow: / para Claude-SearchBot y Claude-User. No entras en el entrenamiento y sigues siendo citable.
  • Hueco de índice: el sitio permite todos los bots de Anthropic, pero sus URLs objetivo no aparecen en Brave Search, y Claude no las encuentra al buscar.

Consejos prácticos

  • Separa en el robots.txt los tres bots de Anthropic, cada uno en su bloque.
  • Busca tus URLs clave en Brave Search para comprobar que están indexadas.
  • Verifica las visitas por los rangos IP oficiales de Anthropic, no por el user-agent.

Cuidado con

  • Bloquear «Claude» con una regla genérica suele llevarse por delante a Claude-SearchBot y Claude-User, que son los que dan citas.
  • Que Claude busque sobre Brave es muy probable, pero Anthropic no lo ha confirmado.

Evidencia fuerte. Que bloquear ClaudeBot no afecta a las citas si Claude-SearchBot y Claude-User siguen permitidos se deriva de la documentación de bots de Anthropic; la dependencia de Brave es una hipótesis no confirmada.

Términos relacionados

Jorge J. Rolo

SEO & AI Search Manager en Flat 101. Consultor SEO técnico.