Los rastreadores de IA tienen ocasionalmente una cobertura mayor que la Búsqueda de Google

Durante décadas, Google ha sido el líder indiscutible en la recopilación de información de Internet y podría decirse que es el ejemplo más destacado de rastreador de sitios web. Estos programas automatizados rastrean internet y registran el contenido que encuentran, lo que permite a los motores de búsqueda hacer que los sitios web sean descubribles. Pero la búsqueda de Google se enfrenta ahora a la competencia, ya que los sistemas de IA también requieren datos de internet, razón por la cual empresas de IA como OpenAI están desplegando sus propios robots para buscar información en internet.

A finales de agosto de 2025, el proveedor de alojamiento web Hostinger realizó un estudio sobre la accesibilidad de 5 millones de sitios web a los rastreadores. Resulta especialmente llamativo que, por ejemplo, el bot GPT de OpenAI llegara a 4,4 de los 5 millones de sitios web, logrando así una mayor cobertura que el bot de Google, que accedió "sólo" a 3,9 millones de sitios web. Los bots menos conocidos, como el rastreador SEO de Ahrefs, el bot Claude de Anthropic y los rastreadores de Meta, TikTok, Bing y Apple también fueron muy activos, generando un total combinado de alrededor de 1.400 millones de solicitudes diarias para los 5 millones de sitios web.

El hecho de que algunos bots alcancen un porcentaje de cobertura menor que otros no significa que ignoren determinadas partes de Internet. Más bien, los programas rotan sus objetivos y crean así un mapa casi completo de Internet a lo largo de un periodo de tiempo más prolongado (pero aún en el plazo de unas pocas semanas).

El estudio también muestra que alrededor del 80% de las consultas proceden de empresas tecnológicas estadounidenses, alrededor del 10% de China y que los demás países representan una proporción insignificante. Esto significa que la indexación de Internet está dominada principalmente por proveedores de EE.UU., y dentro de ese país por unas pocas grandes empresas tecnológicas. Como resultado, un pequeño número de plataformas tiene una gran influencia sobre qué contenidos son visibles y qué respuestas generan los sistemas de inteligencia artificial.