El análisis de archivos de registro (logs) es la práctica de examinar los registros de acceso sin procesar de un servidor web para ver exactamente cómo interactúan con un sitio los rastreadores de los buscadores y los bots de compras: qué páginas solicitan, con qué frecuencia y si encuentran errores por el camino. En los catálogos basados en feeds, es una de las pocas formas de confirmar lo que realmente ve Googlebot o el rastreador de un marketplace, en lugar de fiarse de lo que el feed dice que debería haber. Se diferencia de la mayoría de las herramientas de analítica porque recoge todas las solicitudes que recibe un servidor, incluidas las de los bots, que nunca aparecen en los informes de tráfico estándar.
Por qué es importante el análisis de archivos de registro
Un feed de productos puede estar perfectamente estructurado mientras las páginas de destino a las que enlaza resultan inaccesibles para los rastreadores sin que nadie lo note: bloqueadas por una regla de robots.txt mal configurada, devolviendo errores de servidor o redirigiendo a través de cadenas que los rastreadores abandonan a mitad de camino. El análisis de archivos de registro es lo que pone al descubierto estos problemas, porque muestra los códigos de estado HTTP reales y la frecuencia de rastreo que un servidor devuelve a un bot, con independencia de lo que indique un sitemap o un feed. Esto afecta directamente al rendimiento en la búsqueda orgánica: una página de producto a la que un rastreador no puede acceder o en la que encuentra errores repetidamente acabará desapareciendo del índice, por muy bien optimizado que esté su contenido. En los catálogos grandes, el análisis de logs también revela el desperdicio del presupuesto de rastreo: un bot que dedica la mayoría de sus visitas a URL filtradas de poco valor en lugar de a las páginas de producto que realmente necesitan indexarse.
Cómo funciona el análisis de archivos de registro
Los logs del servidor registran cada solicitud con una marca de tiempo, el user agent que la realiza, la URL solicitada y el código de respuesta devuelto. Las herramientas de análisis de logs filtran estos datos sin procesar para quedarse con los user agents de rastreadores conocidos (Googlebot, Bingbot y bots específicos de marketplaces) y, después, los agregan en patrones: qué rutas de URL se rastrean más, cuáles devuelven errores 404 o 500 y cómo ha cambiado la frecuencia de rastreo con el tiempo. Estos datos suelen compararse con los resultados del benchmarking del feed para ver si los problemas de rastreo se correlacionan con rechazos o caídas de posicionamiento en categorías de producto concretas, y se incorporan a los paneles de analítica del feed como un dato más junto a los de clics y conversiones.
Ejemplo
<item>
<g:id>SKU-20956</g:id>
<title>Merino Wool Hiking Socks - 2 Pack</title>
<g:link>https://example-shop.com/products/merino-wool-hiking-socks</g:link>
<g:availability>in stock</g:availability>
</item>El análisis de archivos de registro de una URL como la de link mostraría si Googlebot está llegando realmente a esta página y obteniendo una respuesta 200, o si se encuentra repetidamente con una redirección o un error que explicaría por qué la ficha no se posiciona a pesar de tener una entrada de feed bien construida.
Conceptos relacionados
El análisis de archivos de registro aporta más valor combinado con el benchmarking del feed, ya que los errores de rastreo suelen explicar diferencias de rendimiento que el benchmarking por sí solo solo puede señalar, no diagnosticar, y con un seguimiento más amplio de la búsqueda orgánica, ya que la accesibilidad para el rastreo es un requisito previo para posicionarse. Integrado en la revisión periódica de la analítica del feed, detecta un tipo de problema —del lado del servidor, no del feed— que ninguna optimización de títulos o precios puede resolver por sí sola.
