Yo uso los rastreadores web a diario. Si bien son muy útiles, solo imitan el comportamiento de los rastreadores de los motores de búsqueda, lo que significa que no siempre se obtiene una imagen completa.
La única herramienta que puede brindarle una descripción real de cómo los motores de búsqueda rastrean su sitio son los archivos de registro. A pesar de esto, muchas personas siguen obsesionadas con el presupuesto de rastreo : la cantidad de URL que Googlebot puede y quiere rastrear.
El análisis de archivos de registro puede descubrir direcciones URL en su sitio de las que no tenía idea, pero que los motores de búsqueda están rastreando de todos modos, una gran pérdida de recursos del servidor de Google ( Blog de Google Webmaster ):
La pérdida de recursos del servidor en páginas como estas agotará la actividad de rastreo de las páginas que realmente tienen valor, lo que puede causar un retraso significativo en el descubrimiento de contenido de gran calidad en un sitio.
Si bien es un tema fascinante, el hecho es que la mayoría de los sitios no tienen que preocuparse demasiado por el presupuesto de rastreo, una observación compartida por John Mueller (Webmaster Trends Analyst en Google) unas cuantas veces ya .
Sin embargo, todavía hay un gran valor en el análisis de registros producidos a partir de esos rastreos. Mostrará qué páginas está rastreando Google y si es necesario arreglar algo.
Cuando sepa exactamente lo que le dicen sus archivos de registro, obtendrá información valiosa acerca de cómo Google rastrea y ve su sitio, lo que significa que puede optimizar estos datos para aumentar el tráfico. Y cuanto más grande sea el sitio, mayor será el impacto que tendrá la solución de estos problemas .
¿Qué son los registros del servidor?
Un archivo de registro es una grabación de todo lo que entra y sale de un servidor. Piense en ello como un registro de solicitudes realizadas por rastreadores y usuarios reales. Puede ver exactamente qué recursos está rastreando Google en su sitio.
También puedes ver qué errores necesitan tu atención. Por ejemplo, uno de los problemas que descubrimos con nuestro análisis fue que nuestro CMS creó dos URL para cada página y Google descubrió ambas. Esto llevó a problemas de contenido duplicado porque dos URL con el mismo contenido competían entre sí.
…Para leer más, siga el link del idioma que prefiera
Tags: seo, blog, herramienta, google, contenido, cms