¿Qué pasa con la herramienta Googlebot crawl rate de Search Console? ¡Te lo cuento! Según Google, esta herramienta dejará de existir el 8 de enero de 2024 porque, al parecer, ya no es de mucha utilidad.
¿Qué es el «crawl rate limiter»?
Este es un utensilio dentro de la versión antigua de Google Search Console que te permite decirle a Google que rastree tu sitio menos de lo que lo hace actualmente. Google siempre ha recomendado no limitar la tasa de rastreo, a menos que veas problemas de carga en el servidor causados definitivamente por el Googlebot.
¿Por qué Google lo está retirando?
Desde Google, Gary Illyes comenta que, con las mejoras en la lógica de rastreo y otras herramientas disponibles para los editores, la utilidad de este ha disminuido. Ahora, Googlebot reacciona automáticamente a cómo el sitio o el servidor responde a sus solicitudes HTTP.
Por ejemplo, si el servidor devuelve constantemente códigos de estado HTTP 500 para un rango de URLs, Googlebot ralentizará automáticamente y casi inmediatamente el rastreo. Igualmente, se desacelera si el tiempo de respuesta a las solicitudes se alarga significativamente.
El efecto lento del limitador de tasa de rastreo
Illyes explicó que la herramienta dentro de Google Search Console tenía un efecto mucho más lento, a menudo tomando más de un día para aplicar los nuevos límites de rastreo. Además, mencionó que era raramente usada por los propietarios de sitios y quienes la usaban, en muchos casos, configuraban la velocidad de rastreo al mínimo.
Cambio en la tasa de rastreo
Con la eliminación de esta herramienta, Google establecerá la velocidad mínima de rastreo a una tasa más baja, comparable a los antiguos límites. Así, Google continuará respetando las configuraciones que algunos propietarios de sitios habían establecido anteriormente si el interés de búsqueda es bajo y nuestros rastreadores no desperdician el ancho de banda del sitio.
¿Y si tienes problemas?
Si tienes problemas con el rastreo, Google sugiere leer este documento de ayuda y usar el formulario de reporte para informar a Google. Es importante estar atentos, especialmente si has estado usando esta herramienta, ya que desaparecerá. Así que, ¡marca una notificación en tu calendario para ver qué impacto tiene esto en tu servidor cuando la característica se active!
Fuente:https://searchengineland.com/googlebot-crawl-rate-tool-in-search-console-is-going-away-435012