Google aclara cómo frenar a Googlebot en caso de emergencia técnica en el servidor
Google ha actualizado su documentación oficial para detallar cómo utilizar la cabecera HTTP Retry-After ante problemas de sobrecarga o caídas de servidor.

Lo que se sabe
Google ha reestructurado su documentación sobre cómo reducir la tasa de rastreo (crawl rate) de Googlebot en situaciones de emergencia. Ha añadido información detallada y ejemplos de código para usar la cabecera HTTP 'Retry-After' junto con los códigos de estado HTTP 503 (Service Unavailable) o 429 (Too Many Requests). Esto permite indicar a los rastreadores de Google un tiempo de espera específico (en segundos o en una fecha y hora UTC absoluta) antes de volver a intentar la petición. Esta capacidad técnica no es nueva, pero ahora se incluye de forma explícita y visible en la guía de reducción de tráfico de rastreo de emergencia.
Lo que solo se ha anunciado
Google afirma que añadir esta información directamente a la guía de reducción de la tasa de rastreo facilita a los propietarios de sitios web encontrar y entender cómo actuar cuando necesitan reducir urgentemente el tráfico de los rastreadores.
Qué significa para tu negocio
Para las empresas de servicios B2B, este cambio normativo ofrece una vía clara para que sus equipos de IT protejan la estabilidad de la web durante picos de tráfico, tareas de mantenimiento críticas o caídas inesperadas, asegurando que Googlebot no agrave una crisis técnica ni afecte la experiencia de navegación de los potenciales clientes.

