Gary Illyes de Google comparte un método poco convencional pero válido para centralizar las reglas de robots.txt en CDN.

• Los archivos Robots.txt se pueden centralizar en CDN, no solo en dominios raíz.
• Los sitios web pueden redirigir robots.txt desde el dominio principal a la CDN.
• Este enfoque poco ortodoxo cumple con estándares actualizados.