Gary Illyes de Google comparte un método poco convencional pero válido para centralizar las reglas de robots.txt en CDN.
- Los archivos Robots.txt se pueden centralizar en CDN, no solo en dominios raíz.
- Los sitios web pueden redirigir robots.txt desde el dominio principal a la CDN.
- Este enfoque poco ortodoxo cumple con estándares actualizados.
