Genera reglas de robots.txt de permitir todo, bloquear todo o personalizadas, con una línea de sitemap opcional.