Construye un archivo robots.txt válido con reglas por User-agent, Allow / Disallow y Sitemap. Empieza desde una plantilla lista para WordPress, Shopify o un sitio estático.
# tu robots.txt aparecerá aquí
raíz de tu dominio: https://tudominio.cl/robots.txt. Google lo cachea por 24h.
Es un archivo de texto que le dice a los bots (Googlebot, Bingbot, etc.) qué URLs de tu sitio pueden o no rastrear. No bloquea la indexación directamente — solo el rastreo.
Bloquear todo el sitio (Disallow: /) por accidente. No incluir tu sitemap. Usar rutas relativas en Sitemap. Confundir Disallow con noindex.
Siempre añade tu Sitemap. Bloquea zonas privadas (/wp-admin, /cart, /login). Nunca bloquees CSS o JS. Testea con Google Search Console → Probador de robots.txt.
Todo lo que debes saber antes de subir tu robots.txt.
No directamente. Disallow impide el rastreo, pero Google puede indexar la URL si tiene enlaces externos apuntando a ella. Para no indexar, usa la meta etiqueta <meta name="robots" content="noindex"> o el encabezado HTTP X-Robots-Tag.
Nunca. Google necesita renderizar tu sitio como lo vería un usuario. Bloquear /wp-content/themes/ o /assets/ impide que Google entienda tu página y puede dañar tu ranking.
Debe estar en la raíz de tu dominio: https://tudominio.cl/robots.txt. En un subdirectorio o subdominio no lo lee. Cada subdominio necesita su propio robots.txt.
Sí. Puedes declarar tantas líneas Sitemap: como necesites — útil si divides el sitemap por tipo (posts, páginas, categorías, imágenes).
Auditamos tu configuración actual, revisamos indexación en Google Search Console y aplicamos correcciones para que ningún URL importante quede fuera del índice.
Ver Servicio de SEO Técnico