Create a perfectly formatted robots.txt file in seconds with our visual builder — or validate your existing one for mistakes that could be silently blocking Google from your site.
Used to auto-fill the Sitemap URL.
# Loading preview…
Pruebe si una URL específica sería permitida o bloqueada por estas reglas.
Un archivo robots.txt es un archivo de texto plano colocado en la raíz de su sitio web (p.ej. https://yoursite.com/robots.txt). It instructs search engine crawlers — like Googlebot — which pages or sections of your site they should or should not crawl and index.
Si bien robots.txt no garantiza la privacidad (las páginas bloqueadas aún pueden aparecer en los resultados de búsqueda si están enlazadas desde otros sitios), es la herramienta principal para gestionar presupuesto de rastreo — how much of your site Google explores per day. Used correctly, it helps Google focus its crawling on the pages that actually matter for your rankings.
For WordPress sites specifically, a well-configured robots.txt prevents Googlebot from wasting time on admin pages, login screens, and internal search results — directing that crawl budget toward your content instead.
# Allow all crawlers, block admin User-agent: * Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php # Block bad bots entirely User-agent: AhrefsBot Disallow: / # Sitemap location Sitemap: https://yoursite.com/sitemap.xml
WordPress no crea un robots.txt por defecto. Aquí tienes exactamente lo que debes añadir para un SEO óptimo.
Selecciona la plantilla "WordPress" de arriba, introduce la URL de tu sitio y tu robots.txt se generará al instante con todas las reglas correctas predefinidas.
Descarga el archivo robots.txt generado y súbelo al directorio raíz de tu sitio usando FTP, el Administrador de Archivos de cPanel o el administrador de archivos de tu hosting.
SkySEOManager has a built-in robots.txt editor and validator under its Tools section. Paste your generated content there directly.
Consejo profesional: valida después de cada cambio
After uploading or editing your robots.txt, always run it through our validator above to check for mistakes. A single typo — like Disallow: / — can block your entire site from Google overnight.
These are the most common errors our validator catches — and the ones most likely to quietly kill your Google rankings.
Un Disallow: / bajo User-agent: * blocks Googlebot from your entire site. This is the single most catastrophic robots.txt mistake — and it happens more often than you'd think during site builds.
Deshabilitar /wp-content/ prevents Google from loading your stylesheets and scripts. Google renders pages like a browser — if it can't load CSS/JS, it can't properly evaluate your content for rankings.
No incluir una Sitemap: directiva significa que Google tiene que descubrir tu mapa del sitio solo mediante la presentación en Search Console. Añadirlo a robots.txt es una victoria fácil que ayuda a Googlebot a encontrar todas tus páginas más rápido.
Las rutas de robots.txt distinguen entre mayúsculas y minúsculas en servidores Linux. Disallow: /Admin/ NO bloquea /admin/. Usa siempre las mayúsculas exactas de las rutas URL reales.
Arregla el SEO de todo tu sitio
Once your robots.txt allows Google to crawl your site, make sure every page is optimised. SkySEOManager Pro bulk-generates titles, meta descriptions, and image alt text across your entire WordPress site — powered by Gemini AI.
Disallow: /wp-admin/ evita que los rastreadores desperdicien tu presupuesto de rastreo en páginas de administración que no tienen valor SEO. Sin embargo, asegúrate de agregar Allow: /wp-admin/admin-ajax.php en la siguiente línea para mantener las funciones dependientes de AJAX (como las actualizaciones del carrito de WooCommerce) funcionando correctamente.Gratis para siempre. No se requiere cuenta. Tu robots.txt listo en 30 segundos.