¿Dónde debe colocarse robots.txt?

En la raíz de tu dominio, p. ej. https://example.com/robots.txt — no se leerá desde ninguna otra ubicación.

¿Disallow garantiza que una página no aparezca en Google?

No — solo bloquea el rastreo. Usa una etiqueta meta noindex o protección por contraseña para mantener páginas fuera de los resultados por completo.

¿Por qué no se añade Crawl-delay?

Crawl-delay no forma parte de RFC 9309 y Google no lo documenta como regla robots.txt compatible. Configura el rastreo mediante los mecanismos que documente el agente concreto.

Generador de Robots.txt

Genera un archivo robots.txt para controlar qué rastreadores pueden acceder a tu sitio.

Esta herramienta se ejecuta completamente en tu navegador. Tus archivos nunca se suben a un servidor.

Añadir una regla Allow explícita para la raízRutas bloqueadas (una ruta relativa a la raíz por línea)URL absoluta del sitemap (opcional)

User-agent: *
Allow: /

Qué hace esta herramienta

Crea un borrador robots.txt UTF-8 para el grupo universal de agentes. Puede añadir una regla Allow explícita para la raíz, rutas Disallow relativas y validadas, y una ubicación absoluta HTTP o HTTPS del sitemap.

Cómo utilizarla

Escribe una ruta por línea empezando por barra, añade si quieres la URL canónica del sitemap y revisa el texto antes de copiarlo. Publica el archivo de texto en /robots.txt del protocolo, host y puerto exactos que debe controlar.

Ejemplo resuelto

Al bloquear /admin/ y /search?sort= aparecen dos registros Disallow bajo User-agent: *. El valor https://example.com/sitemap.xml se incorpora por separado como registro Sitemap absoluto.

Método de validación

El generador recorta y elimina rutas repetidas, rechaza líneas sin barra inicial, comentarios y caracteres de control, y solo acepta URL de sitemap HTTP o HTTPS sin credenciales ni fragmentos. Las entradas inválidas se notifican y no se copian.

Funcionamiento de las coincidencias

Las reglas distinguen mayúsculas y funcionan como patrones de prefijo. Según RFC 9309 gana la coincidencia Allow o Disallow más específica y, ante igual especificidad, debe preferirse Allow. Comprueba las URL importantes con el rastreador de destino.

Rastreo no equivale a indexación o seguridad

Disallow pide a rastreadores compatibles que no soliciten una ruta; no autentica contenido y la URL puede indexarse por otras señales. Protege datos privados mediante acceso y utiliza una respuesta noindex rastreable cuando quieras excluir una página de la búsqueda.

Privacidad y comprobación

La generación es local y Quiklio no transmite las rutas ni el sitemap. Confirma que el archivo publicado responda HTTP 200 como texto UTF-8 en la raíz y prueba URL representativas con las herramientas del buscador correspondiente; guías de Google y RFC 9309 revisadas en septiembre de 2026.

Preguntas Frecuentes

¿Dónde debe colocarse robots.txt?: En la raíz de tu dominio, p. ej. https://example.com/robots.txt — no se leerá desde ninguna otra ubicación.
¿Disallow garantiza que una página no aparezca en Google?: No — solo bloquea el rastreo. Usa una etiqueta meta noindex o protección por contraseña para mantener páginas fuera de los resultados por completo.
¿Por qué no se añade Crawl-delay?: Crawl-delay no forma parte de RFC 9309 y Google no lo documenta como regla robots.txt compatible. Configura el rastreo mediante los mecanismos que documente el agente concreto.

Generador de Sitemap XML

Convierte una lista de URLs de páginas en un archivo de sitemap XML válido.

Generador de URL Canónica

Genera una etiqueta de enlace canónica limpia para evitar problemas de contenido duplicado.

Generador de Meta Título y Descripción

Escribe etiquetas de título y meta descripción optimizadas para SEO con conteo de caracteres en vivo.