Generador de meta tags
Crea etiquetas de título, descripción y redes sociales.
SEO / Web
Generador robots.txt
Procesamiento localQué es generador robots.txt
El archivo robots.txt indica a los rastreadores de los buscadores qué partes de tu web pueden visitar. Este generador crea el archivo a partir de las rutas que permitas o bloquees, e incluye la dirección de tu sitemap.
Debe guardarse en la raíz del dominio, por ejemplo tusitio.com/robots.txt.
Cómo utilizar generador robots.txt
- Elige el user-agent (* para todos los rastreadores).
- Escribe una ruta por línea en Allow y en Disallow.
- Añade la URL del sitemap, copia el resultado y súbelo como robots.txt a la raíz de tu web.
Un ejemplo práctico
User-agent: * y Disallow: /privado/ limitan el rastreo de esa ruta.
Para qué te sirve
- Evitar que Google rastree la zona de administración o los resultados de búsqueda internos.
- Indicar a los buscadores dónde está tu sitemap.
- Bloquear el rastreo de una sección en construcción.
Preguntas frecuentes
¿Bloquear una ruta la saca de Google?
No necesariamente. Si otras webs enlazan a esa página, puede seguir apareciendo. Para que no se indexe, usa la etiqueta meta robots noindex y deja que Google pueda rastrearla.
¿Protege información privada?
No. El archivo es público y los rastreadores maliciosos lo ignoran. Protege las zonas privadas con contraseña.
¿Se guardan mis datos?
Esta herramienta procesa la información en tu navegador. No enviamos tus entradas ni archivos a un servidor.
