Optimización de Robots.txt

  • Autor Autor blog
  • Fecha de inicio Fecha de inicio
blog

blog

Mi
Verificación en dos pasos activada
¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!
La mejor configuración para un Robots.txt
 
no hace falta, si la web esta bien estructurada no la necesitas en absoluto
 
Osea no es necesario?
según google no, ahora si es una web muy grande con URLS y subdirectorios mas complejos seguramente seria recomendable ya que el robot de google lo tendrá mas fácil, pero si es un blog de wordpress no lo veo necesario
 
Si tienes problemas de ancho de banda puedes bloquear buscadores rusos y esas cosas. También puede poner el enlace a tu sitemap.
 
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: tu mapa de sitio
 
y mira lo que usan grandes sitios


Gracias
 
Atrás
Arriba