¿Mi robot.txt está bien estructurado?

  • Autor Autor Gless
  • Fecha de inicio Fecha de inicio
G

Gless

Beta
Redactor
¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!
Quisiera que me dijeran si así esta bien estructurado un robot.txt o en que me e equivocado?


Sitemap: nnnnnn.com
Sitemap: nnnnn.com
Sitemap: 404 - Not Found
Sitemap: http://www.nnn.com/sitemap-video.xml


User-agent: Mediapartners-Google
Allow: /

User-agent: Googlebot

Allow: /wp-content/uploads/
Disallow: /wp-
Disallow: /*?
Disallow: /search/
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Disallow: /feed/
Disallow: /rss/
Disallow: /forums/
Disallow: /cgi-bin/
Disallow: /stats/
Disallow: /logs/
Disallow: /page*/
Disallow: /tag/
Disallow: /comments/
Disallow: /archives/
Disallow: /author/
Disallow: /comments/feed
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /feed/$
Disallow: /*/*/feed/$
Disallow: */feed/
Disallow: /*.wmv$
Disallow: /*.avi$
Disallow: /*.cgi$
Disallow: /attachment*/
 
Creo que el:


Sitemap: nnnnnn.com
Sitemap: nnnnn.com
Sitemap: 404 - Not Found

No debe de ir, ya que ese dominio no existe y Sitemap es para indicar donde esta tu archivo xml de sitemap
 
Yo no le pondría robots, pero eso depende de cada uno 😛7:
 
Ciao

...
Sitemap: nnnnnn.com
Sitemap: nnnnn.com
Sitemap: 404 - Not Found
...

Estas tres no sirven porque los formatos no son leidos por los robots, los unicos formatos utiles son: .xml y .txt
 
Con el comienzo de tu sitemap, que es exactamente lo que querias conseguir?
Saludos.

Enviado desde mi GT-P5100 usando Tapatalk 2
 
Última edición por un moderador:
Atrás
Arriba