Que tal ven mi Robots.txt ?

Jxit3 · 18 Jul 2013

Que tal lo ven?, estará bien o le hace falta algo?, o estoy bloqueando cosas sin darme cuenta o.o?

Insertar CODE, HTML o PHP:

User-agent: Mediapartners-Google
Allow: /
User-agent: b2w/0.1
Disallow: /
User-agent: BackDoorBot/1.0
Disallow: /
User-agent: BlowFish/1.0
Disallow: /
User-agent: Bookmark search tool
Disallow: /
User-agent: *
Disallow: /wp-
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-content/cache/
Disallow: /cgi-bin/
Disallow: /stats/
Disallow: /logs/
Allow: /wp-content/uploads/
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*?
Disallow: /search
Disallow: /?s=
Disallow: /page*/
Disallow: /comments/
Disallow: /archives/
Disallow: /author/
Disallow: /tag/
Disallow: /feed*/
Disallow: /trackback*/
Disallow: /attachment*/
Disallow: /feed
Disallow: /comments/feed
Allow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Sitemap: http://www.misitio.com/sitemap.xml

rodrileo · 18 Jul 2013

perdonen el offtopic, pero para que sirve el robots.txt?
leo y leo sobre robots.txt

pero no entiendo :/

Donotopen · 18 Jul 2013

rodrileo dijo:
perdonen el offtopic, pero para que sirve el robots.txt?
leo y leo sobre robots.txt

pero no entiendo :/

Es un archivo de texto que sirve para bloquear o permitir paginas de tu sitio web, para que no sean indexadas por los buscadores.

rodrileo · 18 Jul 2013

Donotopen dijo:
Es un archivo de texto que sirve para bloquear o permitir paginas de tu sitio web, para que no sean indexadas por los buscadores.

mas claro que el agua no hay ,
muchas gracias

toritoreshulong · 18 Jul 2013

Veo, que alguna imágenes no dejarás que te las indexe google y con eso perderás muchísimo tráfico :

Pero como se dice, cada maestrillo tiene su librillo :greedy_dollars:

Jxit3 · 18 Jul 2013

toritoreshulong dijo:
Veo, que alguna imágenes no dejarás que te las indexe google y con eso perderás muchísimo tráfico :

Pero como se dice, cada maestrillo tiene su librillo :greedy_dollars:

cuales imágenes? xd si mis imágenes están en /wp-content/uploads/ y esta como allow xd, te refieres a las imágenes de la plantilla?

toritoreshulong · 18 Jul 2013

Nada beta, pensé que lo tenias en disallow !

Perfecto entonces, referente a imágenes de plantilla ... Yo solo indexo el logo y tampoco me trae visitas, no hay de que preocuparse entonces xd

Insertar CODE, HTML o PHP:

Allow: /wp-content/uploads/

Mariano182 · 18 Jul 2013

Lo veo perfecto!
Yo lo tengo similar pero creo que te lo voy a copiar :topsy_turvy:

Jxit3 · 19 Jul 2013

Mariano182 dijo:
Lo veo perfecto!
Yo lo tengo similar pero creo que te lo voy a copiar :topsy_turvy:

copialo con confianza xD, yo lo arme sacando de varias partes xD y buscando info xD, solo quiero estar seguro de que todo ande correcto :encouragement:

usforo · 19 Jul 2013

Aquí, otro que te lo va a copiar

.

Mariano182 · 19 Jul 2013

Jxit3 dijo:
copialo con confianza xD, yo lo arme sacando de varias partes xD y buscando info xD, solo quiero estar seguro de que todo ande correcto :encouragement:

Genial! :encouragement: Yo lo tengo configurado con la ayuda de Ciclkow

garlock · 19 Jul 2013

ya lo pongo en mi blog, me parecio muy completo

---------- Post agregado el 19-jul-2013 hora: 16:28 ----------

Mariano182 dijo:
Genial! :encouragement: Yo lo tengo configurado con la ayuda de Ciclkow

es parecido a este? pasalo

Mariano182 · 19 Jul 2013

garlock dijo:
ya lo pongo en mi blog, me parecio muy completo

---------- Post agregado el 19-jul-2013 hora: 16:28 ----------

es parecido a este? pasalo

Así lo tengo yo:

PHP:

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/

Allow: /feed/$
Disallow: /feed
Disallow: /comments/feed
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /*/page/*

garlock · 19 Jul 2013

Mariano182 dijo:

Así lo tengo yo:

PHP:

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/

Allow: /feed/$
Disallow: /feed
Disallow: /comments/feed
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /*/page/*

me agrada mas este porque si indexa los tags

Mariano182 · 19 Jul 2013

garlock dijo:
me agrada mas este porque si indexa los tags

Si, pero a los tags le puse "noindex" desde WP :welcoming:

garlock · 19 Jul 2013

Mariano182 dijo:
Si, pero a los tags le puse "noindex" desde WP :welcoming:

si, pero es cuando le pones no index desde wordpress para que ponerlo desde robots

Mariano182 · 19 Jul 2013

garlock dijo:
si, pero es cuando le pones no index desde wordpress para que ponerlo desde robots

Claro, por eso. No quiero que se indexen los tags