Que significa en robot TXT

Evelyn

Épsilon

Redactor

¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!

• 14 Abr 2013

• #1

Esto aparece en uno de mis blogs

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Según yo, solo el robot de google tiene acceso y los demás robots de los otros buscadores están bloqueados, quiero habilitar las búsquedas para todos los buscadores, cómo debería estar entonces, yo no lo he tocado, así aparece por defecto en herramientas para webmasters de google.

No encontré otro lugar para publicar la pregunta, si no va aquí, pido por favor a un moderador moverla de lugar

 

P

prada

No recomendado

¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!

• 14 Abr 2013

• #2

eso lo coloca blogger por defecto es para que para que por ejemplo no te indexe google la paginacion de tu blog ejemplo Tarot Gratis: Consultas de amor,dinero y trabajo

esto sirve para evitar el contenido duplicado de cara a google, tambien desde blogger te da la opcion de editar el meta index , que eso tambien es util para poner no index a los archives que eso en algun caso tambien puede hacerte contenido duplicado

 

aquiii

Delta

Programador

Verificado por Whatsapp

• 14 Abr 2013

• #3

el robot.txt es como una "nota" que se les deja a los crawlers de los buscadores, cada vez que visitan tu sitio primero ven este archivo y saben que esta permitido explorar, y que no.

básicamente esa es la función

 

diener

Préstamo

Kappa

Verificación en dos pasos activada

• 14 Abr 2013

• #4

Según yo lo entiendo, son las Intrucciones con los permisos que va a tener el buscador de rastrear y explorar el contenido de tu Blog, no sé si va por ahi

 

Evelyn

Épsilon

Redactor

¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!

• 14 Abr 2013

• #5

entonces es normal