como puedo elimnar urls (varias) para que google no las rastree?

  • Autor Autor benny
  • Fecha de inicio Fecha de inicio
benny

benny

1
Ni
Verificación en dos pasos activada
Suscripción a IA
bueno, justo lo que dice el tema,
google me esta avisando sobre muchas urls internas que no rastrea y las quisiera eliminar en el google webmaster tool,
vi que hay una opción que se llamar "eliminar url" o algo asi, pero te permite mandar solo UNA url a la vez y la verdad que tengo muchas para hacerlo asi... alguna idea de como puedo hacerlo?

saludos
 
Tengo este problema también porque eliminé algunas categorías y tags haciendo limpieza. Me salen 1000 errores a pesar de que esto lo hice hace bastante tiempo.

Me gustaría saber también cómo se puede solucionar.
 
estoy viendo que se hace por medio del robots.txt pero no se como va, si pongo toda la url completa por ejemplo

Disallow: misitio.com/post-a-eliminar

o si va directamente

Disallow: /post-a-eliminar

saludos
 
Para que no las rastree puedes usar el archivo robots.txt con la opción disallow

- - - Actualizado - - -

Yo bloqueaba las urls en un blog que tenia era colocando todas las urls que no quería que aparecieran en google así

Disallow: /http://mipagina.tld/categoria/aqui-elnombre-del-post-o-publicacion/

Y así ya la araña omitía esa url.
 
va una barra "/" antes del http:// ???
 
va una barra "/" antes del http:// ???
Exacto porque esa instrucción ( / ) le indica al robot que lo que esta después de ahí no se debe de rastrear ahora si lo dejas sin el slash, le das permiso al robot de que explore todo.

- - - Actualizado - - -

Hermano para que entienda un poco mas, aquí tienes mas información sobre el uso de robots.txt
 
Exacto porque esa instrucción ( / ) le indica al robot que lo que esta después de ahí no se debe de rastrear ahora si lo dejas sin el slash, le das permiso al robot de que explore todo.

- - - Actualizado - - -

Hermano para que entienda un poco mas, aquí tienes mas información sobre el uso de robots.txt

Gracias 😀
 
perfecto, gracias
 
Atrás
Arriba