¿Como buscar enlaces de páginas que hayan bloqueado robots de moz y hrefs?

  • Autor Autor templaries
  • Fecha de inicio Fecha de inicio
T

templaries

Gamma
Programador
Pues eso.

Si alguien ha bloqueado esos robots, ¿como es posible saber los enlaces o al menos algunos de ellos?
 
Sinceramente ojala no exista 🙂
 
Creo que habría que buscar por los robots.txt en las líneas disallow.
 
Creo que habría que buscar por los robots.txt en las líneas disallow.

Nada.

Hago: filetype:txt disallow "nombre de la web"

Y solo sale la web.

Había pensado que si tengo la cuenta de web master tools, me van a salir los enlaces. Ahí creo que vendrían claro.
 
He conseguido tener acceso a la web y le he puesto un web master tools con mi cuenta de gmail.

He ido a los enlaces hacia el sitio y salen muy pocos.

Esto sí que no lo entiendo, aquí deberían de salir los enlaces reales y salen cuatro.
 
había una web que tenía los footprints si se había hecho por robots.txt, pero ahora no me acuerdo de cual.
 
mmm eso te vendria bien ahora pero despues no, porq no te gustaria que vean tus enlaces. me fui :fatigue:
 
Atrás
Arriba