Mejor forma de scrapear URLS según este patrón¿?

  • Autor Autor Juanlindros
  • Fecha de inicio Fecha de inicio
J

Juanlindros

Beta
¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!
Hola,

Estoy usando Scrapebox para hacer lo siguiente, pero no me da buen resultado:

1) Buscar en Google: site:domain.com
2) Extraer resultados
3) Cargar los resultados y sacar todas los enlaces externos que tenga cada uno de esos resultados
4) Comprobar cuáles dan 404

Esto lo hago con SB y el addon Alive Checker, pero obtengo muy poquitos resultados.

Alguna solución mejor?

Graciaaas
 
Atrás
Arriba