Como extraigo todas las url de un sitio web (Millones de url)

  • Autor Autor teury
  • Fecha de inicio Fecha de inicio
teury

teury

Eta
Verificación en dos pasos activada
Verificado por Binance
¡Usuario con pocos negocios! ¡Utiliza siempre saldo de Forobeta!
Quisiera saber la forma mas facil de estraer millones de url, de un sitio web, pueden ser url que ya fueron indexadas por google.

El sitio no tiene sitemap.xml
 
¿Te sirvió? Únete a la conversación

Con tu cuenta gratis puedes responder, escribirle al autor por mensaje privado y comprar con Saldo retenido: el pago se libera cuando recibes lo acordado.

Toma 30 segundos · vuelves a este tema al terminar
En caso solo hayas buscado directamente por sitemap.xml, puedes buscar en el robots.txt y con los siguientes:


Yoast SEO/sitemap_index.xml
Google XML Sitemap/xmlsitemap.xml
Rank Math SEO/sitemap_index.xml
All In One SEO/sitemap.xml
 
Atrás
Arriba