Como extraio todas as URLs de um site (Milhões de URLs)

  • Autor Autor teury
  • Data de início Data de início
Tradução em andamento: em alguns minutos este tópico estará em português. Por enquanto, o conteúdo está no original em espanhol. Ver original
teury

teury

Eta
Verificación en dos pasos activada
Verificado por Binance
Usuário com poucas negociações! Use sempre o saldo do ForoBeta!
Quisiera saber la forma mas facil de estraer millones de url, de un sitio web, pueden ser url que ya fueron indexadas por google.

El sitio no tiene sitemap.xml
 
Foi útil? Participe da conversa

Com sua conta grátis você pode responder, mandar mensagem privada ao autor e comprar com Saldo retido: o pagamento é liberado quando você recebe o combinado.

Continuar com o Google Criar conta com e-mail
Leva 30 segundos · você volta a este tópico ao terminar
En caso solo hayas buscado directamente por sitemap.xml, puedes buscar en el robots.txt y con los siguientes:


Yoast SEO/sitemap_index.xml
Google XML Sitemap/xmlsitemap.xml
Rank Math SEO/sitemap_index.xml
All In One SEO/sitemap.xml
 
Você precisa estar logado ou cadastrado para responder aqui.

Tópicos similares

SpecterWorld
Como redireciono de .net para .com todas as URLs?
Respostas
8
Visitas
254
Manuel275
M
Don Michi
  • Trancado
Sitemap não conta todas as URL
Respostas
1
Visitas
65
Euritos
Euritos
seoargentina
Seo - Url do seu site com e sem "/" no final
Respostas
4
Visitas
345
BURGAKIKE
BURGAKIKE
Alpi
CPA / Afiliados O Facebook bloqueia todas as URLs de CPA da MOBIDEA?
Respostas
8
Visitas
991
rodrigomx
rodrigomx
knoPienses
  • Trancado
Ofereço-me Convierto todas las imágenes de tu URL a formato Webp por solo 1.2$, mejora tu velocidad de carga!
Respostas
0
Visitas
148
knoPienses
knoPienses
Voltar
Topo