Usamos cookies para medir audiência e melhorar sua experiência. Você pode aceitar ou recusar a qualquer momento. Veja sobre o iMasters.
Salve galera.
Alguem sabe uma maneira de listar todas as urls de um site:
Ex: se no google eu utilizar a técnica:
site:http://meusite.com.br/
Ele vai listar varias paginas indexadas.
Queria isto de uma maneira mais agressiva / automatizada.
Seria para entender melhor a estrutura do site.
Abraços.
Encontrei 2 aqui:
Tem esse site online (até 500 URLS)
https://www.xml-sitemaps.com/crawl.html
Agora se a ideia é ser mais agressivo:
http://home.snafu.de/tilman/xenulink.html#Download
Desde a criação do tópico foi listado +3.000 URLS,
Legal q tem a opção de 'exportar' para tabulação assim sendo possivel trabalhar com expressão regular ou via Excel/Calc.
Abraços.