Descrição
Alvos Web podem ser rastreados sistematicamente para descobrir páginas, links e área de superfície da aplicação.
É útil para testes de segurança autorizados, inventário e análise de aplicações Web. Crawling pode sobrecarregar servidores e coletar URLs sensíveis, então use apenas em sistemas que você tem permissão para testar e respeite limites de taxa.