Screaming Frog SEO Spider - это реально крутая программа для полного аудита сайта, стоит чуть больше 12 тысяч рублей. В общем после запуска можно указать нужный Интернет адрес, можно допустим только раздел просканировать, далее жмем кнопку Старт и ждем завершения процесса, на выходе получаем полны