Чем собрать все внутренние ссылки сайта
Ищу софт который сможет собрать все внутренние ссылки с сайта, сайт огромный на нем порядка 100-тысяч страниц(индекс Google) их всех нужно собрать в txt файл построчно, WonderWeb SiteMapGenerator - останавливается на 3000-4000 тысячах и дальше не собирает