Выгрузка юрл сайта.

Подскажите прогу которая бы спарсела все урл сайта, которые можно было бы собрать в один тхт файл.

 

В том и проблема, что с карты сайта там же лишних кодов дофига, нужно очищать а это время. Идеально было бы, что бы проги не брали инфу с карты сайта, а брали инфу с самого сайта по юрл.

 

Сяп, буду пробовать, хоть с карты сайта. Но проблема в том, что по непонятной причине карта сайта не видет все урл, особенно фильмы 2013 года, которые добавлялись давно. Пробовал обновлял карту, не помогло, поэтому и ищу прогу, которая выгнузит все урл, может по непонятным причинам УРЛ не виден роботам соответсвенно и в карте их нет.

 

Сяп всем, карту выгрузил sIndexer12, но думаю ее буду через прогу проганять что бы боты зашли по сылкам. Примерно неделя уйдет, что бы карту прогнать, 50% карты на ночь поставил, к утру только половину прогнало, да еще потом и зависло все, ппц.

 

Незнаю, лям не лям, но 887 карта занимает места.

 

887 кб (Kb)