Скачать 100 000 картинок с сайта.

[gieffeffe.livejournal.com]

Нужно скачать около 100 000 изображений с сайта.

Всего на сайте 314 категорий, в каждой по 300-400 изображений.

Структура сайта такая:
сайт.ру/номер категории/номер файла.jpg

то есть

сайт.ру/img/1/1.jpg
сайт.ру/img/1/1+.jpg
сайт.ру/img/1/2.jpg
сайт.ру/img/1/2+.jpg
...
сайт.ру/img/314/200.jpg
сайт.ру/img/314/200+.jpg

Прямых ссылок на файлы нет.
Есть ли возможность скачать автоматически?
Спасибо.

Comments

[zhegloff.livejournal.com]

скачать весь сайт телепортом, выдернуть картинки.

З.Ы. Воровать - нехорошо.

[gieffeffe.livejournal.com]

Телепортом не получается, картинки не захватываются.

[langsamer.livejournal.com]

ReGet, к примеру, позволяет генерировать списки со счетчиком:

[gieffeffe.livejournal.com]

Спасибо. Похоже, это то, что нужно. Только получится ли сгенерировать списки вида 1+, 2+ и т.д.?

[langsamer.livejournal.com]

[gieffeffe.livejournal.com]

Отлично. Спасибо еще раз!

[saper-vasja.livejournal.com]

DMaster - добавить группу закачек

[saver-ag.livejournal.com]

wget

[potan.livejournal.com]

for i in `seq 1 314`
do
j=1
while wget сайт.ру/img/$i/$j.jpg
do
wget сайт.ру/img/$i/$j+.jpg
j=`expr 1 + $j`
done
done

[falsche-jade.livejournal.com]

for i in `seq 1 314`; do for j in `seq 1 400`; do wget -c сайт.ру/img/$i/$j.jpg ; wget -c сайт.ру/img/$i/$j+.jpg ; done ; done

вывел на экран, заменив wget -c на echo:
for i in `seq 1 30`; do for j in `seq 1 400`; do echo сайт.ру/img/$i/$j.jpg ; echo сайт.ру/img/$i/$j+.jpg ; done ; done
вроде как работает.
Не понял зачем у вас там while, j=1 и j=`expr 1 + $j`?

wget -c лучше чем голый wget

[potan.livejournal.com]

Я предположил, что в каждой директории разное количество файлов, но нумерация строго последовательна.
while обрабатывает ненайденный файл, "j=" - замена seq в for.

[falsche-jade.livejournal.com]

А если там дырка в списке файлов? Это ведь вебсервер,
скажу больше, это сайт.ру

[potan.livejournal.com]

Тогда задачу надо будет четче ставить. Скажем, сказать что в каждой директории не более 400 картинок.