RU/2: Форум. Общение пользователей и разработчиков OS/2 (eCS). : Сграбить сайт


Список сообщений | Написать новое | Ответить на сообщение | Домой Поиск:
Предыдущее сообщение | Следующее сообщение
From : DmiG
To : Konstantin Kozlov
Subj : Сграбить сайт

> > > Чем сабж?
> > > Сайт какой-то хитрый - SSLURP его не берёт. ВИндовый Teleport - чуть лучше, но тоже, не то. Посоветуйте нормальный грабер.
> >
> > НОРМАЛЬНЫЙ: соответствующий чему-л. общепринятому или привычному, положенному.
> >
> > Соответственно, нормальный грабер -- это Teleport. А тебе нужен особый.
> Я считаю, что если все веб-браузеры нормально отображают HTML-ину, а телепорт не может её скачать, то он не совсем нормальный.

Попробуй "start wget -r -L -p -k -nc <адрес заглавной страницы>" раза 3-4. Я так сайты таскаю. Ключик -nc - чтобы несколько wgetов друг другу не мешали. Если есть какие не нужные файлы, можно добавить --reject=zip,rar,avi,wma,итд. Регистр ключей имеет значение.

Mon 17 Mar 2003 10:21 Mozilla/5.0 (Windows; U; WinNT4.0; en-US; rv:1.3b) Gecko/200




Programmed by Dmitri Maximovich, Dmitry I. Platonoff, Eugen Kuleshov.
25.09.99 (c) 1999, RU/2. All rights reserved.
Rewritten by Dmitry Ban. All rights ignored.