» Рекурсивная загрузка веб-сайтов; оффлайн-браузеры (OfflineExplorer, TeleportPro, HTTrack)

А как насчёт версии УЛЬТРА? Чем она лучше? В "Варезнике" описуха есть...

А может ли какой нить из перечисленныйх оффлайн бровзеров зеркалить сайты и сразу конвертить их в chm файл? Что бы всё в один файлик запихивало, культурно и крассиво?

skaz99
Пока проще htm2chm использовать.
В Offline Explorer3 появилась соответствующая опция экспорта в CHM
Ждём релиза

albel
Мне не понравилась htm2chm, кривовато работает на мой взгляд, да и ахота нажал галочку и получай всё готовым . Будем ждать такого же Offline Explorer, но с перламутровыми пуговицами

skaz99
ежели есть желание, то бета1 доступна на сайте. Линк есть в соотв. топике. Поиграться можно

albel
Бегу бегу Кстати каким прибарахлитса? Ентерпрайзом?

skaz99
меня Pro полностью устраивает.
Он и подешевше будет.
В бетке FREE-лицензия

albel
Это ты про экспорт проекта после закачки говорил? Там я нашол создать CHM файл.

Добавлено
Попробовал Бетку, понравилась и намного больше Телепорта, как создало CHM файлы тоже понравилось в принципе. Приятно, что более гибкая настройка чем в Телепорте и срезает всё в тех рамках, что указано. Телепорт коряво работает в этом плане, срезал помимо указанного сайта (есть канечно вариант, что руки.drv не той версии у меня, хотя выставлял всё как надо) ещё кучу всякого хлама по ссылкам, что неприятно.

skaz99
да, конечно, про экспорт.


Цитата:

как создало CHM файлы тоже понравилось в принципе.

я вот только не увидел содержания проекта. Обычно делал так при помощи htm2chm: карта проекта --> панель содержания. А тут получается вообще без него

Цитата:

А сколько урлов выкачивает Offline Explorer Pro?

Ограничений в нем никаких нет. Некоторые люди мне сообщали, что выкачивали до 3 миллионов адресов в одном проекте.

Добавлено

Цитата:

я вот только не увидел содержания проекта. Обычно делал так при помощи htm2chm: карта проекта --> панель содержания. А тут получается вообще без него

Экспорт в CHM был добавлен почти что "на скорую руку", так что пока никаких "гибкостей" там еще нет. Кому если что нужно - пишите нам на support@metaproducts.com - будем добавлять.

albel

Цитата:

я вот только не увидел содержания проекта. Обычно делал так при помощи htm2chm: карта проекта --> панель содержания. А тут получается вообще без него

Ты имееш в виду справа панель адресов, что то типа автосодержания? Или я что то не то подумал? Я в html2chm тоже такого не припомню или версия старая была или руки подвели, но не создавала она справа панельки со всеми ссылками.

skaz99

Цитата:

Ты имееш в виду справа панель адресов, что то типа автосодержания?

приблизительно.
Скриншот: _http://albel.hotmail.ru/pic.png


Цитата:

Я в html2chm тоже такого не припомню или версия старая была

версия, скорее всего

albel
Симпотично, у меня такого и не получалось, как я не долбался. Ещё вопрос, можно ли както обойти защиту сайтов от скачивания прогами типа Телепор и ОффЛайнЭксплорер? Думаетса мне, что врядли, но всёже?

skaz99

Цитата:

обойти защиту сайтов от скачивания прогами типа Телепор и ОффЛайнЭксплорер

Где-то мелькало сообщение о блокировке скачивания пауками сайта firststeps.ru, но сделать это мне удалось Teleport'ом Ultra с использованием прокси: в A4Proxy я выбрал прокси, которые имеют максимальный уровень анонимности, в частности не "дают течь" по переменным http_via и http_user_agent_via, и кроме того использовал последовательное скачивание (Run sequentially). И ещё для каждого запроса - новый прокси.

Подскажите какой прогой можно скачать сайт построенный полностью на флеш?

Breaker1973
У меня только Offline Explorer. Время от времени качаю флэш-сайты. В большинстве случаев нормально скачивается и работает (последним качнул 2advanced.com - около 30 Мб, куча файлов - нормально). Иногда авторы ставят какие-нибудь рогатки, например, как ни менял настройки - ни одного файла не цепляет с inkspotdigital.com. А бывает весь сайт - в одном большом swf файле и по диалапу надёжнее флэшгетом забрать.

Activium
А поподробнее? Это ты ОффлайнЭксплорер так настроил или чем то другим качал? Я сам сижу за прокси... так что мне врядли светит по анонимкам побегать... но всёже интерестно

skaz99
Подробности понятны при установке программы A4Proxy = Anonymity 4 Proxy (юзай поиск по темам в "варезнике"). В Offline Explorer'е (Teleport'е) просто выставляшь: работать через прокси 127.0.0.1:80, а A4P настраиваешь, как написано выше. Но такие настройки не подойдут, раз ты за прокси. Возможно, что по анонимкам побегать тебе поможет что-нибудь типа HTTPort (есть тема в "Программах"), Http-tunnel, Socks2HTTP, SocksCap.

Цитата:

Симпотично, у меня такого и не получалось, как я не долбался. Ещё вопрос, можно ли както обойти защиту сайтов от скачивания прогами типа Телепор и ОффЛайнЭксплорер? Думаетса мне, что врядли, но всёже?

Для большинства сайтов достаточно выставить одно соединение и случайную задержку между закачками, скажем 3-7 секунд. Это делается в Offline Explorer Pro. Некоторые сайты шифруют содержимое в скриптах. Часть таких сайтов нормально поддерживается ОЕ.

1. Кто нибудь может толком объяснить чем отличаются Teleport Pro ,
Teleport Ultra, Teleport Exec и VLX друг от друга (на русском).
2. Какойнить из оффлайн браузеров поддерживает докачку архивов. Ато когда скачиваю сайт с архивчиками их приходится отдельно REGet-ом качать , а это трудно при большом их колличестве.

У меня стоит Teleport Pro и не жалуюсь. Java -апплеты понимает на ура! Никаких оганичений по объему не встречал. Подключон к нету по локальной сети. Скорость в сети маленькая (когда админ злой, а так большая). Но Teleport пашет прекрасно в этих условиях.

Цитата:

где-то мелькало сообщение о блокировке скачивания пауками сайта firststeps.ru

Их защита срабатывает от количества запросов в промежуток времени, поэтому для OE выставил задержку 10 сек и поставил в один поток - потихоньку качается

Цитата:

Какойнить из оффлайн браузеров поддерживает докачку архивов.

Offline Explorer поддерживает докачку. Если закачка файла обрывается, то программа пытается его докачать. Если докачка не получилась, файл перемещается в конец очереди для скачивания позже. Это сделано специально, чтобы не тормозить загрузку остальных файлов и сайтов если с одним сервером что-то не так.


Добавлено

Цитата:

Кто нибудь может толком объяснить чем отличаются Teleport Pro (TP),
Teleport Ultra (TU), Teleport Exec (TE) и VLX (TV) друг от друга (на русском).

Основное отличие TP от TU и TV простое - количество файлов на проект, которое программа разрешает скачивать. TP - 65,000; TU - 250,000; TV - 40,000,000.

Еще TU (одна из версий) поддерживает закачку с HTTPS сайтов, более гибкие возможности фильтрации разрешенных и запрещенных адресов (regexp), наконец-то познакомили TU с понятием cookie (правда частично - не для всех сайтов). Плюс можно задавать произвольные HTTP запросы и изменять стандартые сообщения при отсутствии файла на диске.

TE сильно отличается от других вариантов тем, что интерфейса у него нет. Это утилита, полностью управляемая из командной строки. Вариант удобен для тех, кому нужно сделать свое произвольное приложение для закачки сайтов.

Можно ли сказать что какаято из вариаций телепорта TP ,TU и TV лучше по всем параметрам? Или каждая для своих целей?

Цитата:

Можно ли сказать что какаято из вариаций телепорта TP ,TU и TV лучше по всем параметрам? Или каждая для своих целей?

По возможностям самая полная - TU/HTTPS.

Так я понимаю что пока OEE лучше TU только тем что у него нет ограничений на количество файлов? В остальном эти проги равны? Никто шапочку не хочет сделать?

Цитата:

Так я понимаю что пока OEE лучше TU только тем что у него нет ограничений на количество файлов? В остальном эти проги равны? Никто шапочку не хочет сделать?

Я бы не сказал, что программы равны. Хоть я и автор Offline Explorer и у меня несколько субъективный взгляд, но мы постарались сделать максимально объективное сравнение оффлайн-браузеров. Оно опубликовано на нашем сайте. Мы постарались поместить в таблицу почти все возможные особенности нескольких программ:

http://www.metaproducts.com/mp/mpProducts_CompetitiveChart.asp?id=17

Извините, что руского варианта нет, но многое должно быть и так понятно. Если будут вопросы - рад буду ответить.

Просьба к профессионалам, которые использовали разные программы - пожалуйста оцените эту таблицу. Если вдруг будут неточности или какие-то неполные данные - дайте мне знать - либо в форуме, либо на support@metaproducts.com - постараемся сразу исправить.

На мой личный взгляд, Offline Explorer (даже Pro) оставляет Teleport-ы далеко позади. У наших продуктов есть немало возможностей, которые уникальны и отсутствуют у конкурентов (они выделены жирным шрифтом).

Цитата:

Мы постарались поместить в таблицу почти все возможные особенности нескольких программ:

http://www.metaproducts.com/mp/mpProducts_CompetitiveChart.asp?id=17

Табличка познавательная.


Цитата:

Извините, что руского варианта нет, но многое должно быть и так понятно. Если будут вопросы - рад буду ответить.

Многое понятно, а многое и нет. Жаль что русские не хотят говорить по русски. Получается что мы становимся придатком какойто Америки. :(

И еще вопросик. Я непонял из таблицы OEE поддерживает докачку архивов, которые попадаются на сайтах или при обрыве (сбое) он будет качать недогруженый архив сначала?

Цитата:

И еще вопросик. Я непонял из таблицы OEE поддерживает докачку архивов, которые попадаются на сайтах или при обрыве (сбое) он будет качать недогруженый архив сначала?

Offline Explorer поддерживает докачку. Если закачка файла обрывается, то программа пытается его докачать. Если докачка не получилась, файл перемещается в конец очереди для скачивания позже. Это сделано специально, чтобы не тормозить загрузку остальных файлов и сайтов если с одним сервером что-то не так.


Цитата:

Многое понятно, а многое и нет.

А что не понятно - я готов все пояснить. Каких-нибудь неточностей в таблице нет?

Добавлено
Новости для пользователей Offline Explorer - Вы можете загрузить файл помощи на русском языке:

http://www.metaproducts.com/download/oehlp_r.zip

Распакуйте файлы из загруженного архива в каталог, где установлен Offline Explorer.

Цитата:

А что не понятно - я готов все пояснить. Каких-нибудь неточностей в таблице нет?

Еслиб табличка была на русском то былоб понятнее. Я думаю что чел знающий Eng хорошо может перевести ее за 3 минуты. Неужели это трудно?

А файл помощи на русском очень кстати спасибо. Вообще я уже пожалуй с телепорта на OEE перейду. Спасибо что написали такой шедевр как OEE.

Я думаю что ссылку на табличку надо бахнуть в шапку. Поскольку это единственный толковый сравнительный анализ. Вот тогда 2х зайцев убъем. И будет возможность неточности в таблице устранить (если они есть) и все сразу будут видеть что лучше.