» WebTransporter

WebTransporter - это офлайн-браузер российских разработчиков. Программа предназначена скачивания на жесткий диск вашего компьютера веб-сайтов циликом или частично, для последующей работы с информацией в режиме off-line.


Добавлено:
Оффициальный сайт программы: http://www.realsofts.com/ru

Ссылка для закачки программы: http://www.realsofts.com/eng/wt/download/wt_setup.exe
Размер дистрибутива 1,65Мб
Последняя версия 3.27 от 30 января 2005 года.

Да юзал я эту программу, правда версию 3.12. Не плохо, особенно после древнего телепорта. Ща новую версию скачаю гляну.

Добавлено:
Ну блин, наконец-то вы в дистрибутив включили русский хелп, а то в английском я не шару а русский с сайта приходилось качать - спасибо.

Да, в новую версию мы включили и русскую и английскую справку - оптимально сжали картинки, что позволило не увеличивая размер дистрибутива добавить еще одну справку. В новой версии помимо этого еще довольно много изменений:

- Усовершенствован интерфейс главного окна
- Ускорен процесс открытия проекта
- Исправлена ошибка во встроенном браузере при использовании кнопок "Вперед" и "Назад"
- Переработан принцип экспортирования проектов
- Добавлена возможность быстрой генерации ссылок на нумерованные документы с использованием двух счетчиков (цифрового и буквенного) с различными режимами их работы
- Исправлена ошибка, возникающая при работе в режиме закачки глубже начального URL
- Добавлены анализаторы каскадных таблиц CSS и файлов Macromedia Flash (.SWF)
- Расширены возможности анализатора HTML-документов
- Исправлены ошибки, возникающие при постановке ссылок в очередь
- Диспетчер очереди перенесен в отдельное окно, его функции расширены
- Добавлена возможность создания списка игнорируемых при закачке ссылок
- Теперь минимальный и максимальный размер документа можно задавать для каждой группы независимо (Текст, Изображения, Видео, Аудио)
- Добавлена возможность редактирования списка файлов подверженных анализу (путем редактирования файла parser.db)
- Исправлена ошибка, возникающая при локализации cgi-файлов
- Исправлена ошибка, возникающая при анализе тэга background

>Pestisid я думаю вы оцените разницу между версией 3.27 и3.12

Здравствуйте Леонид, спасибо вам за программу, работаю с ней давно еще со времен когда она iWorm называлась, кстати почему вы название сменили?

И вопрос по существу, в версии 3.27 я так понял появился второй счетчик для генерации нумерованных ссылок, поясните как им пользоваться, а то в справке мало написано.

Название пришлось сменить в маркетинговых целях, "WebTransporter" более точно отображает суть программы.

На счет счетчиков. Теперь для генерации сложных нумерованных документов теперь можно применять два счетчика одновременно. В URL нужно вставить эти счетчики в виде символов #1 и #2 эти символы будут заменены цифрами или буквами (в зависимости от настроект данного счетчика - цифровой он или буквенный). Далее необходимо указать последовательность срабатывания счетчиков, если одновременно то счет будет идти так (для случая если оба счетчика имеют начальное и конечное состояние соответственно 1 и 5 с шагом 1):

1-й счетчик 2-й счетчик
1 1
2 2
3 3
4 4
5 5

если скажем у второго счетчика конечное состояние указано 7, то результат будет такой:

1-й счетчик 2-й счетчик
1 1
2 2
3 3
4 4
5 5
5 6
5 7

Это что касается одновременной работы, если же выбрать режим "один такт первого, потом полный цикл второго" то результат будет такой (для случая если оба счетчика имеют начальное и конечное состояние соответственно 1 и 3 с шагом 1)
1-й счетчик 2-й счетчик
1 1
1 2
1 3
2 1
2 2
2 3
3 1
3 2
3 3

А как программу зарегистрировать? Я кряк так и не нашел

С кряками у нас напряженка ну нет их и все тут, программа не использует ключи активации в том виде в котором все привыкли вот и кряков сделать не удается.

Зарегистрироваться можно тут: http://www.realsofts.com/ru/purchase.htm, программа для жителей СНГ стоит 180 рублей

Ок, понял спасибо. В окне регистрации написано что в течении 6 месяцев с момента покупки программы вы будете предоставлять бесплатыне обновления, а что потом и может ли так случиться что за эти пол года вы вообще ни одного обновления не выпустите?

Цитата:

В окне регистрации написано что в течении 6 месяцев с момента покупки программы вы будете предоставлять бесплатыне обновления, а что потом

А потом мы будем предоставлять вам новые версии со скидкой 50%. Обновления у нас выходят постоянно с периодичностью 1,5-2 месяца.

Кстати, внимание уважаемые пользователи. Уже готова новая верия программы WebTransporter 3.30, мы приглашаем всех желающих присоединиться к ее тестированию. Все тестеры по окончании тестирования и выхода финального релиза получат бесплатные регистрации. Для получения более подробной информации пишите мне: kofman[@]vlink.ru

Рад за вас! А что будет в новой версии? 1.5-2 месяца это хороший темп для выпуска новых версий. Его не очень просто выдерживать. У вас, похоже, команда разработчиков, да?

Да, нас три человека, и темп мы намерены держать. Не хотите нашу программу внести в свою ставнительную таблицу?

ОК. Для упрощения работы, Вы бы не могли мне дать данные, какие из фич в таблице продукт поддерживает? Спасибо!

Не вопрос, вот список функций версии 3.27

Стоимость одной лицензии 180руб.

Поддержка технологий Интернет
Анализ файлов HTML ДА
Анализ фрэймов ДА
Исследование HTML-форм НЕТ
Поддержка Cookies ДА
Исследование и анализ
ссылок Java-скриптов ДА
Обработка вычислений в
Java-скриптах для поиска
большего количества ссылок НЕТ
Анализ Java-апплетов ДА
Анализ Flash ДА
Анализ XML ДА
Анализ файлов
QuickTime (.MOV) НЕТ
Анализ Macromedia
Director НЕТ
Анализ VRML НЕТ
Поддержка WAP-сайтов НЕТ
Анализ потоковых
файлов ASX/NSC/RAM/
SMIL/RealText НЕТ
Анализ файлов PDF НЕТ
Анализ списков
воспроизведения MP3 НЕТ
Анализ файлов каскадных
таблиц стилей (CSS) ДА

Управление Проектом
Одновременная загрузка
нескольких Проектов НЕТ
Вложенные Папки для
организации Проектов НЕТ
Операции на множестве выбранных
Проектов/Папок НЕТ
Различные шаблоны
конфигураций Проектов НЕТ
Мастер создания
Нового Проекта ДА
Undo delete operation НЕТ
Импорт из MS IE MS IE
Избранное/Закладки Netscape,
Mozilla и FireFox/Opera Hotlists
Поиск по ключевым словам в
загруженных Web-сайтах НЕТ
Подсветка найденных слов
при обзоре Web-страниц НЕТ
Резервное копирование и
восстановление Проектов ДА
Статистика загрузки ДА
Печать загруженных
Web-сайтов ДА
Планировщик ДА
Joliet/8+3 - поддержка
совместимости имён файлов НЕТ
Экпорт в формат MHT НЕТ
Экспорт в кэш MS IE НЕТ
Экспорт в формат CHM
(HTML Help) ДА
Экспорт в EXE файлы для
автономного просмотра НЕТ
Экспорт без подкаталогов НЕТ
Возможность обновления
Проекта с удаленными файлами НЕТ
Настройки Проекта ДА
Несколько адресов URL в
Проекте НЕТ
Подсветка синтаксиса URL
и URL Macros НЕТ
Описание Проекта ДА
Различные режимы
обновления Проекта НЕТ
Фильтрация URL по ключевым
словам НЕТ
Фильтр загружаемых страниц
по ключевым словам в
их содержании НЕТ
Ограничение загрузок по
времени/количеству файлов/ ДА/ДА/ДА
общему размеру
Ограничение загрузки
некоторых файлов по их размеру ДА
Загрузка больших файлов
внешними программами НЕТ
Фильтр изображений по их
размеру (в пикселях) НЕТ
Проверка целостности
загруженных файлов HTML
Способность обходить
ошибки Web-сайта НЕТ
Исследование всех возможных
подкаталогов НЕТ
Различные варианты
преобразования ссылок ДА
Способность сохранения
старых копий Web-страниц НЕТ
Произвольные POST-запросы НЕТ
Произвольные Cookies НЕТ
Произвольный Referer ДА
Автоматический Экспорт НЕТ
Настройка произвольного
прокси-сервера для загрузки
Проекта ДА
Способность сбора адресов
E-mail ДА
Макросы адресов URL ДА
Исследование карт
изображений на сервере НЕТ
Настройка отдельного
Уровня для внешних ссылок НЕТ
Способность защиты
Проектов паролем НЕТ

Пользовательский интерфейс
Настраиваемая панель
инструментов НЕТ
Internal browser ДА
Встроенный редактор с
подсветкой синтаксиса НЕТ
Встроенный браузер с
закладками (множество страниц
в одном окне) НЕТ
Управление расписанием ДА
Последовательность запуска НЕТ
Карта Проекта НЕТ
Управление очередью загрузки ДА
Окно сообщений ДА
Поддержка многоязычности
пользовательского интерфейса ДА
Поддержка внешних
браузеров/инструментов ДА
Минимизация в системный трей ДА
Плавающее окошко НЕТ
Сообщение о точной причине
отсутствия файла при просмотре НЕТ

Загрузка
Управление скоростью загрузки НЕТ
Настройка количества
соединений 1-15
Поддержка прокси-серверов ДА
FTP-загрузки НЕТ
FILE:// -загрузки НЕТ
HTTPS-загрузки НЕТ
Потоковые загрузки
(RTSP, PNM и MMS) НЕТ
Отдельные очереди загрузки
в каждом Проекте НЕТ
Защищённые паролем сайты ДА
Способность выполнения
указаний Robot Exclusion
Standard НЕТ
Защита сервера от перегрузок НЕТ
Пределы загрузочной сессии 100 000 файлов
Временная пауза загрузки НЕТ
Сохранение очереди загрузки
на диск для продолжения позже НЕТ
Случайная пауза между
загрузками файлов
(для моделирования просмотра
страниц человеком вручную) НЕТ
Сообщение об окончании
загрузки Только звук
Загрузка только страниц
без картинок и файлов
для построения карты сайта НЕТ
Расположение загруженных
файлов Файлы в каталоге

Другие возможности
Автодозвон при начале
загрузки ДА
Отключение модемного
соединения после завершения
загрузок ДА
Выключение компьютера
после завершения загрузок ДА
Встроенный HTTP-сервер
для упрощения
offline-просмотра НЕТ
Автосохранение обновлений
на диск ДА
Предотвращение
переполнения каталогов НЕТ
Способность очистки на
диске неиспользуемых
страниц/сайтов НЕТ
Отслеживание содержимого
буфера обмена Windows ДА
Перетаскивание
(drag-and-drop) ссылок из
браузеров НЕТ
Возможность Извлечения Данных НЕТ
Поддержка OLE-автоматизации НЕТ
Возможность сохранения
страниц/файлов НЕТ

Спасибо! На следующей неделе буду добавлять.

У меня есть ряд вопросов.


Цитата:

Поддержка Cookies ДА

Откуда берутся cookie при начале закачки файла? Можно ли зайти на сайт до скачивания, чтобы установить сессионную куку?


Цитата:

Анализ Java-апплетов ДА

Берутся ли ссылки на другие классы и файлы, находящиеся внутри .class файлов?


Цитата:

Анализ Flash ДА
Анализ XML ДА
Анализ файлов каскадных
таблиц стилей (CSS) ДА

То-же самое - извлекаются ли ссылки из этих файлов. Если да, то меняются ли ссылки для оффлайн-просмотра?


Цитата:

Печать загруженных
Web-сайтов ДА

Имеется в виду, что есть ли возможность в программе автоматически напечатать все загруженные страницы проекта. Есть такое?


Цитата:

Экспорт в формат CHM
(HTML Help) ДА

Требуется ли для этого установить другие программы, HTML Help compiler (MS) или другие?


Цитата:

Произвольный Referer ДА

Что-то я не нашел такой возможности в настройках проекта.


Цитата:

Макросы адресов URL ДА

Тоже не могу найти. Как они работают?


Цитата:

Отслеживание содержимого
буфера обмена Windows ДА

У меня программа и MS IE зависли после того, как я скопировал адрес в MS IE.

Вот ссылка на обновленную таблицу сравнения:

http://www.metaproducts.com/mp/chart.asp?chart_id=1&lng=2&id=2&links=1

- На счет куков, при закачке куки _принимаются_ что во многих случаях обеспечивает бесприпятственное скачивание информации, чуть позже будет реализована возможность отдавать куки при запросе сервера

- На счет Java - программа умеет анализировать классы, но признаться делает это весьма слабо

- Из документов Flash, XML и CSS ссылки извлекаются легко, для офлайн просмотра они также изменяются (кроме Flash-документов)

- Печататься будут те страницы которые выбрал пользователь во время просмотра во встроенном браузере

- CHM-документы компилируются с помошью библиотек которые можно скачать с нашего сайта (если программа их не находит на диске, то отправляет пользователя в сеть), в новой версии 3.30 мы планируем эти библиотеки поставлять сразу с программой

- Referer можно указать при скачивании документов по заранее заданным ссылкам

- Макросы у нас реализованы не так как в OE, при создании списка документов есть возможность применить два счетчика комбинируя их работу и выбирая тип (цифровой/символьный)

- Зависания программы после копирования в буфер адреса из IE вообщето не наблюдались... только что сам проверил, программа ловит ссылки скопированные и из IE и из Оперы, главоное что бы в них были символы http или www

За размещение программы в таблице – спасибо.
Только программа все таки умеет следить за буфером обмена, кол-во потоков для скачивания – максимально 15, на счет различных режимов обновления проекта, при закачке документов по известным ссылкам реализована проверка обновлений, обычные же проекты можно запускать не только для докачки с момента предыдущего останова, но и в режиме докачки ранее не докачанных документов.


Я кое что хотел уточнить по таблице. Для чего нужно исследовать карты изображений на сервере? Это когда с одной картинки делается много ссылок, так в чем там сложность?
Мне не совсем понятен пункт «Исследование всех возможных подкаталогов», в каком смысле всех возможных, делается перебор всех возможных названий каталогов и программа пытается в них зайти? Я думал вся информация должна получаться в результате анализа html-документа, там все каталоги и указаны. «Способность обходить ошибки Web-сайта» - а можно пример?

Цитата:

- CHM-документы компилируются с помошью библиотек которые можно скачать с нашего сайта (если программа их не находит на диске, то отправляет пользователя в сеть), в новой версии 3.30 мы планируем эти библиотеки поставлять сразу с программой

OK. Исправил в таблице.


Цитата:

- Referer можно указать при скачивании документов по заранее заданным ссылкам

А как это можно сделать?


Цитата:

- Макросы у нас реализованы не так как в OE, при создании списка документов есть возможность применить два счетчика комбинируя их работу и выбирая тип (цифровой/символьный)

В ОЕ это сделано как {:1..10}. В Вашей программе я не нашел описания как это сделать. Очень жалко, что нет кнопки Help в окнах настроек прогпаммы и проекта с объяснениями каждого элемента.



Добавлено:

Цитата:

- Зависания программы после копирования в буфер адреса из IE вообщето не наблюдались... только что сам проверил, программа ловит ссылки скопированные и из IE и из Оперы, главоное что бы в них были символы http или www

У меня это воспроизводится каждый раз в Win 98 SE. Если открыта программа (как с загруженным проектом, так и без проекта), копирование ссылки в MS IE вызывает экран WebTransporter, который ни на что не реагирует и MS IE 6.0 тоже висит.


Цитата:

кол-во потоков для скачивания – максимально 15

Поправил.


Цитата:

на счет различных режимов обновления проекта, при закачке документов по известным ссылкам реализована проверка обновлений, обычные же проекты можно запускать не только для докачки с момента предыдущего останова, но и в режиме докачки ранее не докачанных документов.

А где это устанавливается?


Цитата:

Для чего нужно исследовать карты изображений на сервере? Это когда с одной картинки делается много ссылок, так в чем там сложность?

Карты бывают двух типов - одни объявлены в HTML с координатами, какой кусок соответствует какой-то ссылке. А бывает, что просто на сервер передаются координаты клика на картинке и он сам уже выдает HTML в зависимости от этого. Такой вариант только пинговать удается.


Цитата:

Мне не совсем понятен пункт «Исследование всех возможных подкаталогов», в каком смысле всех возможных, делается перебор всех возможных названий каталогов и программа пытается в них зайти?

Именно так. Используется редко, но просили сделать.


Цитата:

«Способность обходить ошибки Web-сайта» - а можно пример?

Это чтобы можно было скачивать документы даже помеченные как 404, 500 и т.д.


Цитата:

За размещение программы в таблице – спасибо.

Пожалуйста!

Что не отвечаете?

- На счет Referer`а - он очень просто задается при скачивании документов по известным ссылкам - начните создание такого проекта и увидите это поле. Мы это сделали для тех кто любит закачивать картинки а там обячно referer проверяется, однако для скачивания сайта мне кажется этот параметр не важен... если я ошибаюсь приведите пожалуйста пример сайтов с которых не получается что-то скачать если при запросе referer не указан

- Макросы у нас реализованы с помошью комбинации счетчиков, в том же режиме проекта для закачки документов по известным ссылкам, причем результат работы счетчиков виден сразу


Цитата:

Цитата:на счет различных режимов обновления проекта, при закачке документов по известным ссылкам реализована проверка обновлений, обычные же проекты можно запускать не только для докачки с момента предыдущего останова, но и в режиме докачки ранее не докачанных документов.


А где это устанавливается?

Из выпдабщего менб в главном окне, пункт "Управление" - "Запустить проект с докачкой недокачанных документов"

OK. Поправил таблицу.

Кстати, по таблице - никакие фичи не надо туда добавить, на Ваш взгляд?

А кстати, где информация о новой 3.3 версии - что там нового?

Уже версия 3.42, а что именно поменяли даже прочитать негде. Как же я таблицу сравнения буду обновлять?