» Offline Explorer

Цитата:

Только что попробовал этот адрес с уровнем=1 - все нормально скачивается, но у меня нет прокси. Может именно в прокси дело?

Цитата:

А с Offline Explorer-ом такой проблемы нет?

В обоих продуктах одинаковый код для скачивания файлов, так что если с OE все нормально, то и MD можно настроить.

OlegChernavin

для работы через ISA Server Windows Sockets приложений используется Microsoft Firewall Client. Закачка с FTP сайтов без этого Firewall Client не работает.
Другие приложения, в том числе Reget deluxe нормально определяют правильные настройки и закачивают.
Вот только что разобрался, оказывается нужно было в настройках FTP Offline Explorer поставить «нет proxy» и PASV режим. Согласитесь, что работая через Proxy server не сразу догадаешься о такой настройке.



Добавлено:
Раз здесь упоминается Mass Downloader как примочка к Offline Explorer я хочу добавить:
о проблеме совместимости MetaProducts Mass Downloader и reget deluxe я написал в форум по Mass Downloader.
Кратко: 1) вместе они не хотят работать и 2) после удалении Mass Downloader также удаляются ветки реестра при которых нормально работает reget deluxe.


Добавлено:

Цитата:

ftp://ftp.kaspersky.ru/bases/av/avc/i386/

почему-то антивирусные базы, закачанные при помощи Offline Explorer с этого сайта не подходят для обновления KAV.
Те же базы и в то же время закачанные с этого сайта другой программой (например плагином FAR FTP) нормально обновляют.
Что Offline Explorer как-то изменяет файлы при закачке или некоректно определяет изменившиеся? В проекте Offline Explorer установлено «проверять целостность файлов».

OlegChernavin

Цитата:

А что именно неполностью закачалось? Правый фрейм?

да, и правый, где обновляются котировки с определенной периодичностью, и левый, где на NYSE, к примеру, меню сайта. на NASDAQ аналогично. в принципе я время от времени сталкиваюсь с тем, что ОЕ не загружает страницу один к одному так, как я вижу ее в IE в онлайне. что-нибудь, да не закачивает иногда. в принципе по этим 2-м ссылкам я всегда проверяю новые версии ОЕ на этот счет. попробуйте исправить, пожалуйста. в идеале хотелось бы, чтобы ОЕ после закачивания страницы позволял мне просматривать ее в оффлайне один к одному как и в браузере в онлайне.

Цитата:

для работы через ISA Server Windows Sockets приложений используется Microsoft Firewall Client. Закачка с FTP сайтов без этого Firewall Client не работает.
Другие приложения, в том числе Reget deluxe нормально определяют правильные настройки и закачивают.
Вот только что разобрался, оказывается нужно было в настройках FTP Offline Explorer поставить «нет proxy» и PASV режим. Согласитесь, что работая через Proxy server не сразу догадаешься о такой настройке.

Да уж, странно. Я думаю, что PASV надо бы включить по умолчанию.


Цитата:

Раз здесь упоминается Mass Downloader как примочка к Offline Explorer я хочу добавить:
о проблеме совместимости MetaProducts Mass Downloader и reget deluxe я написал в форум по Mass Downloader.
Кратко: 1) вместе они не хотят работать и 2) после удалении Mass Downloader также удаляются ветки реестра при которых нормально работает reget deluxe.

А можно это в форуме по Mass Downloader написать?


Цитата:

да, и правый, где обновляются котировки с определенной периодичностью, и левый, где на NYSE, к примеру, меню сайта. на NASDAQ аналогично. в принципе я время от времени сталкиваюсь с тем, что ОЕ не загружает страницу один к одному так, как я вижу ее в IE в онлайне. что-нибудь, да не закачивает иногда. в принципе по этим 2-м ссылкам я всегда проверяю новые версии ОЕ на этот счет. попробуйте исправить, пожалуйста. в идеале хотелось бы, чтобы ОЕ после закачивания страницы позволял мне просматривать ее в оффлайне один к одному как и в браузере в онлайне.

Самые большие сложности с ActiveX элементами. Я попробую поправить для этой страницы, но не уверен, получится ли.


Цитата:

почему-то антивирусные базы, закачанные при помощи Offline Explorer с этого сайта не подходят для обновления KAV.
Те же базы и в то же время закачанные с этого сайта другой программой (например плагином FAR FTP) нормально обновляют.
Что Offline Explorer как-то изменяет файлы при закачке или некоректно определяет изменившиеся? В проекте Offline Explorer установлено «проверять целостность файлов».

Хорошо. Посмотрю.

Добавлено:
Странно. Скачал ftp://ftp.kaspersky.ru/bases/av/avc/i386/ext001.avc с помощью MS IE и ОЕ - файлы абсолютно идентичные. А Вы не смогли бы сравнить сами файлы - какой именно файл отличается?

Цитата:

Странно. Скачал ftp://ftp.kaspersky.ru/bases/av/avc/i386/ext001.avc с помощью MS IE и ОЕ - файлы абсолютно идентичные. А Вы не смогли бы сравнить сами файлы - какой именно файл отличается?

а различаться могут разные файлы, если сравнивать только по размеру, то несколько. Если по размеру и содержимому, то больше.

А какие именно, чтобы я сам мог воспроизвести? И всегда одни и те-же, или случайно? Прокси сервер для FTP используется?

Цитата:

А какие именно, чтобы я сам мог воспроизвести? И всегда одни и те-же, или случайно? Прокси сервер для FTP используется?

Разные файлы. Закономерности вроде нет.
Proxy — Microsoft ISA Server 5. На клиенте для закачки через него по FTP установлен Microsoft Firewall Client
Лучше я приведу настройки проекта:
===========================
ftp://ftp.kaspersky.ru/bases/av/avc/i386/
ftp://ftp.kaspersky.ru/bases/ids/
ftp://ftp.kaspersky.ru/index/

Additional=DeleteOldFiles
Уровень не установлен
Проверка размеров файлов
Дополнительно -> Проверка целостности файлов
===========================
У закачанных файлов сохраняется структура и количество, но содержимое немного другое.
В принципе базы закачивать можно и другими способами, меня просто интерисует способен ли Offline Explorer обеспечить целостность

Похоже, что именно с ISA Server-ом не состыковка. А вы не можете попробовать скачать на другой системе без него - будет ли такая-же проблема? У меня тогда файлы скачались 1-к-1. А вот проверить с ISA Server как что работает мне сложно.

Цитата:

вы не можете попробовать скачать на другой системе без него - будет ли такая-же проблема?

у меня такой возможности нет. наверное это связано с кэшированием файлов ISA сервером

OlegChernavin
Вопрос по ключевому слову Level — в файле справки по нему ничего нет.
Какая настройка имеет приоритет при закачке «Уровень» проекта или ключевое слово Level= ?
Если применять ключевое слово, нужно ли указывать «Уровень»?


Добавлено:
другими словами:
если «Уровень» проекта 0, а написано
Level=1
http://www.xxx.xxx.
то закачиваться будет на уровень 0 или 1?

Приоритет, естественно, у ключевого слова Level. В Вашем примере уровень скачивания будет=1.

OlegChernavin
как можно перенести настройки какого-то одного проекта (или сам проект) на другой компьютер?
Я так и не нашёл удобного способа. Конечно можно создать шаблон и применить его на другой компьютер, но нет способа создать шаблон по созданному проекту.
Или можно скопировать файлы из Application Data\Offline Explorer на другой компьютер, но тогда скопируются все проекты, а нужно только один.
Меню «Экспорт проекта» экспортирует файлы, а не настройки.
Например в RegetDeluxe есть удобный способ — скопировать файл default.wjr на другой компьютер. Нужно что-то вроде этого.

Цитата:

как можно перенести настройки какого-то одного проекта (или сам проект) на другой компьютер?

Проще всего, сделать резервную копию проекта. Если же только настройки - то выбрать проект, нажать Копировать и вставить в письмо/текстовый файл и т.д.


Цитата:

Я так и не нашёл удобного способа. Конечно можно создать шаблон и применить его на другой компьютер, но нет способа создать шаблон по созданному проекту.

Шаблон просто создается - сначала проект надо Копировать, а затем в списке шаблонов надо нажать правой кнопкой мыши и Вставить.

спасибо работает

Добавлено:
OlegChernavin
во встроенном в Offline Explorer Web-сервере заметил такой баг:
если в настройках проекта написать
-------------------------
Level=1
http://www.urlxxx.xxx
-------------------------
то при локальном просмотре всё нормально, а при удалённом того же проекта выходит
-------------------------
Нажмите здесь, чтобы перейти в онлайн:
http://Level=1
Download the missing link now and add it to the selected Project.
-------------------------

OK. Сейчас исправлю. Спасибо.

OlegChernavin
сайт к примеру _www.exponenta.ru состоит из ссылок asp.. их не качает..
как лечить?
ps Хотя нет, пошла загрузка... почему то долго думало...

Так есть проблема или нет?

больше нет

Выпустил версию 3.8.

Привет всем

Олег подскажите, возможно ли скачать сайт каталоги которого изменяются автоматически
Например (адрес вымышленный, подлинник не привожу т.к. сайт платный)

http://members.xxxxxxxx.com/members/0a426c7929865e17e2f84f7a/
http://members.xxxxxxxx.com/members/77426c7929865e17e2f81d90/
http://members.xxxxxxxx.com/members/304c6c7929865e17e2f845f6/

последний каталог постоянно изменяется

спасибо

OlegChernavin
баг во встроенном в Offline Explorer Web-сервере:
Если страница не была закачана Offline Explorer и соответственно Web-сервер высвечивает
Download the missing link now and add it to the selected Project.
При локальном просмотре «missing link» добавляется в просматриваемый в данный момент проект. А при просмотре через Web-сервер добавляется в проект, который выделен на сервере (если проектов несколько) — это неправильно.


Добавлено:
если проект на сервере не выделен, ссылка не закачивается вообще

Цитата:

Олег подскажите, возможно ли скачать сайт каталоги которого изменяются автоматически
Например (адрес вымышленный, подлинник не привожу т.к. сайт платный)

http://members.xxxxxxxx.com/members/0a426c7929865e17e2f84f7a/
http://members.xxxxxxxx.com/members/77426c7929865e17e2f81d90/
http://members.xxxxxxxx.com/members/304c6c7929865e17e2f845f6/

последний каталог постоянно изменяется

А меняется даже в пределах загрузки текущей сессии или между загрузками?


Цитата:

При локальном просмотре «missing link» добавляется в просматриваемый в данный момент проект. А при просмотре через Web-сервер добавляется в проект, который выделен на сервере (если проектов несколько) — это неправильно.

А как это - при просмотре через web сервер?

OlegChernavin

Цитата:

А меняется даже в пределах загрузки текущей сессии или между загрузками?

В пределах загрузки текущей сессии. Через некоторое время.

Странный сайт. А можно на него вживую взглянуть?

OlegChernavin

Цитата:

Странный сайт. А можно на него вживую взглянуть?

http://members.girlranch.com/members/

login: knicks305
parol: pepsi6

Цитата:

При локальном просмотре «missing link» добавляется в просматриваемый в данный момент проект. А при просмотре через Web-сервер добавляется в проект, который выделен на сервере (если проектов несколько) — это неправильно.


А как это - при просмотре через web сервер?

OlegChernavin
вот что я имел в виду:
при удалённом просмотре проекта с Web-сервера Offline Explorer
вообще-то эту возможность добавлять ссылки желательно как-то ограничить пользователям

Цитата:

http://members.girlranch.com/members/

Насколько я понял, эта последовательность постоянна пока не заходишь на сайт заново. Т.е. в пределах одной сессии загрузки ничего не меняется. Если же не хочется создавать каталоги с этой хеш-последовательностью, можно использовать URL Substitutes чтобы заменить

/members/*/
на
/members/


Цитата:

вообще-то эту возможность добавлять ссылки желательно как-то ограничить пользователям

Согласен. Сейчас сделаю.

OlegChernavin

Цитата:

Если же не хочется создавать каталоги с этой хеш-последовательностью, можно использовать URL Substitutes чтобы заменить

/members/*/
на
/members/

Поясните, пожалуйста, как это сделать
Спасибо

Хотелось бы выяснить, какую роль играют файлы вроде "144.mpx" (и так далее цифры с этим расширением)?
И еще, недавно удалил из папки \Windows\Application Data\Offline Explorer\ (сильно разрослась) наиболее старую часть бэкапов (webdown.bw#) и прочего старья. Вероятно, в результате этого, при попытке "вычислить размер экстрактируемого проекта" отображается нулевой размер с нулем файлов. На схеме проекта - также, никаких старниц, хотя в свойствах весь набор ссылок и прочие настройки остались и гулять по слитому проекту можно спокойно - никаких "страница не найдена" нет.

Вопрос: есть ли способ как-то экспортировать такие проекты? Или только сливать заново вне зависимости от того, что они уже лежат на харде?

И еще, какие файлы в вышеуказанной папке нельзя трогать вне зависимости от их даты?

Цитата:

Поясните, пожалуйста, как это сделать
Спасибо

URL Substitutes - добавить правило:

URL:

*

Заменить:

/members/*/

На:

/members/

Это правило uncheck - ОК, ОК.


Цитата:

Хотелось бы выяснить, какую роль играют файлы вроде "144.mpx" (и так далее цифры с этим расширением)?

Это карта проекта - в этом файле список всех файлов, закачанных этим проектом.


Цитата:

И еще, недавно удалил из папки \Windows\Application Data\Offline Explorer\ (сильно разрослась) наиболее старую часть бэкапов (webdown.bw#) и прочего старья. Вероятно, в результате этого, при попытке "вычислить размер экстрактируемого проекта" отображается нулевой размер с нулем файлов. На схеме проекта - также, никаких старниц, хотя в свойствах весь набор ссылок и прочие настройки остались и гулять по слитому проекту можно спокойно - никаких "страница не найдена" нет.

Это значит удалили карту проекта (.mpx) - теперь не будет карты, статистики, экспорта, бэкапа, корректного удаления, data mining и проч. Можно восстановить с помощью Ctrl+F5 на проекте.


Цитата:

И еще, какие файлы в вышеуказанной папке нельзя трогать вне зависимости от их даты?

*.dat, .map, *.mpx, *.blb, *.idx

Цитата:

Можно восстановить с помощью Ctrl+F5 на проекте.

- То есть, перезакачать проект из сети заново, так? Альтернатив нет?