» Offline Explorer

Vmarlboro

Цитата:

А Mass Downloader их может взять?

Mass Downloader ( 1 2 3 )
» Проблемы при скачивании...

ВОПРОС
Предназначен ли ОE для экономии траффика в случае обновления уже загруженного сайта?

Дело в том что я поставил на закачку сайт foto.ua закачал кучу картинок.... довольно-таки немалый размер.... сейчас нажал еще раз загрузить сайт (в настройках поставил "загружать только измененные и новые файлы") и наблюдаю в логе закачек что он у меня грузит одни и те же страницы (слава богу хоть картинки не грузит).... каким образом он проверяет что страничка не изменилась с последней загрузки, неужели ему придется заново загрузить весь сайт что бы убедится что он не менялся?

Или это как-то связано с особенностями строения этого конкретного файла????

Объясните плиз как экономить траффик в таких случаях.... я понимаю конечно что в этом сайте основной объем это картинки и что они к счастью некачаются.... но если я с периодичностью в день буду закачивать одну и ту же текстовую информацию то вообщем то это достаточно таки "дикий" траффик.... у меня к сожалению не анлим и мне это может вылится в копеечку....

Если ОЕ непредназначен для экономии траффика (таким способом как я того от него ожидаю)... скажите пожалуйста какой тогда прогой можно воспользоваться?



Добавлено:
И еще....
Попробовал сделать экспорт проекта... в CHM да и в MHT все красиво за одним неприятным исключением.... экспорт идет в кодировке KOI-8 в результате все в нечитабельном состоянии.... как в процессе экспорта сказать что бы файлы были в кодировке Windows????

Vmarlboro

Цитата:

но самое интересное что сейчас диски уменя забиты намного больше чем тогда и свободного места совсем чуть чуть а программа работает и качает.
С уважением к Вам Vmarlboro!

Значит мне надо будет протестировать на системе с большим кол-вом свободного места.


Цитата:

Да, большинство потоковых файлов поддерживаюся. Обычно такие URL-ы начинаются с:
pnm:// rtsp:// mms://
А Mass Downloader их может взять?

Пока нет. Но мы сейчас работаем над новой версией Mass Downloader с их поддержкой.

Добавлено:

Цитата:

Предназначен ли ОE для экономии траффика в случае обновления уже загруженного сайта?

Этот вопрос уже несколько раз обсуждался. Наверное, надо делать FAQ.

Вкратце - все зависит от сервера. Некоторые сервера все страницы представляют как новые, даже если они никогда не менялись. Можно попробовать установить галку "по размеру", но есть немало серверов, которые не указывают размер страницы.

В абсолютном большинстве случаев это касается только страниц, все остальные типы файлов - картинки, стили, флешки, скрипты и т.д. нормально отдаются сервером с указанием их размера и точного времени последнего изменения.


Цитата:

Добавлено:
И еще....
Попробовал сделать экспорт проекта... в CHM да и в MHT все красиво за одним неприятным исключением.... экспорт идет в кодировке KOI-8 в результате все в нечитабельном состоянии.... как в процессе экспорта сказать что бы файлы были в кодировке Windows????

А можно пример страницы? rbc.ru вроде нормально экспортируется. Можно также щелкнуть правой кнопкой по странице и выбрать кодировку браузера.

Цитата:

В абсолютном большинстве случаев это касается только страниц, все остальные типы файлов - картинки, стили, флешки, скрипты и т.д. нормально отдаются сервером с указанием их размера и точного времени последнего изменения.

Т.е. это судьба....??? Или можно все таки избежать каким то образом?

Цитата:

А можно пример страницы? rbc.ru вроде нормально экспортируется. Можно также щелкнуть правой кнопкой по странице и выбрать кодировку браузера.

Ну для примера - вот страница: foto.ua скачивая ее и все дочерние я конвертирую в CHM формат и получаю навыходе нечитаемый текст.... причем даже и незнаю как сделать его читаемым ибо в CHM-браузере нет такой возможности (хотя может и есть да я ненашел)

Цитата:

Т.е. это судьба....??? Или можно все таки избежать каким то образом?

Это почти судьба. Можно попробовать еще 4-й способ одновления проекта - на определенным образом построенных сайтах он очень эффективен.

mvgfirst

Возможно, что в нечитаемости CHM'а виноват вовсе не OE. Есть у этого формата такая неприятная особенность -- он использует ту кодировку, которую до этого была в Internet Explorer'е (IE). Поэтому, чтобы CHM открывался нормально, иногда приходится выполнять небольшой "танец с бубном". Перед открытием такого файла запускаем IE, принудительно выставляем в нем нужную кодировку, и только после этого открываем CHM.

Увы, это действительно так. Но есть возможность и избежать CHM - можно экспортировать в EXE файл - там все проще получается.

Добавлено:
Последняя версия:

http://www.metaproducts.com/download/betas/oep1993.zip

OlegChernavin
Не скажете возможно качать вот такого типа
http://www.nelly.net/?source=/universal/nelly/video/00_myplace.asf
файлы потокого видео......
С уважением!

2 OlegChernavin

А планируете ли Вы портировать Offline Explorer под Linux?
Если нет, то почему, если не секрет?

Была в предыдущей версии бяка, проверте на последней версии.
Качаем небольшой проект, потом зкспортируем его в Explorer. Во всех страницах где в ссылке есть знак ? заменяется на @ . После чего становится не возможным автономный просмотр в полне по понятной причине.

Цитата:

Была в предыдущей версии бяка, проверте на последней версии.
Качаем небольшой проект, потом зкспортируем его в Explorer. Во всех страницах где в ссылке есть знак ? заменяется на @ . После чего становится не возможным автономный просмотр в полне по понятной причине.

Это не бяка. Это как раз нормально. Представьте себе, что в ссылках остается знак ?. В Windows в именах файлов эти знаки не разрешены. Таким образом подобные файлы не удастся даже создать на диске.

ОЕ корректно исправляет все ссылки и имена файлов. Так что все должно работать. Просто установите стандартные расширения при экспорте.


Цитата:

А планируете ли Вы портировать Offline Explorer под Linux?
Если нет, то почему, если не секрет?

Пока нет. Я не уверен, что есть достаточный рынок под Linux. Кроме того, на это нужно много времени, которого нет. А нам еще столько много надо делать в ОЕ под Windows.

А вообще - можно же ОЕ запустить под эмулятором.

Добавлено:

Цитата:

Не скажете возможно качать вот такого типа
http://www.nelly.net/?source=/universal/nelly/video/00_myplace.asf
файлы потокого видео......

Странно. Там зачем-то флеш требуется. Попробуйте закачать в режиме автосохранения.

OlegChernavin

Цитата:

Это не бяка. Это как раз нормально.

Полагаю меня не совсем правильно поняли. Предлагаю эксперимент, со всеми подробностями.
Создадим небольшой проект :
http://www.mobile-review.com/news.php?year=2005&month=april&day=12&language=ru
Уровень - 2; типы: текст - согл. ф. URL, изображения - только с нач. серв., пользовательские - только с нач. серв., другие - согл. ф. URL; фильтры: протокол - только с начальный, сервер - с начального, имя файла - произвольная конф.(маска вкл. - &language=ru). Статистика после загрузки - 0,6 Мб. Теперь экспортируем проект в Кеш MS Internet Explorer.

Цитата:

Просто установите стандартные расширения при экспорте.

В данном случае опция не доступна и не нужна.
Затем открываем IE , ставим работать автономно. Вводим в адресной строке начальный адрес проекта, страница открылась. Перемещаемся в конец страницы и пробуем нажать на ссылку предыдущий день (следующий день), получаем предупреждение выйти из автономного режима т.к. ссылка не доступна. А теперь копируем адрес ссылки и вставляем в адресную строку, далее заменяем знак @ на ? и получаем доступную в автономном режиме страницу. Надеюсь теперь понятно

Да, спасибо за объяснение. Действительно проблема. Буду работать. Пока решение такое - загрузить проект заново в режиме "Без изменения ссылок" и потом его экспортировать.

Добавлено:
Я кому-то когда-то обещал, что буду работать над ускорением экспорта. Кое-что получилось, можно потестить - ускорение до 50%:

http://www.metaproducts.com/download/betas/oep1999.zip

OlegChernavin
Хочется узнать Ваше мнение. ИМХО конечно, хотя думаю сделает и без этого
хорошую программу ещё немножечко лучше. В настройках при выборе режима и скорости закачки хочется видеть возможность выбрать количество закачек (потоков) для каждого режима. Думается - зачем восемь закачек для минимальной скорости.

OlegChernavin
Есть ли какой-нибудь стандартный способ настроек OE для закачивания с многоязычных сайтов только русского варианта?

OlegChernavin

Исправьте пожалуйста интеграцию OE в контекстное меню браузера Opera. Я обнаружил очень серьезную недоработку. Дело в том, что Offline Explorer прописывает свои пункты только в стандартное меню Оперы (то что находится в %Путь_к_каталогу_Оперы%\defaults\standard_menu.ini). Но это не правильно, так как многие пользователи Оперы используют свое собственное(измененное) меню, которое находится в совершенно другой директории. В настоящий момент в пользовательский файл никаких пунктов не добавляется и возникает неприятная ситуация - интеграция не срабатывает.

Я предлагаю сделать в OE нормальную интеграцию. Вот подробный алгоритм поиска файла текущего пользовательского меню для внесения в него изменений:

1. В реестре ищем каталог Оперы. Смотрим ветку реестра HKEY_CURRENT_USER\Software\Opera. В этой ветке, из параметра Last CommandLine v2 выдерается путь к директории Оперы. Сказанное выше проверялось на Opera 8.0 Final. Кстати, Offline Explorer сейчас таким же способом находит каталог с Оперой или как-то иначе?

2. В корне каталога Оперы смотрим файл OperaDef6.ini
Ищем в нем секцию [System] и проверяем значение параметра Multi User
Если Multi User=0, то переходим к пунку A)
Если Multi User=1, то переходим к пунку B)

A)Смотрим файл %Путь_к_каталогу_Оперы%\profile\opera6.ini
Переходим к пункту 3

B)Смотрим файл %APPDATA%\<название папки Оперы>\profile\opera6.ini
где <название папки Оперы> - название папки Оперы, из которой запускалась Опера(берется из реестра - выдерается из полного пути)
Переходим к пункту 3

3. В секции [User Prefs] файла opera6.ini
Смотрим значение в параметре Menu Configuration= - это значение и есть полный путь к искомому файлу. Это тот самый пользовательский файл меню, в который нужно вносить изменения.

P.S. У меня есть сомнения насчет правильности поиска пути в пункте B). А посмотреть точно не могу, т.к. нет Windows XP под рукой, но позже я сообщу более точную информацию.

Цитата:

Хочется узнать Ваше мнение. ИМХО конечно, хотя думаю сделает и без этого
хорошую программу ещё немножечко лучше. В настройках при выборе режима и скорости закачки хочется видеть возможность выбрать количество закачек (потоков) для каждого режима. Думается - зачем восемь закачек для минимальной скорости.

Да, наверное. Хотя я думаю, что регулятор кол-ва потоков прямо на панели будет более удобным. Постараюсь это сделать в 4-й версии.


Цитата:

Есть ли какой-нибудь стандартный способ настроек OE для закачивания с многоязычных сайтов только русского варианта?

Надо посмотреть как устроены УРЛ-ы на этом сайте. Вполне возможно, там есть что-то типа /ru/page.htm или page.asp?lang=ru



Добавлено:

Цитата:

Исправьте пожалуйста интеграцию OE в контекстное меню браузера Opera.

ОК. Будем работать. Спасибо!

OlegChernavin

Цитата:

Настройки для закачивания всего топика в Offline Explorer Pro/Enterprise:
Адрес - http://forum.ru-board.com/topic.cgi?forum=5&bm=1&topic=1455&start={:0..1000|20}
Уровень: 0

Все остальное - по умолчанию.

"По умолчанию" - это как? В настройках OE нет такой функции. Может быть лучше указать имя шаблона? А то вот что-то не выходит.


Цитата:

Надо посмотреть как устроены УРЛ-ы на этом сайте. Вполне возможно, там есть что-то типа /ru/page.htm или page.asp?lang=ru

Никаких подобных УРЛов там не нашел. www.interprint.de Как быть?

Цитата:

"По умолчанию" - это как? В настройках OE нет такой функции. Может быть лучше указать имя шаблона? А то вот что-то не выходит.

Проще всего это сделать в Мастере создания проекта - все остальные установки в Мастере не изменять - только уровень и адрес.


Цитата:

Никаких подобных УРЛов там не нашел. www.interprint.de Как быть?

Довольно просто. Посмотрите на адреса на Русском и других языках. Там есть номер, который для Русского начинается с 5хххх. Так что вот такая маска как раз сработает:

id=5

Можно как нить скачать с пом. ОЕ страницы вызывающееся через ява-аплеты ?
Вот например
http://www.ofpec.com/editors/browse_kb.php?
мне нужны все страницы что будут вызываться с этой страницы .
Версия ОЕ естественно самая-самая, только скачал. Так обычно Dpump юзаю , но она точно не умеет того что мне нужно.

Вроде все должно скачиваться без проблем с уровнем=1. В чем именно проблема?

Подскажите пожалуйста, какие правильные настройки проекта нужно выставить чтобы закачать полностью один раздел на http://www.wincustomize.com.

Есть страничка под адресу http://www.wincustomize.com/Skins.aspx?LibID=32&u=0. Будем считать ее за стартовую страницу для закачки проекта.
Стоит задача сакачать оттуда все файлы, которые находятся по ссылкам вида:
*download.aspx?LibID=32&SkinID=*

Проблема в том, что все эти ссылки располагаются не на одной странице, а на не нескольких десятках страниц. Для перехода на другую страницу в браузере видны ссылки вида:
javascript:ChangePage(2) - переход на вторую страницу
javascript:ChangePage(3) - переход на третью страницу
javascript:ChangePage(4) ...
javascript:ChangePage(5) ...
и т.д.

Как я только не крутил настройки проекта Offline Explorer, но так и не смог заставить его переходить на следующие страницы - загрузка прекращалась на первой же странице. Буду признателен, если кто-нибудь подскажет мне правильные настройки. Заранее спасибо.

OlegChernavin
действительно все работает с настройками по умолчанию вива ОЕ!
а проблема была элементарная - я забыл что у меня файер стоит
...
че-то он скачал , но карту сайта он офигенно неудобно строит - можно как нить его заставить показывать нормальные имена страниц как Dpump делал ( как в ИЕ сохраняются по умолчанию ) ?а то мне углубить пару страниц надо - я их фиг так найду в карте сайта

Цитата:

че-то он скачал , но карту сайта он офигенно неудобно строит - можно как нить его заставить показывать нормальные имена страниц как Dpump делал ( как в ИЕ сохраняются по умолчанию ) ?а то мне углубить пару страниц надо - я их фиг так найду в карте сайта

- А зайди на нужную страничку в проекте, потом над левым окошком вторую закладку (карта) жмакни - она откроется с выделением на файле, который в данны момент открыт.

bredonosec
Так это что продукт за 400уе не может названия страниц сразу нормально отображать ?
Страницу нужную то я по-любому найду - вот только не пойму как ее "заглубить" ... как эта фича в ОЕ называется ?

Цитата:

не может названия страниц сразу нормально отображать

- Нормально это как? По содержимому тега <title></title> ?
мне удобно видеть в закладках название файла, чтоб мог быстрее находить и редактить проект.
Если речь о том, чтоб он имена файлов переделывал в содержимое этого тега - боже упаси! Есть немало ресурсов, где в тегах анходится длинное перечисление титулов типа

Цитата:

.::Креасофт::. Страничка о софте Васи Тапочкина. Лучший креатифф, утиль, умные разговоры о железе, ...

(далее следует еще пару десятков слов подобной белиберды) и только потом - (необязательно) - название, прямо относящееся к содержимому страницы. Подобная же гнилая практика распространена на новостных порталах, ИТ ресурсах. Здесь (на борде) хотя бы непосредственное имя страницы вперед выведено (см. строку тайтла) и в случае сохранения кучи страниц еще есть шанс в файл-менеджере что-то найти по передним обрывкам названий.
То есть, после такого переименования гемору будет на порядки больше.

Или мы о разном говорим? Если да, то поясни свою мысль.
Цитата:

вот только не пойму как ее "заглубить"

- лучше опиши это действие. этот термин мне недоступен...

Цитата:

че-то он скачал , но карту сайта он офигенно неудобно строит - можно как нить его заставить показывать нормальные имена страниц как Dpump делал ( как в ИЕ сохраняются по умолчанию ) ?а то мне углубить пару страниц надо - я их фиг так найду в карте сайта

Да, я планирую доработать Карту в будущем.


Цитата:

Страницу нужную то я по-любому найду - вот только не пойму как ее "заглубить" ... как эта фича в ОЕ называется ?

Что значит "заглубить"?


Цитата:

Проблема в том, что все эти ссылки располагаются не на одной странице, а на не нескольких десятках страниц. Для перехода на другую страницу в браузере видны ссылки вида:
javascript:ChangePage(2) - переход на вторую страницу
javascript:ChangePage(3) - переход на третью страницу
javascript:ChangePage(4) ...
javascript:ChangePage(5) ...
и т.д.

Как я только не крутил настройки проекта Offline Explorer, но так и не смог заставить его переходить на следующие страницы - загрузка прекращалась на первой же странице. Буду признателен, если кто-нибудь подскажет мне правильные настройки. Заранее спасибо.

Тут не обойтись без хитростей. Самое простое - сохранить все вручную просматривая страницы в оффлайн с нажатой кнопкой Автосохранения. Если нужно больше автоматизма - то Ctrl + Alt на ссылке и редактирование POST-запроса с помощью URL Macros.

bredonosec

Цитата:

Нормально это как? По содержимому тега <title></title> ?

Рекомендую скачать Dpump ( копейки весит ) и посмотреть как определяются названия страниц в большинстве случаев. Это как правило не <title></title>. Могу ошибаться, но по-моему береться название ссылки ( т.е вот из этого выделенное слово <a href="http://www.ofpec.com/" class="TopLinks">HOME</a> )
Как накручиваются счетчики статью тут читал , так что всю бредовость метатэгов понимаю.
OlegChernavin
а ты кто такой ? неужели имею честь лицезреть одного из создателей программы ?

"Заглубить" - это повысить глубину закачки для выбранной страницы. Как то так... если pump скачаете, поймете о чем я.

Цитата:

Могу ошибаться, но по-моему береться название ссылки

- А если мы имеем контекстные ссылки на материалы, вроде
Цитата:

попробуйте эту операцию сначала на простом примере - первым способом, и вторым, так выясните, который для вас удобнее

Тогда бум иметь такой набор:
стартовая страница проекта + страницы с многозначительными названиями:
"эту.html",
"простом.html"
"первым способом.html",
"вторым.html", ....
Это будет более удобочитаемо?
Цитата:

"Заглубить" - это повысить глубину закачки для выбранной страницы.

- жмакаешь на проекте правой, в меню нижняя строка "свойства" (properties), в ней прямо по центру диалога видишь селект "level limit" - или "глубина скачки". Ноль=только сама страница, 1 - все ссылки на ней, 2= плюс ссылки со связанных страниц, 3, 4, 5, ..
и т.д. до бесконечности
Как грится, читайте маны, они рулят

ЗЫ. Если имелось в виду сливание одной страницы из проекта с более глубоким уровнем, нежели остальных страниц ЭТОГО же проекта - для этого предусмотрена такая фича: жмак правой на ссылку "скачать как отдельный проект" - в котором и задаешь нужный уровень глубины.
После сливания гуляешь по ссылкам как по одному и тому же проекту: ссылки не обрываются Тем более, если экспортируешь обе/все части(субпроекты), то единственным напоминанием о том, что это был не "один" проект, а несколько, будут доп. ссылки на "contents.html" - которые вытереть - секундное дело.

bredonosec
в Dpump вообще то отображаются два имени : сперва взятое из ссылки или title , а потом имя самой страницы , т.е в любом случае найти нужную страницу можно очень просто.
т.е будет
"первым способом.html"-> (http://forum.ru-board.com/topic.cgi?forum=5&topic=1455&start=380)

Цитата:

Если имелось в виду сливание одной страницы из проекта с более глубоким уровнем, нежели остальных страниц ЭТОГО же проекта

вот-вот, как раз это я и имел ввиду. Сливание одной или _более_ страниц с более глубоким уровнем. В dpump это одни клик , на самом видном месте. Найти это в ОЕ я до сих пор не могу.. Хотя фича ИМХО едва ли не наиболее часто востребуемая.
где это "скачать как отдельный проект" ? в упор не могу найти