Ru-Board.club
← Вернуться в раздел «Программы»

» MetaProducts Offline Explorer™ / Portable Offline Browser™

Автор: OlegChernavin
Дата сообщения: 21.03.2008 15:19
Alex1324

Да прямо в форум вставить.
Автор: Alex1324
Дата сообщения: 22.03.2008 16:08
[Object]
OEVersion=Enterprise 4.9.0.2670
Type=0
IID=7009
Caption=SonyEricsson
URL=http://gsmland.shop.by/6/
Lev=2
Weekday=257
LimTSize=10000
LimNumber=5000
LimTime=100
LTMethod=1
FTText.Exts=htmlhtmaspaspxjspstmstmlidcshtmlhtxtxttextxspxmlrxmlcfmwmlphpphp3
FTImages.Exts=gifjpgjpegtiftiffxbmfifbmppngipxjp2j2cj2kwbmplwf
FTVideo.Exts=mpgavianimpegmovflvfliflcvivrmramrvasfasxwmvm1vm2vvob
FTAudio.Exts=wavriffmp3midmp2m3uravocwmaape
FTArchive.Exts=ziparcgzzarjlhalayleirarcabtarpakacejarpdftgz
FTUDef.Exts=jscssssivbsdtdxslswfclass
FTText.B=ooxooo
FTImages.B=xoxooo
FTVideo.B=xoxooo
FTAudio.B=xoxooo
FTArchive.B=xoxooo
FTUDef.B=xoxooo
FTOther.B=xoxooo
FTSizes=0,0,0,0,0,0,0,0,0,0,0,0,0,0,0,3,3,3,0,3,0
RSrvsBx=1
RPathBx=1
RProt=127
LastStart=80:99:124:61:85:77:227:64:
LastEnd=97:240:106:62:85:77:227:64:
LastStarted=23.03.2008 15:55:48
LastEnded=23.03.2008 15:55:58
S200=21
SPar=21
SSav=21
SLast=200
SSiz=250784
SMdf=21
LFiles=21
LSize=250784
ImgDim=0,0,0,0
PrevURL=http://gsmland.shop.by/6/
IPAddr=16777343
Автор: OlegChernavin
Дата сообщения: 22.03.2008 16:47
Alex1324

Ну зачем же вы так. Мне настройки проекта нужны, а не скачанная страница. Сотрите этот позор!

Еще раз повторяю - в Offline Explorer (слева) выберите проект, который скачивает этот сайт, в меню Правка выберите Скопировать и потом вставьте в форум.
Автор: unreal666
Дата сообщения: 22.03.2008 21:43
Чего-то странно как-то OF парсит страницы.
Есть страница http://phpclub.ru/detail/article/2001-03-06 , в ней есть код

Код: <FONT class=productName><script>put_contact("army", "mail.od.ua", "productName", "kostysh");</script></FONT>
Автор: DownHouse
Дата сообщения: 23.03.2008 14:25
Подскажите пожалуйста. При закачке некоторых сайтов. Закачиваются только страницы с надписью "Hacking Attempt" Я так понимаю на этих сайтах стоит защита от слишком частых запросов. Как можно решить эту проблему?
Автор: unreal666
Дата сообщения: 23.03.2008 16:18
DownHouse
Поиграйся в настройках OE с параметрами "Количество соединений", "Таймаут (секунд)" и "Задержка между загрузками".
Автор: Alex1324
Дата сообщения: 23.03.2008 17:06

Цитата:
Ну зачем же вы так. Мне настройки проекта нужны,

Поправил смотрите выше.Напомню в данном поекте небходимо чтоб отображало 4-е стр.
У меня отображает только одну.За остальными лезет в онлайн.
Автор: unreal666
Дата сообщения: 23.03.2008 20:15
Alex1324
Включи галку "Другие", т.к. расширения этих страниц никак не подпадают под перечисленные в списке "Текст".

Добавлено:
И лучше измени URL на http://gsmland.shop.by/6/?page_size=20&page_id={:1..4} (или на http://gsmland.shop.by/6/?page_size=80 , т.к. по смыслу page_size - это кол-во телефонов на странице, т.е. 20 тел/стр * 4 стр = 80 тел ), поставь уровень 1 и "Загружать с начального каталога и ниже".

И кстати...

Цитата:
ERROR - 12.03.2008 18:25:14 - Error creating file: c:\download\Offline Explorer \gsmland.shop.by\6\default.htm Error code=00000003 Path not found Attempts=0

У тебя в пути папки сохранения в конце имени папки стоял пробел, а ни папки ни файлы не могут иметь пробел в конце своего имени, поэтому-то OF и не мог создать такую папку.

Добавлено:
И в настройках проекта всегда ставь галку на пункте "Пользовательские". А то не будут грузиться css-файлы и скрипты (если, конечно, ты не поставишь галку на "другие" и не занесешь в "Фильтры URL -> Имя файла" нужные расширения) и соответственно может очень сильно измениться вид страницы.
Автор: OlegChernavin
Дата сообщения: 23.03.2008 21:32
unreal666

Да, надо будет поправить этот код. А отключение парсинга скриптов есть - в поле адресов нужно добавить строку:

Additional=DisableScripts

unreal666

Можно в реестре добавить строчку.
Ключ:
HKEY_CURRENT_USER\Software\Crystal Software\TextPipe
Строковое значение
RootDir
Указывается только каталог, без \textpipe.exe

DownHouse

Можно установить задержку в:
3-5
Чтобы сделать случайную от 3 до 5 секунд.


Цитата:
У тебя в пути папки сохранения в конце имени папки стоял пробел, а ни папки ни файлы не могут иметь пробел в конце своего имени, поэтому-то OF и не мог создать такую папку.


Следующие версии будут автоматически исправлять лишние пробелы.

Автор: unreal666
Дата сообщения: 23.03.2008 21:51

Цитата:
А отключение парсинга скриптов есть - в поле адресов нужно добавить строку:

Additional=DisableScripts

Блин. Забыл что существуют ключи такого типа. Давно не юзал OE (необходимости не было).

Добавлено:
OlegChernavin

Цитата:
Можно в реестре добавить строчку.
Ключ:
HKEY_CURRENT_USER\Software\Crystal Software\TextPipe
Строковое значение
RootDir
Указывается только каталог, без \textpipe.ex

Один фиг пишет, что не установлена утилита TextPipe.
Ключ вида

Код: Windows Registry Editor Version 5.00

[HKEY_CURRENT_USER\Software\Crystal Software\TextPipe]
"RootDir"="D:\\Programs\\Office\\TextPipe Pro"
Автор: Alex1324
Дата сообщения: 24.03.2008 00:18
Просьба прокоментировать вот эту ссылку для закачки этой темы:
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start={:0..460|20}
а в частности вот это ={:0..460|20}
Автор: unreal666
Дата сообщения: 24.03.2008 00:23
Alex1324
Уровень 0 поставь.

P.S.
Не удаляй свои сообщения, а то мое сообщение не в тему получилось.
Автор: OlegChernavin
Дата сообщения: 24.03.2008 00:43
Alex1324

Это макрос. Он задает Offline Explorer-у загрузку нескольких адресов:
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=0
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=20
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=40
...
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=460

Т.е. перебирать цифры от 0 до 460 с шагом 20. Можно проще:
http://www.site.com/file{:10..99}.gif

В файле помощи есть подробное описание всех макросов URL. Там их довольно много разных.

Добавлено:
Обновленная версия Offline Explorer Pro 5.0:

http://www.metaproducts.com/download/betas/opsetup5.exe

Изменен вид диалогов свойств, создания проекта, экспорта и настроек.
Автор: unreal666
Дата сообщения: 25.03.2008 02:10
OlegChernavin
Кстати на счет TextPipe.
У меня оказывается ключи от него в реестре есть (в том числе и параметр RootDir). Только хранятся они в HKEY_LOCAL_MACHINE\SOFTWARE\DataMystic\TextPipe.

Так что нужно, чтобы OE проверял обе ветки реестра по части TextPipe.
Автор: OlegChernavin
Дата сообщения: 25.03.2008 17:20
Спасибо! Сделал.
Автор: Alex1324
Дата сообщения: 28.03.2008 23:50

Цитата:
Это макрос. Он задает Offline Explorer-у загрузку нескольких адресов:
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=0
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=20
http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start=40

http://forum.ru-board.com/topic.cgi?forum=5&topic=22165&start={:0..460|20} [?]
Не пойму по какому принципу создавать эти макросы.Вот к примеру зашёл на форум там в теме 6 стр.Ссылка http://satavto.by/forum/topic5441.html (1-ая стр.)
http://satavto.by/forum/topic5441-20.html (2-ая стр.)
Смотрел справку - не помогла.Как прописать?
Автор: unreal666
Дата сообщения: 29.03.2008 05:20
Или

Код: http://satavto.by/forum/topic5441.html
http://satavto.by/forum/topic5441-{:20..100|20}.html
Автор: myafik
Дата сообщения: 29.03.2008 22:07
Всем добрый вечер!
Подскажите плиз как скачать вот этот форум http://www.new-peredelkino.ru/
Знаю что можно открыть мануал вкурить его но времени катастрофически нет((
Не отправляйте плиз курить маны. Оч надо... С настройками типо скачать сай с уровнем 0 и все такое не выходит котент генериться из мускула.... обещаю прочитать весть топик про эксплорер
заранее всем спасибо!
зы: направьте на путь истинный))
Автор: unreal666
Дата сообщения: 30.03.2008 00:34
myafik
Уровень выше поставь (не ниже 3).
0 - это значит качать только сами URL, указанные в поле "Адреса".
Автор: myafik
Дата сообщения: 30.03.2008 10:44
вот спасибо!
попробую!
Автор: iparchim
Дата сообщения: 31.03.2008 09:59
Еще к вопросу о форумах: У меня в последние дни совершенно перестало качатся с ag.ru.
Например, такой адрес
http://forums.ag.ru/?board=d2_main&action=display&num={:0..1087700363|25}
выдает сразу access violation по адресу в oe.exe, даже не пытаясь начать качать. такие же выражения с руборда качаются спокойно. В чем может быть затык?
Автор: myafik
Дата сообщения: 31.03.2008 13:52

Цитата:
Уровень выше поставь (не ниже 3).
0 - это значит качать только сами URL, указанные в поле "Адреса".

как то не помогло... уровень большой поставил... скачались даже смайлики с колобка))
а вот страницы форума не захотели... чую надо макрос может подставить... но какой...

ссылки с главной страницы имеют вид http://www.new-peredelkino.ru/?0-18 например... цыфры меняются... может это как то поможет... форум имеет странный вид без бекграунда итп.. странно ведь сказал загружать даже не с сервера а с сайта... в замешательстве... форумы не разу не приходилось тянуть...
Автор: Alex1324
Дата сообщения: 31.03.2008 19:34
Подскажите как правильно добавлять ссылки в проект.
Я создал проект http://www.satnavigator.ru/forums.html с уровнем 0 - разделы форума.
Нужно добавить несколько разделов с уровнем 1 - не получается.Если отдельным проектом - тогда всё путём.Помогите!!!
Автор: OlegChernavin
Дата сообщения: 31.03.2008 19:52
iparchim

Ну проблема в том, что 43 с половиной миллиона адресов будет трудновато скачать. Они все в памяти не помещаются.

Проще разбить на несколько проектов, хотя бы по миллиону в каждом и так скачивать.

Вот ведь времена пошли - когда-то в Телепорте был лимит в 65 тыс адресов, вроде всем хватало. Потом они увеличили до 250 тысяч в ультре. Больше не увеличивают, но уже нередко встречаются пользователи Offline Explorer, качающие по нескольку миллионов страниц.

Похоже, лет через пять, сотни миллионов страниц будут обязательным требованием оффлайн-браузеров младшего уровня.

myafik

Довольно сложный скрипт. Попробуйте включить выполнение скриптов в Свойствах - Дополнительно и добавьте строчку в поле адресов проекта:

Additional=ParseIncludedScripts

Alex1324

Проще всего разными проектами. Все равно все страницы в одном месте находятся и просмотр будет связанным. Да и экспортировать несложно - выбрав все проекты с Ctrl-щелчком мыши.

Если обязательно нужен один проект, то можно так сделать. Уровень поставить в 0, а в поле адресов поставить дополнительный уровень:

http://www.satnavigator.ru/forums.html
Level=1
http://www.satnavigator.ru/forum/page1.htm
http://www.satnavigator.ru/forum/page2.htm
Автор: iparchim
Дата сообщения: 31.03.2008 20:26
OlegChernavin
Спасибо за ответ, но, после него я понял, что зря Вас побеспокоил. Просто давно оттуда не качал и забыл, что грузить надо не с заглавной, а с первой страницы
http://forums.ag.ru/?board=d2_main&action=display&s=0&num=1087700363&start={:0..4350|25} так все работает. Хотя, без Вашего ответа и не вспомнил бы
Автор: unreal666
Дата сообщения: 31.03.2008 21:36
OlegChernavin

Цитата:
Additional=ParseIncludedScripts

Что-то такого ключа для Additional в справке нет. Что это значит?
Автор: OlegChernavin
Дата сообщения: 31.03.2008 23:27
iparchim

Рад помочь!

unreal666

Нередко скрипты бывают не в самой странице, а во внешних файлах с расширением .js. Если используется такая команда, Offline Explorer загружает эти скрипты, вставляет их в страницу и выполняет весь код целиком. В редких случаях, когда обычный способ загрузки не помогает, такой метод помогает взять побольше ссылок. Но он замедляет обработку файлов. Поэтому он не используется по умолчанию.
Автор: unreal666
Дата сообщения: 31.03.2008 23:53
Сенкс. Надо бы добавить этот параметр в справку.
Автор: OlegChernavin
Дата сообщения: 01.04.2008 00:23
Добавил. Пока в английскую.
Автор: myafik
Дата сообщения: 02.04.2008 06:53

Цитата:
Довольно сложный скрипт. Попробуйте включить выполнение скриптов в Свойствах - Дополнительно и добавьте строчку в поле адресов проекта:

Additional=ParseIncludedScripts


OlegChernavin, Спасибо! Скачалось больше конечно... но пока и это проверить не могу... навигации нету. страниц много но при открытии выглядят как пустые...

Если я правильно понял речь шла о том что надо включить Evaluate script calculations и в поле адреса пректа добавить Additional=ParseIncludedScripts ядобавил новой строкой...
Все верно?

Страницы: 12345678910111213141516171819202122232425262728293031323334353637383940414243444546474849505152535455565758596061626364

Предыдущая тема: Unreal Commander


Форум Ru-Board.club — поднят 15-09-2016 числа. Цель - сохранить наследие старого Ru-Board, истории становления российского интернета. Сделано для людей.