» MetaProducts Offline Explorer™ / Portable Offline Browser™

Подскажите plz как можно заставить проходить по ссылкам которые прячутся за java

хотя бы уровень http://www.japancats.ru/Honda/Default.aspx

Antonij72

Нужный вам ролик лежит по адресу:
http://www.ixbt.com/divideo/digital-video-guide/4-1-videoediting-base-for-beginners/sample.flv добавте в список URL или поиграйтесь с настройками: поставьте галку на вкладке "Parsing"- "Evaluate script calculation" т.к. ролик вызывается скриптом.

Antonij72
rex

Автосохранение описано в шапке - FAQ


Цитата:

Как перенести шаблоны с одного компьютера на другой?

Перенести файл template.dat

luckydevil13

Попробуйте включить выполнение скриптов в Свойствах проекта - Обработке.

OlegChernavin

Спасибо за наводку - но не помогло ..

если не тяжело можете глянуть?
логин/пароль на сайт 293661972/60A92D

Накопил кучу проектов, которые грузились в папку по умолчанию Download, сейчас в программе провел инвентаризацию и все упорядочил по нескольким объединенным папкам с проектами. Стоит задача разделить закачанное согласно новой структуре папок с проектами, чтобы не валить все сохраненные сайты в одну кучу, что неудобно юзать при непосредственном обращении через проводник, вопрос - как это сделать если речь идет уже о разделении примерно 1000 закачанных ресурсах (включая всякие левые ссылки на вложения) на несколько, логически разделенных папок, сообразно новой структуре проектов, понятно, что отлавливать все это вручную нереально.
И второй важный момент..., в старых версиях программы при изменении пути размещения локальных папок в проектах терялась статистика - Карта проекта, как сейчас с этим?
Спасибо!

Цитата:

Antonij72
Автосохранение описано в шапке - FAQ

Запускаю видео с автосохранением - видео не проигрывается.

luckydevil13

Увы, там скрипт, который меняет форму на странице и ее отправляет. Пока это не поддерживается.

Frantishek

Перемещение проекта в папку с другим каталогом загрузки или изменение каалога загрузки вызовет соответствующее перемещение файлов на диске. В версии 5.7 все это должно работать корректно.

Насчет опитимальности хранения - тут проблем нет, если путь к папке будет слишком длинный, в диалоге свойств папки будет показано предупреждение красным цветом.

Подскажите, пожалуйста, такой момент.
Не могу разобраться с настройками программы.
Цель вроде бы простая, но результата не могу добиться.
На одном известном антивирусном сайте есть раздел с описаниями вирусов http://www.securelist.com/ru/descriptions.
Ссылка на страницу с описанием вируса имеет вид http://www.securelist.com/ru/descriptions/XXXXXXXXX/YYYYYYYYYYY, где XXXXXXXXX-номер, а YYYYYYYYYYY-имя вируса.
Задача: скачать все страницы с описаниями вирусов.
В настройках Offline Explorer задаю следующее
Адреса http://www.securelist.com/ru/descriptions/
Сервер Загружать только с начального сервера
Каталог Загружать файлы только с начального каталога и ниже.

В результате скачивается куча левых файлов, а из нужных страниц сохраняются только те на которые есть ссылка с первой страницы.
Подскажите нужные настройки проекта.

Тут нужно поставить уровень побольше. Насчет левых файлов - приведите пример из нескольких ссылок того, что было не нужно.

OlegChernavin
Спасибо за ответ. Постараюсь описать подробнее. Итак цель следующая: скачать с сайта www.securelist.com описания вирусов. Страница с описанием имеет вид типа http://www.securelist.com/ru/descriptions/6885994/Worm.Win32.Sober.q
Создаю проект со свойствами


Код: Stream 1.2 File
[Object]
OEVersion=Enterprise 5.3.0.2908
Type=0
IID=7017
Caption=http://www.securelist.com/ru/descriptions/
URL=http://www.securelist.com/ru/descriptions/
Lev=100
Weekday=257
LimTSize=10000
LimNumber=5000
LimTime=100
EnableForms=True
FTText.Exts=html
htm
asp
aspx
jsp
stm
stml
idc
shtml
htx
txt
text
xsp
xml
rxml
cfm
wml
php
php3
FTImages.Exts=gif
jpg
jpeg
tif
tiff
xbm
fif
bmp
png
ipx
jp2
j2c
j2k
wbmp
lwf
FTVideo.Exts=mpg
avi
ani
mpeg
mov
flv
fli
flc
viv
rm
ram
rv
asf
asx
wmv
m1v
m2v
vob
smil
FTAudio.Exts=wav
riff
mp3
mid
mp2
m3u
ra
voc
wma
ape
FTArchive.Exts=zip
arc
gz
z
arj
lha
lay
lei
rar
cab
tar
pak
ace
jar
pdf
tgz
FTUDef.Exts=js
css
ssi
vbs
dtd
xsl
swf
class
ent
FTText.B=ooxooo
FTImages.B=ooxooo
FTVideo.B=ooxooo
FTAudio.B=ooxooo
FTArchive.B=ooxooo
FTUDef.B=ooxooo
FTOther.B=ooxooo
FTSizes=0,0,0,0,0,0,0,0,0,0,0,0,0,0,0,3,3,3,0,3,0
RSrvsBx=1
RPathBx=1
RProt=255
LastStart=180:135:70:14:114:149:227:64:
LastEnd=62:244:84:0:114:149:227:64:
LastStarted=21.10.2009 13:32:30
LastEnded=21.10.2009 13:30:03
S200=180
S304=63
SPar=180
SSav=180
SLast=200
SSiz=3294675
SMdf=180
LFiles=477
LSize=3300692
Flags=1
ImgDim=0,0,0,0
PrevURL=http://www.securelist.com/ru/descriptions/
ExploreDirs=True
ExploreSSMaps=True
ParseComplexScripts=True
LIndexed=False
IndexFiles=False

Он будет идти по всем ссылкам, которые найдет на этих страницах. Хотя, как я понял, основное количество доступно через форму поиска. В ней нудно ввести слово или фразу из описания и можно получить ссылки на соответствующие определения.

Фактически, нужно перебрать все возможные слова, делая для каждого запрос. Это нереально автоматически.

Можно попробовать другой способ - во встроенном браузере ввести в форму поиска слово троян и нажать кнопку ПОИСК с нажатыми клавишами Alt+Ctrl - создастся новый проект для закачки этих определений.

То-же сделать со словом вирус. Ну и подумать, какие еще слова могут быть в описаниях всех других.

день добрый, Олег.
--
машина:
1 гб озу
ВИНТ 250
ПРОЦ 2,7 ггц.
--
Качаю уже 15-20 дней сайт, скачало порядка 700к страниц. Я постоянно сохраняюсь в фаил и восстанавливаю загрузку с фаила, далее продолжаю качать. Но ОЕ Дико тормозит! К моменту когда приходишь с утра к примеру, он скачал 15-30к страниц, но в низу в статусе пишется что в процессе парса 8к страниц.
Я так понял что софтинка не расчинана на такое большое количество страниц или надо памяти и проц по больше?

Это зависит и от процессора и от скорости диска. Оптимально будет поставить задержку между закачками 1-2 секунды, чтобы ОЕ успевал обработать скачанные файлы.

Спасибо за ответ.
Ставлю паузу и 4-5 сек (10-20 потоков к примеру) всё равно виснет, приходится по пол дня ждать пока отпарсит существующее, потом сохранять проект в фаил.

Медленный парсинг может быть если включено вычисление скриптов (Свойства проекта - Обработка).

Насколько я понял ОЕ имеет свою локальную базу или кеш загруженных страниц.
При закачке он сохраняет туда идентификатор загруженной страницы или её url.
а когда их много (UP to 700к) ему трудно выполнять эти действия.
--
Чтобы облегчить участь машины и ОЕ, я удалил старый проект, перед этим сделал -> сохранить очередь (~300к стр) в файл., создал новый проект с другим названием, загрузил туда фаил очереди.
Но проект не грузится весь - загружает 3, ссылки и пишет, что проект загружен, когда смотришь в файл очереди, он пуст.
--
как мне возобновить закачку прерванную?
--

Такой способ не пройдет - восстановление очереди возможно только с оригинальным проектом. В Вашем случае, лучше всего загружать по Ctrl+F5 - не загружать существующие файлы.

Локальная база файлов проекта называется Картой в ОЕ. Кроме того, что она занимает оперативную память, побочных действий от нее нет - замедлять загрузку она не должна.

Если новый проект загружает только 3 ссылки - проверьте его настройки, возможно недостаточен уровень. Можно увидеть детали с помощью лога (журнала - Ctrl+Q).

Обнаружил в последнее время такую вещь: Запускаю любой проект (как старый, тик и вновь созданный) - он начинает качиться- скачиваются файлы, добавляются в очередь. И внезапно скачка останавливается, как буд-то была нажата кнопка "Остановить" - на значке проекта отображается крестик, внизу пишется "загрузка остановлена - столько-то файл(ов)", в списка загружаемых адресов в колонке "Статус" надпись "Aborted", в очереди нет ни одного файла. Переустановил программу, но проблема не исчезла.
В чём может быть затык?

Бывает из-за кряков такое.

OlegChernavin, спасибо.
А что есть мне надо загрузить только фаилы вида read.php, а фаилы вида articles, category ненадо.
Таким образом чтобы добраться до фаилов надо пройти несколько уровней:
category.php -->articles.php-> read.php
Если поставить фильтр загружать только read.php или загружать только read.php а category.php и articles.php не загружать, то он загружает только главную а дальше не идёт.
Я делал примерно так в меню Фильтров фаилов указвал text и выбирал загржать url используя URL ФИЛЬТРЫ, а уже в url фильтрах указывал что не нужны только такой фаил а другие ненужны. О_о

Как сделать так чтобы фаилы *articles* и *category* парсились нно не загружались?

Как понять - парсились, но не загружались?

Парсинг - это обработка файла для вытаскивания ссылок из него. Ну и еще изменение ссылок для оффлайн-просмотра. Не загружая файл не вытащить из него ссылки. Поэтому category.php и articles.php тоже нужно разрешить в фильтрах, чтобы они загрузились и из них были вытащены ссылки уже на нужные read.php.

я имел ввиду чтобы он парсил их для обнаружения новых ссылок но на винт не писал, а писал только read.php.
--
кроме того наблюдения по ходу для тех кто пока не в теме, этой тулзой лучше качать с нормальной машины с винтом минимум 7200 оборотов и кешем нормальным. Какой бы ноут небыл бы мощным, всё равно стационарный комп быстрее качает.

Тогда добавьте в поле адресов проекта:

DeleteAfterParsing=category.php,articles.php

Спасибо попробую!

del (с варезником перепутала)

почему не работает поиск на русском языке в CHM файле созданном offline explorer. С английским все в порядке

Попробую посмотреть. Пока так трудно сказать, что нужно поправить в этом формате. Не обещаю, что получится быстро сделать.

Цитата:

Попробую посмотреть. Пока так трудно сказать, что нужно поправить в этом формате. Не обещаю, что получится быстро сделать.

Заранее благодарю. Программа полезная, вот еще проблему с русским решить бы. Буду ждать.

OlegChernavin , ещё вопрос.
Сейчас скачал 600к страниц.
При том что в программе отключен локальный сервер и парсинг страниц.
Всёравно ей очен тяжело качать в 40-30-20-10 потоков. кое как справляется.
На одной машину 2,2 ггц проц, оперативы 1 гб
На другой 1,8 code duo оперативы 2 гб
работает одинаково тяжело.
Надо оперативы ей больше?

Тут больше зависит от процессора. Он производит парсинг - его как раз вряд-ли можно отключить - он обрабатывает страницы, извлекая адреса для продолжения закачки. Enterprise может задействовать все ядра процессора для обработки.

Признак того, что именно обработка тормозит прост - в строке состояния внизу будет постоянно счетчик файлов в очереди обработки.