» MetaProducts Offline Explorer™ / Portable Offline Browser™

В USD добавляешь следующую строчку:
"e:\Program Files\Offline Explorer Enterprise\OE.exe" "/new=url=%url%,run=true,folder=Projects folder name"

Сам не пробовал, но с ФлешГетом работает без проблем..

Zakkazak
Понял. Это не то что надо - USD и сам справляется с закачками. Хотелось бы скачивания сайта вместе с файлами, которые хранятся на файлообменниках с корректировкой ссылок. То есть, например, возмём сайт, на котором есть ссылки типа http://rapidshare.com/files/123456789/file.zip. После скачивания с помощью ОЕ получаем сайт с сылками на скачанный file.zip на локальном диске.
OlegChernavin
Возможно ли такое и , если не возможно, то стоит ли ожидать в будующих версиях?

Как избавиться от такой проблемы: При скачке страниц происходит замена относительных путей на абсолютные для онлайн просмотра (мне так и нужно). Но какие то страницы прога разобрать не может и число этих страниц растёт в поле левого нижнего угла. Как отменить попытку разбора строки для таких страниц? Или есть возможность выставить ограничение по времени парсинга строк?

Есть также желание избавиться от закачки страниц выдающих себя за фото и видеофайлы. Каким образом это зделать?

попробовала в работе эту программу для скачивания сайта со скриптами.

в итоге многие фото пропускаются, видны лишь красные крестики, а после, при просмотре оффлайн внутренних кнопок на детали, пишет:

Document not found
This page is not available offline. It might have not been downloaded or it was removed by a user. Possible reasons for not being downloaded: URL was excluded due to Project settings, document was not available online during Project download or the download was stopped before being completed.


Click here to go online:


Download the missing link now and add it to the selected Project.

В блоке слева я вижу, что не все ссылки закрашиваются голубым, а иногда идут пропуски по 5-10 ссылок, что очень огорчает.
Выставляла глубину 100,000

PS. и что нужно делать, когда ты уже скачал (а) файлы? какие дальнейшие действия, куда нажимать, сохранять и т.п.? можно просто закрыть программу, либо, нужно дополнительно как-то "зафиксировать" файлы?
У меня на жестком диске есть папки, а в самом Offline Explorer'e сохранять?

Я 2 день мучаюсь с закачиванием сайта, ни телепорт, ни оффлайн эксплорер не помогают...

поскажите пож можно ли каким-либо способом получить список элементов карты проекта? так чтобы записать его в линейный файл например

можно ли посмотреть както ТОЛЬКО то что было загружено в последней дозагрузке?

почему в статистике по проекту не совпадают значения полей "Элементов в карте:" и "Всего файлов:"? что еще хранит в себе карта проекта, кроме указаний на загруженные файлы?

---------------

обнаружил следующее явление

- имеем каталог после загрузки
- делаем попытку експорта
- обнаруживаем (по логу экспорта) что экспорт прошел не для всех станиц а прервался раньше
- порывшись в каталоге нахожу файл нулевой длины - удаляю
- копирую проект, восстанавливаю карту
- после этого экспорт заканчивается в полном обьеме

если ничего не напутал то выходит что вкравшиеся файлы нулевой длины обрывают экспорт?


... еще осталось выяснить почему некотрые загруженные(!) страницы не попадают в карту проекта, даже после попытки ее восспановления

-------------------

восстановление сохраненного проекта зависает в разных местах - то на 30% то на 90%. можно ли сохраненный проект развернуть на его место просто архиватором? или это чтото не восстановит?

------------------

что за файлы появляются в каталоге download после (кажется) резервирования проекта? (*.map webdown.dat & oth) не могут и они быть использованы как не кодированный линейный вариант кары проекта? очень похоже что может

flexible_lady, если мне не изменяет память то в каких-то случаях при борьбе с пропусками мне помогало выствление таймаута больше и закачка в 1-2 нити вместо 10 по умолчанию. наск я понимаю многие сайты тормозят при большом количестве одновременных обращений и OE может просто не дождаться удовлетворения запроса.

плюс никогда не лишнее запустить разок другой загрузку отсутствующих файлов

flexible_lady
Teleport VLX v1.59 Вам в помощь.

OlegChernavin

Цитата:

Цитата: Попробую посмотреть. Пока так трудно сказать, что нужно поправить в этом формате. Не обещаю, что получится быстро сделать.
заранее благодарю.

Программа полезная, вот еще проблему с русским решить бы. Буду ждать.

Приветствую всех!

Ситуция: Пробовал с помощью "Portable Offline Browser 5.7.3110 Release" закачать сайт www.sbat.ru ... неполучилось. ИЕ открывает его свободно. Проблема в открытии конкретно прайсов с ценами.
Вопрос: как выйти из положения? Что может помочь?

AleXPwin
такие сайты пока ещё не позубам видимо ..
хотя снифером можно посмотреть, какие урл запрашивает браузер при нажатии:

03. Электротехника - Кабельно-проводниковая продукция [2]
http://www.sbat.ru/cmenu/300000000/302000000

Сечение менее 4 квадратов [11]
http://www.sbat.ru/cmenu/300000000/302000000/302100000

Алюминиевый силовой кабель
http://www.sbat.ru/catalog/data/302101000
http://www.sbat.ru/catalog/xsl/pos1.xsl

1. 73498 АВВГ 2х4-кабель силовой алюмин.дв.изол.ПВХ (1) 6.85 >100
http://www.sbat.ru/images/foto.gif
http://www.sbat.ru/pictures/mag/sb_katalog/size2/w/73498.jpg
http://www.sbat.ru/images/openFoto.gif

Доброго времени. Возник такой вопрос:

Возможно ли использовать Offline Explorer в связке с RRS-лентой (лентами) ? Поясню - есть сайт на котором есть RSS-лента ... Задаём в Offline Explorer адрес этой ленты и указываем правило : обновлять эту ленту каждый час и загрузить страницу для офф. лайн-просмотра если в ссылке на новость есть опеределённый тег ( на самом деле условие можно взять другое - например - по источнику или по времени - не старше или не младше такой то даты), плюс добавить еще условии - например уровень вложенности, файлы исключения - например не закачивать картинки и т.п.

Надеюсь идея моя более менее ясна ... Такое возможно сделать ?

Uraanfgh56

Цитата:

указываем правило : обновлять эту ленту каждый час и

В ветке Расписание можно задать минутными интервалами

Цитата:

и загрузить страницу для офф. лайн-просмотра если в ссылке на новость есть опеределённый тег (

ветка Фильтры Содержания

Цитата:

или по времени - не старше или не младше такой то даты)

есть команда для поля Урл: ModifiedSince=Mon, 06 May 2002 02:35:36 GMT

Цитата:

добавить еще условии - например уровень вложенности, файлы исключения - например не закачивать картинки и т.п.

Цитата:

добавить еще условии - например уровень вложенности, файлы исключения - например не закачивать картинки и т.п.

запросто , достаточно покавыряться в фильтрах

Добавлено:
2 OlegChernavin фича риквест :


В новых версиях добавленны кнопки для тулбара, которые открывают Свойства Проекта в нужной ветке
Очень нехватает такой кнопки для Замены Адресов.
Во вкладке Очередь не хватает колонки Уровень, чтоб видеть с какого уровня что качает в данный момент

Подскажите настройки для скачивания обучающего контента
http://cdptpa-cisco-tkl-01.cdptpa.rr.com/

Книжки-то я цисковские скачал... Интересно, как скачать Tools -> View All (By Type), и чтобы это работало в офлайне.


...А вообще-то проект повел себя странно: я сказал качать не дальше одной ссылки со сторонних сайтов, причём по ограниченному белому списку. В результате за ночь 20 гигабайт, очередь 50 тыс файлов и осьминог тянется за соверешнно левым содержимым wikimedia... Как теперь удалить ненужное?

Цитата:

...А вообще-то проект повел себя странно: я сказал качать не дальше одной ссылки со сторонних сайтов,

Видимо какой-то Тип файлов не привязан к Урл-фильтрам , поэтому и проект и уплыл не в ту сторону..

При сложной задаче скачки, чтоб упростить настройку и избегать замусоривания винчестра, желательно закачку разделить на два-три проекта..

Добавлено:

Цитата:

Как теперь удалить ненужное?

только через вкладку Карта, там ещё инструмент для выбора файлов по маскам ...

когда "ненужное" скачалось больше чем "нужное", то иногда лучше сразу удалить весь проект с файлами

Добавлено:

Нужен хороший Визуальный редактор с удобными фичами для очистки закаченных страниц. например :выделил нужное на странице , затем нажал команду удалить не выделенное
представляеться ещё такая фича на подобии группового редактирования в Экселе -
такой алгоритм : выделил табы страниц для перехода в групповой режим, затем выделил шапку, навигационные панели сайта, нажал delete

В редакторах для веб-дизайнеров наверное такие фичи не найдуться. Нужен какой-то специальный софт для этих целей.
пока что довольстуюсь Kompozer -ом

Цитата:

Видимо какой-то Тип файлов не привязан к Урл-фильтрам , поэтому и проект и уплыл не в ту сторону..

Других фильтров не настраивал. Что я сделал не так?

Изображения
Видио
Аудио

загружаются отовсюду, поэтому загрузилось столько хламу...

Аааа... А ведь это совсем неочевидно.

Навскидку фильтры УРЛ должны иметь приоритет: ведь хотлинкинг изображений в вебе давно ушёл в прошлое. Имхо.


Добавлено:

Ага, нашел где это управляется. Наверное, в программе сделано правильно. "Искусственный интеллект" в помощь.

сорри только сейчас заметил, маски на самом деле отключаются при ввключении Загружать файлы только с начально. В ранних версиях список становился блеклым в отключённом состоянии.
[more] [/more]

Добавлено:

Раньше с Урл фильтрами было интутивно всё ясно,
взаимосключающие опции становились блеклыми при включении одной из опций

Снимаю галку - и такое впечатление, что он будет шарашить как паук вглубь по внешним ссылкам. Как же скачать нужный сайт на большую глубину, но при этом и единичные внешние ссылки с нужных сайтов вытянуть по маскам?

Ну и возвращаясь к моей задаче: какие установки для неё посоветуете?

тот темплейт по умолчанию советую изменить в файловых фильтрах , все типы на загружать только с начального домена.
Уровень уменшить на 0.
в ограничениях поставить стоп при достижении 2000 файлов

будут своего рода начальные настройки:
[more=мой темплейт по умолчанию][Object]
OEVersion=Enterprise 5.7.0.3140
Type=0
IID=1
Caption=minimum
URL=Уровень=0
Типы файлов=только с начального домена
Изображения < 4кб
Дополнительно
Ограничения : стоп, если больше 2000 файлов
Weekday=257
LimBNumber=True
LimTSize=30000000
LimNumber=2000
LimTime=100
FTText.Exts=html
htm
asp
aspx
jsp
stm
stml
idc
shtml
htx
txt
text
xsp
xml
rxml
cfm
wml
php
php3
FTImages.Exts=bmp
fif
gif
ipx
j2c
j2k
jp2
jpeg
jpg
lwf
png
tif
tiff
wbmp
xbm
xoxooooxxoxoxoo
FTVideo.Exts=mpg
avi
ani
mpeg
mov
flv
fli
flc
viv
rm
ram
rv
asf
asx
wmv
m1v
m2v
vob
smil
mp4
FTAudio.Exts=wav
riff
mp3
mid
mp2
m3u
ra
voc
wma
ape
FTArchive.Exts=zip
arc
gz
z
arj
lha
lay
lei
rar
cab
tar
pak
ace
jar
pdf
tgz
exe
FTUDef.Exts=class
css
dtd
ent
js
ssi
swf
vbs
xsl
oxooxoxoo
FTText.B=ooxooo
FTImages.B=ooxoxo
FTVideo.B=xoxooo
FTAudio.B=xoxooo
FTArchive.B=xoxooo
FTUDef.B=ooxooo
FTOther.B=xoxooo
FTSizes=0,0,4,0,0,0,0,0,0,0,0,0,0,0,4,4,4,4,4,4,4
NotIgnoreLogout=False
RProt=255
LastStart=0:0:0:0:0:0:0:0:
LastEnd=0:0:0:0:0:0:0:0:
ImgDim=0,0,0,0
ConvertRSS=True
LIndexed=False
IndexFiles=False[/more]

Добавлено:
LevT
запости настройки своего проекта ... даже зная настройки трудно будет, надо будет посмотреть специфику урл этого сайта,
если закачка сложноя - главное не ставить задачу "всё в одном проекте"

я так понял где-то на втором уровне программа натыкаеться на геморрой под названием .swf .. Вот с ними уже головная боль - сабж не всегда справляеться с ивлечением линков

Добавлено:
...желательно ограничить закачку конкретными файловыми масками (Имя Файла)
мне тоже было бы ясно, что именно надо скачивать с сайта...

Переименовал папку с контентом нужного сервера, удалил проект, импортировал ваш шаблон и создал проект заново на его основе.
Разве что увеличил глубину ссылок и снял ограничение 2000 файлов (у меня точно больше).

Как теперь перелинковать старое содержимое? А то, как я погляжу, он хочет заново выкачать много десяток гигабайт контента.

Все типы файлов будут загружаться соответственно Маскам серверов
Уровень=3
Не загружать существующие файлы
Начальный УРЛ= http://cdptpa-cisco-tkl-01.cdptpa.rr.com/tools/view_all.html

Если этот сайт НЕ типа пирамиды с широким основанием, то закачает как надо
для более тонкой настройки , как написал выше надо будут маски на файлы
[more=Проект][Object]
OEVersion=Enterprise 5.7.0.3140
Type=0
IID=69058
Caption=http://cdptpa-cisco-tkl-01.cdptpa.rr.com/tools/view_all.html
URL=http://cdptpa-cisco-tkl-01.cdptpa.rr.com/tools/view_all.html
Referer=http://cdptpa-cisco-tkl-01.cdptpa.rr.com/
MVer=5
Lev=3
OtherSrvLev=1
Weekday=257
LimTSize=30000000
LimNumber=2000
LimTime=100
FMGroup=2
FTText.Exts=html
htm
asp
aspx
jsp
stm
stml
idc
shtml
htx
txt
text
xsp
xml
rxml
cfm
wml
php
php3
FTImages.Exts=bmp
fif
gif
ipx
j2c
j2k
jp2
jpeg
jpg
lwf
png
tif
tiff
wbmp
xbm
xoxooooxxoxoxoo
FTVideo.Exts=mpg
avi
ani
mpeg
mov
flv
fli
flc
viv
rm
ram
rv
asf
asx
wmv
m1v
m2v
vob
smil
mp4
FTAudio.Exts=wav
riff
mp3
mid
mp2
m3u
ra
voc
wma
ape
FTArchive.Exts=zip
arc
gz
z
arj
lha
lay
lei
rar
cab
tar
pak
ace
jar
pdf
tgz
exe
FTUDef.Exts=class
css
dtd
ent
js
ssi
swf
vbs
xsl
oxooxoxoo
FTText.B=ooxooo
FTImages.B=ooxooo
FTVideo.B=ooxooo
FTAudio.B=ooxooo
FTArchive.B=ooxooo
FTUDef.B=ooxooo
FTOther.B=ooxooo
FTSizes=0,0,4,0,0,0,0,0,0,0,0,0,0,0,0,0,0,0,0,0,0
NotIgnoreLogout=False
RSrvsIn=*.cisco.corn
tools.cisco.com
wwwin.csco.com
wwwin-tools.cisco.com
ciscotkl.training.com/
www.ciscopress.com

RProt=255
LastStart=0:0:0:0:0:0:0:0:
LastEnd=0:0:0:0:0:0:0:0:
ImgDim=0,0,0,0
ConvertRSS=True
LIndexed=False
IndexFiles=False[/more]

Спасибо, помогло значительно. Всё перелинковал, 12 тыс файлов, 22 гига всего


Но вот есть например
cdptpa-cisco-tkl-01.cdptpa.rr.com/nwol09/BRKNMS-3021/files/lobby.html

Там ссылка внутри флеша, что ли? Её выкачать невозможно?

как в Offline Explorer создать структуру проекта в виде линков, без скачивания реальных файлов?

--
P.S
об ответе сообщите в ПМ

LevT
посмотрел я, ну очень уж на сложный флеш похож
чесно говоря , c SWF я имел дело одиночно, массово не пробовл их скачивать тем более интегрированным в карту проекта. со снифером извлекал ссылки, но опять таки это когда очень нужный флэш и нужно было его иметь в дереве

есть спец тема по этому поводу :
Сохранение составного flash
miffey
Настроить проект, затем в меню Загрузка выбрать Карта Сайта

Zakkazak

Или вот
cdptpa-cisco-tkl-01.cdptpa.rr.com/netbits/security/access_lists/01_access_lists/start.htm

Это-то почему не скачалось?
http://cdptpa-cisco-tkl-01.cdptpa.rr.com/netbits/security/access_lists/01_access_lists/intro.swf

Zakkazak

Цитата:

Uraanfgh56

Цитата:указываем правило : обновлять эту ленту каждый час и


В ветке Расписание можно задать минутными интервалами

Цитата:и загрузить страницу для офф. лайн-просмотра если в ссылке на новость есть опеределённый тег (


ветка Фильтры Содержания

Нет это всё конечно хорошо , но всё таки хотелось бы как-то с помощью RSS автоматизировать процесс , а как вы предложили - конечно тоже можно , но по моему будет дольше и если скачивать сайт/страницу - с минутным интервалом - то жесткий диск очень быстро забьётся , задумка-то и состоит в том чтобы скачать страницу после выхода какой либо новости - извещение о которой приходит с помощью RSS - чтобы потом можно было неспешно прочитать всё в офф-лайн ...

Zakkazak
Предположим в Offline Explorer есть проект из структуры линков (без реальных скачанных файлов) какой-то ветки сайта.
Как эту структуру линков перенести в bookmark?
Посоветуйте.

miffey
Нет такой фичи нет, чтоб выделить нужные урл, затем нажать кнопку ,чтоб вогнать их в Букмарки Internet Explorer.

а зачем это, если не секрет ?

Uraanfgh56
сама технология RSS видимо должна это поддерживать

Цитата:

если скачивать сайт/страницу - с минутным интервалом - то жесткий диск очень быстро забьётся

в смысле можно поставить 60, 120 итд минут

В чём может быть причина?

cdptpa-cisco-tkl-01.cdptpa.rr.com/netbits/security/pix_firewall/01_pix/start.htm

Цитата:

Документ не найден
Эта страница недоступна в оффлайн. Возможные причины: это была неправильная ссылка на сервере или установки Проекта не разрешают загрузку этой страницы. В некоторых случаях может помочь увеличение Уровня в настройках Проекта.


Нажмите здесь, чтобы перейти в онлайн:
http://cdptpa-cisco-tkl-01.cdptpa.rr.com/netbits/security/pix_firewall/01_pix/01_Introduction.swf

Загрузить отсутствующую ссылку и добавить файл в выбранный проект.

Если щелкнуть - то отсутствующая ссылка загружается и добавляется.