Ru-Board.club
← Вернуться в раздел «Программы»

» MetaProducts Offline Explorer™ / Portable Offline Browser™

Автор: OlegChernavin
Дата сообщения: 08.02.2007 12:54
В Фильтрах URL - Имена файлов разрешить:
all_materials.php
*.zip
Автор: AmdAd
Дата сообщения: 14.02.2007 02:27
Как загрузить картинки с этой страницы:
http://gallery-lq8f7gj1nvph3vh.usercash.com/?key=huw3b5qnxzizh1flvnzpmmuk

Проболема в том, что OE сканирует куда идут ссылки, доходит до тех картинок которые размещены на img***.imagevenue.com, ставит их прямые адреса в очередь, но на imagevenue.com прямые ссылки генерируются только на небольшое время, потом они меняются. За это время скачаться все просто не успевает. Т.е. можно сделать так, чтобы OE доходил до картинки с прямым адресом, скачивал её и только после этого переходил к следующей?
Поставить кучу соединений тоже не подходит.
Автор: OlegChernavin
Дата сообщения: 14.02.2007 13:06
Можно добавить в поле адресов
Additional=DepthFirst
Автор: AmdAd
Дата сообщения: 14.02.2007 20:26
Да, но нужно скачать те картинки которые находятся дальше по нажатию на маленьких картинках. Если поставить Additional=DepthFirst все правильно качается первый уровень, но эти картинки не нужны - они только для предпросмотра.

Там ситуация такая-
на мал. картинке поставлена ссылка на хttp://******.usercash.com/ ->
открывается страница **.usercash.com/ ->
в ней открывается img***.imagevenue.com ->
тут загружается большая картинка (хttp://img161.imagevenue.com/[-здесь адрес меняется-]/loc512/555555.jpg), ссылка на которую генерируется автоматически и каждый раз по-разному.
Автор: Zakkazak
Дата сообщения: 14.02.2007 21:15
AmdAd
Попробуй вбить страницы с фотками напрямую [more]
Код: http://img161.imagevenue.com/img.php?image=52658_Alyssa_Milano_FHM0001_122_512lo.jpg
http://img167.imagevenue.com/img.php?image=52647_Alyssa_Milano_FHM0002_122_459lo.jpg
http://img12.imagevenue.com/img.php?image=52659_Alyssa_Milano_FHM0003_122_556lo.jpg
http://img108.imagevenue.com/img.php?image=52674_Alyssa_Milano_FHM0004_122_440lo.jpg
http://img111.imagevenue.com/img.php?image=52677_Alyssa_Milano_FHM0005_122_375lo.jpg
http://img148.imagevenue.com/img.php?image=52691_Alyssa_Milano_FHM0006_122_361lo.jpg
http://img155.imagevenue.com/img.php?image=52687_Alyssa_Milano_FHM0007_122_455lo.jpg
http://img172.imagevenue.com/img.php?image=52707_Alyssa_Milano_FHM0010_122_508lo.jpg
http://img124.imagevenue.com/img.php?image=52700_Alyssa_Milano_FHM0011_122_412lo.jpg
http://img174.imagevenue.com/img.php?image=52714_Alyssa_Milano_FHM0012_122_444lo.jpg
http://img167.imagevenue.com/img.php?image=52720_Alyssa_Milano_FHM0013_122_348lo.jpg
http://img103.imagevenue.com/img.php?image=52723_Alyssa_Milano_FHM0014_122_472lo.jpg
http://img28.imagevenue.com/img.php?image=52744_Alyssa_Milano_FHM0015_122_598lo.jpg
http://img40.imagevenue.com/img.php?image=52735_Alyssa_Milano_FHM0016_122_524lo.jpg
http://img149.imagevenue.com/img.php?image=52761_Alyssa_Milano_FHM0017_122_439lo.jpg
http://img109.imagevenue.com/img.php?image=52748_Alyssa_Milano_FHM0018_122_542lo.jpg
http://img25.imagevenue.com/img.php?image=52759_Alyssa_Milano_FHM0019_122_371lo.jpg
http://img154.imagevenue.com/img.php?image=52771_Alyssa_Milano_FHM0020_122_596lo.jpg
http://img172.imagevenue.com/img.php?image=52769_Alyssa_Milano_FHM0021_122_574lo.jpg
http://img131.imagevenue.com/img.php?image=52776_Alyssa_Milano_FHM0022_122_441lo.jpg
http://img141.imagevenue.com/img.php?image=52789_Alyssa_Milano_FHM0023_122_383lo.jpg
http://img40.imagevenue.com/img.php?image=52783_Alyssa_Milano_FHM0025_122_484lo.jpg
http://img24.imagevenue.com/img.php?image=52794_Alyssa_Milano_FHM0026_122_432lo.jpg
http://img164.imagevenue.com/img.php?image=52802_Alyssa_Milano_FHM0027_122_531lo.jpg
http://img150.imagevenue.com/img.php?image=52814_Alyssa_Milano_FHM0028_122_412lo.jpg
http://img162.imagevenue.com/img.php?image=52807_Alyssa_Milano_FHM0029_122_505lo.jpg
Автор: AmdAd
Дата сообщения: 14.02.2007 21:22
Zakkazak
Неа. ОЕ опять сканирует все линки, забивает прямые ссылки на .jpg в очередь, ну а тут опять тоже самое - "генерируются только на небольшое время, потом они меняются. За это время скачаться все просто не успевает"

Как качать с imagevenue.com на автомате? Вопрос...
Автор: Zakkazak
Дата сообщения: 14.02.2007 21:39

Цитата:
Как качать с imagevenue.com на автомате? Вопрос...

Вот ответ на твой вопро видимо на халяву никак не получитса.

Цитата:
4. Is hotlinking allowed?
Hot linking is embedding an image into a message board, personal webpage, or ebay auction. You can hotlink thumbnails leading to large images. To hotlink large images you need to open a premium acount.


Добавлено:

Цитата:
генерируются только на небольшое время, потом они меняются. За это время скачаться все просто не успевает

Можно еще с помощю Сиквенсером автоматизировать. По пять линков на каждый проект, А потом проекты запустить последовательно. В этом случае должно успется. Я пробовал по 5 фоток...
Автор: AmdAd
Дата сообщения: 14.02.2007 22:38

Цитата:
Можно еще с помощю Сиквенсером автоматизировать.

Хм, да еще не заметил этой фишки. Недавно только 4й ОЕ установил. Правда это тоже не выход. Это тут 26 фоток, бывает и по 100 . Хотя можно 10 соединиений поставить тогда получится как бы активная загрузка и они не будут удалятся.
Автор: OlegChernavin
Дата сообщения: 15.02.2007 12:16
Может сделать одну нитку и одну секунду задержки между загрузками, тогда сразу будет сканироваться в глубину при Additional=DepthFirst
Автор: AmdAd
Дата сообщения: 15.02.2007 20:29
OlegChernavin
Во, теперь пошло. Там по ходу дела я еще неправильно ставил Additional=DepthFirst - надо было в самом низу списка ссылок вписывать. Соединений (ниток? ) даже 5 поставил все нормально.
Благодарю!
Автор: Zakkazak
Дата сообщения: 15.02.2007 20:36
AmdAd

Цитата:
это тоже не выход. Это тут 26 фоток, бывает и по 100

Копируеш эти 100 линков разом. Затем в сабже кликаешь на Вставить с нажатой Shift. Качаешь получившиеся проекты последовательно
Автор: OlegChernavin
Дата сообщения: 15.02.2007 21:22
AmdAd
Ну, по идее, все равно, в какой строке это ставить. Главное, чтобы на отдельной строке. Эффект виден по вкладке очереди - новые файлы добавляются наверх, а не в конец ее.
Автор: rikitiki_2006
Дата сообщения: 18.02.2007 06:00
Немного изменил проект для Noname. Теперь дополнительно, в разделе "Пользовательские", установил галку на css. Дело в том, что внутренние, браузеров, вечно терялись, особенно у Оперы.
Еще очень удобно просматривать ссылки типа "Читать далее и "Подробно" через "Избранное" браузеров (это когда вместо двойного щелчка по проекту на "Обзор" нажимаешь). Создаешь в "Избранном" временно папку, обозвав ее, к примеру текущей датой, а затем перетаскиваешь туда понравившееся мышкой или через контекст. У меня в проекте помечена он-лайн трансляция ссылок, так что их иожно сразу таскать. Когда все отберешь, обычно штук 30, подключив он-лайн, стукаешь по папке колесиком мыши и все тридцать, разом, загружаются в новых вкладках. Правда для Noname нужно сперва логин включить, а то ссылки на Рапидку не увидишь. У них это по дурацки выполнено. Если логин выключен, то виден календарь, но не видны ссылки на Рапидку. Они видите ли для зарегистрированных пользователей. Если логин включишь, то календаря не видно. Без него по датам перескакивать не комфортно.
В Опере же можно прикольно вкладки мозаикой разложить (через "Упорядочить") и одновременно просматривать.
Еще в проекте я точку на "Загружать все файлы" поставил. А то мне иногда OE старье подсовывал.
И в заключении хочу предложить ссылку на книжку:
HTML, CSS, Скрипты: практика создания сайтов
Автор: Ломов А. Ю.
Издательство: БХВ - Санкт-Петербург
Год: 2006 г.
Страниц: 416
Формат: djvu
Размер: 18.5 MB
ISBN: 5-94157-833-4
Качество: 600dpi - отличное
Серия или Выпуск: Самоучитель
h**p://rapidshare.com/files/15601134/html_1_.css.scripts.rar
Это я на Nоnаме увидел. Может кому пригодится при освоении OE. Правда хорошая она или плохая не могу судить. Сам еще не читал.
Да, вот что хочу спросить. Чем в ОЕ пункты "Обзор" и "Просмотреть в" отличаются? У меня там одни и те же браузеры (IE7, Firefox, Opera) стоят и все одинаково работает.
Автор: OlegChernavin
Дата сообщения: 19.02.2007 13:11

Цитата:
Да, вот что хочу спросить. Чем в ОЕ пункты "Обзор" и "Просмотреть в" отличаются? У меня там одни и те же браузеры (IE7, Firefox, Opera) стоят и все одинаково работает.


Изначально планировалось, что можно будет использовать программы просмотра файлов (напр. графики), которые отличаются от браузеров. В принципе, как показала практика, большого смысла от этого нет, но пока возможность остается.
Автор: DayWalker
Дата сообщения: 28.02.2007 16:36
Доброго дня,
народ подскажите как настроить проект, чтоб скачался ПОЛНОСТЬЮ весь сайт или выложите тут шаблон для полной скачки сайтов.
В часности меня интересует сайт, ну например, вот этот. http://www.cssat.ru/


Добавлено:
он у меня качается частично, глубину выставил на 9999, куда уж больше
Автор: AmdAd
Дата сообщения: 28.02.2007 20:53
Как бороться с обрывами связи?
Вот к примеру в очереди стоят файлы, произошел обрыв связи и ОЕ начинает загружать следущии ссылки, которые записаны в проекте. Можно сделать так, чтобы ОЕ останавливал загрузку при обрыве?
У меня дозвон идет через внешнюю программу.
Автор: DNS07
Дата сообщения: 01.03.2007 17:11
у меня такой вопрос. вчера поставил на закачку один сайт, утром встал скачано 60 % только, сделал следующее. Меню Загрузка - Приостановить в файл, т.е. закачка останавливается с возможностью дальнейшего продолжения. Сейчас пришел, запустил докачку сайта, а ОЕ не качает, и проверяет уже скачаные вчера файлы и страницы. Уже 2 часа проверяет, как это исправить или выход один, только ждать ?
Автор: dAnIK SeNT
Дата сообщения: 01.03.2007 21:28
Вопрос к знатокам и разработчикам.
Можно ли с помощью Offline Explorera добиться вот этого:
http://forum.ru-board.com/topic.cgi?forum=5&topic=1621&start=260#18
?
Автор: AmdAd
Дата сообщения: 01.03.2007 21:40
DNS07
В настройках проекта может что не то стоит. Там попробуй поставить "Не загружать существующие файлы".
Автор: DNS07
Дата сообщения: 02.03.2007 04:49
AmdAd
так дело в том, что ОЕ их не загружает, а просто как бы проверяет на обновления все ссылки сайта которые уже были загружены, а нах мне это надо, тупизм какой то...

Добавлено:
всё разобрался с проблемой. оказывается на сайте мой IP забанили, почему и не шла закачка отсутствующих файлов включил щас прокси и все пошло докачивать
Автор: OlegChernavin
Дата сообщения: 02.03.2007 22:46

Цитата:
Как бороться с обрывами связи?
Вот к примеру в очереди стоят файлы, произошел обрыв связи и ОЕ начинает загружать следущии ссылки, которые записаны в проекте. Можно сделать так, чтобы ОЕ останавливал загрузку при обрыве?
У меня дозвон идет через внешнюю программу.


Если позволяет кол-во попыток, то эти файлы идут в конец очереди и потом заново пытаются.

DayWalker

А что именно не скачалось?

dAnIK SeNT

Можно использовать кнопку автосохранения на панели встроенного браузера. Технология проста. Нужен сайт, создаем новый проект с адресом этого сайта. Никаких настроек больше не нужно. Выбираем этот проект в дереве проектов, нажимаем кнопку АвтоСохранение и потом кнопку просмотра сайта оффлайн. Offline Explorer будет качать отстутствующие файлы по запросу из браузера и добавлять их в проект. Ссылки в файлах будут меняться на оффлайновые.
Автор: dAnIK SeNT
Дата сообщения: 02.03.2007 23:08
OlegChernavin
Хм. Интересно, попробую проверить.
Оно же будет работать в триале?

Но в идеале хотелось бы, конечно, чтобы всё тоже самое работало при открытии сайта во внешнем браузере (через встроенный веб-сервер ОЕ).

Купил бы тогда ОЕ не раздумывая сразу

Добавлено:
OMG! It's working!

С нажатой кнопкой автосейв оно работает именно так, как надо, в т.ч. через внешний браузер! Восхитительно.
Видимо, будем брать.
Видимо, версию Pro.
Автор: OlegChernavin
Дата сообщения: 03.03.2007 11:24

Цитата:
Хм. Интересно, попробую проверить.
Оно же будет работать в триале?


Конечно!


Цитата:
Но в идеале хотелось бы, конечно, чтобы всё тоже самое работало при открытии сайта во внешнем браузере (через встроенный веб-сервер ОЕ).


Частично в этом направлении я начал работать - сервер в ОЕ может работать как прокси. Но сохранение страниц, проходящих через него я пока не делал. Пока не придумал, как быть с каталогизацией.
Автор: dAnIK SeNT
Дата сообщения: 03.03.2007 19:01
OlegChernavin
Так оно работает!
Я создаю проект, нажимаю кнопку "автосохранение" во встроенном браузере, открываю ссылку вида http://127.0.0.1:800/Default/site.ru/ во внешнем браузере (Опера) - и начинаю сёрфить. Все файлы сохраняются как надо

Оно, конечно, не как прокси. Но текущий подход даже удобнее - по виду урла я всегда могу контролировать - какие страницы я открываю напрямую через инет, а какие - через ОЕ.

Добавлено:
А... Выяснился момент.
Каждая новая открытая страница добавляет строчку вида SingleURL= в список урлов.
Адекватно ли оно будет работать, когда количество таких урлов превысит несколько тысяч? Что будет, если я захочу докачать проект до конца - сориентируется ли программа в этом безобразии?
По мне - так надо, чтобы оно просто загружало файлы и добавляло их в map. Без добавления каких-то строчек в список урлов.

Добавлено:
Выяснился ещё один момент... Оно чудовищно тормозит.
Открываю, к примеру страницу - там сотен пять тамбнейлов с описаниями к картинкам.
Грузится минут 10, при 100%-ной загрузке процессора. Хотя все картинки уже прежде скачаны ОЕ из Интернета. Часть картинок не загружается в браузер вовсе - видимо, по таймауту.
Фигня какая-то.

Добавлено:
Ещё один недостаток.
Когда открываешь картинку, которая должна закешироваться- ОЕ выдает данные только после того, как полностью картинку загрузил.
Часто браузер просто отваливается по таймауту, после чего приходится давить Ф5.
Было бы лучше, если бы ОЕ выдавал запрошенные данные по мере загрузки файла.

Добавлено:
Ещё проблема - мобильность
Я просматриваю одни и те же сайты из дома и с работы. Надо синхронизировать.
Как я понимаю, сейчас, чтобы перенести проект из одного места в другое, скопировать папочку с ним недостаточно. Это очень и очень не гуд. Папочка с проектом должна быть самодостаточна. Имхо, идеальный в этом плане подход у Teleport'а.
Автор: OlegChernavin
Дата сообщения: 04.03.2007 11:36

Цитата:
По мне - так надо, чтобы оно просто загружало файлы и добавляло их в map. Без добавления каких-то строчек в список урлов.


Это было сделано для корректного обновления проекта потом. Вроде проблем с тысячами адресов не должно быть.


Цитата:
Часто браузер просто отваливается по таймауту, после чего приходится давить Ф5.
Было бы лучше, если бы ОЕ выдавал запрошенные данные по мере загрузки файла.


Да, это надо будет оптимизировать. Хотя страницы сначала полностью скачиваются, ссылки вних меняются и только потом они отдаются. Картинки - может быть смогу отдавать по мере поступления данных.


Цитата:
Ещё проблема - мобильность
Я просматриваю одни и те же сайты из дома и с работы. Надо синхронизировать.
Как я понимаю, сейчас, чтобы перенести проект из одного места в другое, скопировать папочку с ним недостаточно. Это очень и очень не гуд. Папочка с проектом должна быть самодостаточна. Имхо, идеальный в этом плане подход у Teleport'а.


Там тоже есть свои недостатки. Но в ОЕ можно использовать резервное копирование в меню Сервис.
Автор: dAnIK SeNT
Дата сообщения: 04.03.2007 20:17
OlegChernavin

Цитата:
Это было сделано для корректного обновления проекта потом. Вроде проблем с тысячами адресов не должно быть.

Хм. А как оно обновляется, когда добавляешь только начальный УРЛ и нажимаешь "скачать"? При этом-то строчек вида SingleURL не добавляется. А проект обновляется вполне корректно.
Вот при открытии отдельных страниц бы такую же структуру создавать

Цитата:
Хотя страницы сначала полностью скачиваются, ссылки вних меняются и только потом они отдаются.

А на лету ссылки менять разве никак нельзя? Или ссылки не за один проход заменяются?

Цитата:
Там тоже есть свои недостатки.

Например? Я не про недостатки Телепорта в принципе, а про недостаток конкретно подхода к хранению данных.

Цитата:
Но в ОЕ можно использовать резервное копирование в меню Сервис.

Четыре раза в день пользоваться этой фичей - неудобно. Да и вообще мне очень не нравится, что какие-то данные, относящиеся к проекты хранятся отдельно от самого проекта. Мало ли что произойдёт - систему ли придётся переставить, к примеру, дефрагментатор ли полфайла схарчит...

Ну и 100%-ная загрузка процессора - это очень не гуд.
Автор: OlegChernavin
Дата сообщения: 05.03.2007 13:02

Цитата:
Хм. А как оно обновляется, когда добавляешь только начальный УРЛ и нажимаешь "скачать"? При этом-то строчек вида SingleURL не добавляется. А проект обновляется вполне корректно.


Также будут закачиваться/проверяться и ссылки в SingleURL=, только они грузятся с уровнем=0.


Цитата:
Например? Я не про недостатки Телепорта в принципе, а про недостаток конкретно подхода к хранению данных.


Для каждого проекта надо отдельно задавать настройки папки. Не всегда это нужно, чаще пользователям все равно, где что как хранится, главное, закачать и посмотреть.

Второй плюс моей модели в том, что разные проекты могут использовать те-же файлы (картинки, стили), особенно если разными проектами качать части одного сайта - в таком случае эти файлы не будут заново скачиваться и будут меньше места на диске занимать.

А разные папки для сохранения в ОЕ тоже поддерживаются - через свойства папок проектов.


Цитата:
А на лету ссылки менять разве никак нельзя? Или ссылки не за один проход заменяются?


За один проход. Но в ОЕ такая структура - скачиваются по очереди файлы, потом отдаются в очередь для обработки.

Автор: dAnIK SeNT
Дата сообщения: 05.03.2007 14:30
OlegChernavin

Цитата:
Также будут закачиваться/проверяться и ссылки в SingleURL=, только они грузятся с уровнем=0.

оно раздражает. т.к. иногда надо добавить собственные новые стартовые адреса и рыскать среди тысяч строчек типа SingleURL - неудобно. я сейчас далею так - просто удаляю все добавленные SingleURL. Файлы из очереди при этом не пропадают, отображается впоследствии всё нормально... Зачем тогда добавлять эти строчки?
короче:
а) можно ли реализовать это без добавления "SingleURL="?
б) будет ли это реализовано?


Цитата:
Второй плюс моей модели в том, что разные проекты могут использовать те-же файлы (картинки, стили), особенно если разными проектами качать части одного сайта - в таком случае эти файлы не будут заново скачиваться и будут меньше места на диске занимать.

Согласен.

Цитата:
А разные папки для сохранения в ОЕ тоже поддерживаются - через свойства папок проектов.

Это уже гут, но хотелось бы иметь возможность настройки папки хранить в виде файла в самой папке или рядом с ней. Пусть опциональную возможность, но чтобы она была.
Сейчас эти данные где хранятся? В реестре? В папке с программой? В профиле пользователя?


Цитата:
За один проход. Но в ОЕ такая структура - скачиваются по очереди файлы, потом отдаются в очередь для обработки.

Изменить - никак невозможно?
Это было бы крайне удобно.
Но вообще - хотя бы картинки/видео/флешки и т.п.
Автор: hash0ff
Дата сообщения: 05.03.2007 23:00
выкачка JAVA-скриптов работает нормально?
Я, к римеру, не могу выкачать страницу
http://genphys.phys.msu.ru/rus/lab/mech/128/mex128.htm

Именно из-за скриптов
Автор: OlegChernavin
Дата сообщения: 06.03.2007 23:02

Цитата:
а) можно ли реализовать это без добавления "SingleURL="?
б) будет ли это реализовано?


Не знаю, потому что это может быть удобно в других случаях.


Цитата:
Это уже гут, но хотелось бы иметь возможность настройки папки хранить в виде файла в самой папке или рядом с ней. Пусть опциональную возможность, но чтобы она была.
Сейчас эти данные где хранятся? В реестре? В папке с программой? В профиле пользователя?


Все в файле webdown.dat


Цитата:
Изменить - никак невозможно?
Это было бы крайне удобно.
Но вообще - хотя бы картинки/видео/флешки и т.п.


Понимаю, попробую сделать, но не обещаю.



Добавлено:
hash0ff

А что не так? Я сейчас скачал с уровнем=1 - страница нормально смотрится со всеми ява-апплетами.

Страницы: 12345678910111213141516171819202122232425262728293031323334353637383940414243444546474849505152535455565758596061626364

Предыдущая тема: Unreal Commander


Форум Ru-Board.club — поднят 15-09-2016 числа. Цель - сохранить наследие старого Ru-Board, истории становления российского интернета. Сделано для людей.