Ru-Board.club
← Вернуться в раздел «Программы»

» MetaProducts Offline Explorer™ / Portable Offline Browser™

Автор: rzt
Дата сообщения: 20.12.2007 06:52
Zakkazak
для приведённого в примере n82 шаблон подошёл, а тот же шаблон применил для http://www.mobile-review.com/review/nokia-6233.shtml — не работает
сразу скажу замена адресов – слишком сложно для понимания обычного юзера
вот мои настройки для проекта #
/#
также пробовал фильтры URL-> имя файла->произвольная конфигурация
и почему-то не работает закачка фотографий из http://www.mobile-review.com/review/image/nokia/6233/photo/*/*.jpg
ещё раз хочу подчеркнуть при всём уважении к программе – настройки для сложных проектов очень неудобны и непонятны для большинства юзеров
Автор: Dmb_2007
Дата сообщения: 20.12.2007 22:34
Скажите пожалуйста, в последних версиях не появилось возможности удалять ссылки, по которым не должно производиться скачивание? Или хотя-бы размещать по этим ссылкам "заглушки", как это было в Диско-качалке?
Я что-то не нашел в макросах и фильтрах такой опции.
А разработчик здесь еще появляется?
Автор: Zakkazak
Дата сообщения: 21.12.2007 00:32
rzt
В проекте есть несколько ошибок:
1) В поле Адреса звездочку (*) использовать невозможно.
2) В Имя Файла надо выбрать произвольная конфигурация.
Достаточно одной маски:
http://*mobile-review.com/review/image/*/*
http://*mobile-review.com/review/image/nokia/6233/photo/*/*

У меня все прекрасно скачалось с предидущими настройками. В замену Урл можно еще добавить это правило
http://*mobile-review.com/*/image/*/photo/ /low-*.jpg /*.jpg
Автор: Dmb_2007
Дата сообщения: 21.12.2007 01:29
Хм... Это плохо...
А как-же избавляться от таких ссылок?
Автор: rzt
Дата сообщения: 21.12.2007 10:47

Цитата:
Может быть хелп сабжа было бы лучше оформить
вообще предлагаю типовые случаи прямо записать в шапку хотя бы через #/#

Цитата:
В замену Урл можно еще добавить это правило
http://*mobile-review.com/*/image/*/photo/ /low-*.jpg /*.jpg
Спасибо – только теперь дошло для чего нужна замена
Автор: giger2
Дата сообщения: 21.12.2007 15:07

Цитата:

Таймаут
Это значение поможет тонко настроить Ваши загрузки. Если Offline Explorer Pro ожидает данные из Интернет дольше, чем время (в секундах), указанное в настройках времени ожидания ответа сервера, то соединение будет прервано. Большое число времени ожидания обычно означает непорядок в пути к серверу.

што здесь имеется ввиду? время закачки файла? или время отклика сервера?
Автор: MrPerfect
Дата сообщения: 21.12.2007 20:07
giger2

Цитата:
или время отклика сервера?

Да, таймаут - время ожидания ответа сервера.

Zakkazak

Цитата:
folder*/*.zip

Увы, я смогу вам подправить только после того, как это сделает Олег. Вероятно маска в виде folder*.zip будет более приемлемой.
Автор: ERG73
Дата сообщения: 27.12.2007 13:25
Подскажите!
Хочу закачать некоторые темы с forum.ixbt.com (ссылки для закачки имеют вид http://forum.ixbt.com/topic.cgi?id=62:11475-1 и т.д.).
Все закачивается, что мне надо, но просмотреть их не могу - все время вылазит ошибка на странице типа: Error: 'list_before' is undefined и т.д.
Получается что я что-то не докачиваю?
Автор: korosya
Дата сообщения: 29.12.2007 21:26
Пытаюсь скачать сайт http://localization.net.ru/, но при просмотре в оффлайне даёт следующее

Java Script Error
Description:Cинтaкcичecкaя oшибкa
Source:http://127.0.0.1:800/%CF%E0%EF%EA%E0/localization.net.ru/
Line:2
See more details?

и предлагает OK или Отмена. При нажатии на любую кнопку показывает страницу нормально. Подскажите, где собака порылась?
Автор: StupidUser
Дата сообщения: 06.01.2008 01:49
OlegChernavin
Сейчас я встал перед выбором программы для "скачивания" сайтов для последующего просмотра в offline, и у меня есть несколько простых вопросов для особо "ступидных" пользователей Скажем так, в "упрощенной" формулировке.

Как записываются "скачиваемые" сайты на диск:
- Структура папок такая же, как на сайте, или другая? (Понятно, что теперь такое разнообразие сайтов, особенно с "динамической структурой", что о папках и говорить-то не всегда можно. Но хотя бы, где можно.)
- Файлы записываются на диск с оригинальными датами (для сайтов "отдающих" эту информацию)?
- Какова логика обновления сайта при наступлении следующих событий.
1. Что будет при замене на сайте файла, если
а). имя то же, размер и дата разные;
б). имя то же, дата та же, размер другой;
в). имя то же, размер тот же, дата другая.
2. Что будет, если пользователь удалил на локальном диске некоторые уже закачанные файлы (ведь в проекте они помечены как закачанные)? Будут ли они скачаны заново?

Есть и другие вопросы, но они зависят от ответов на эти.

Спасибо.
Автор: metrim
Дата сообщения: 07.01.2008 05:28
Собстно вопрос такой:
Вот я выпотрошил какой то сайт с помощью ОффЭксплорера. Собстно мне с него нужна только медия (изображения, архивы и пр.)
Всё что мне нужно - лежит в папке ну например files.site/media/ я вот только вот лежит всё это в разных подпапочках типа files.site/media/78/65/что.то files.site/media/69/21/что.то files.site/media/85/64/что.то и т.д. Поэтому мне так же нужны и остальные файлы вйта, что бы перекомпановать медийны файлы по директориям.
Собственно всё это решаемо вполне несложным образом вручную, после скачивания сайта я просто переношу все файлы находящиеся в папкеи подпапках files.site/media/ в соответствующие им директории
Структуру же страниц я оставляю там где она лежит
НО
Сайт периодически обновляется и мне хочется сохранить возможность скачивать только новые файлы, не перекачивая заново уже скачанные и удалённые мною файлы.
Как это реализовать?
Ведёт ли "Проект" какую то "базу" скачанных файлов, что бы он не проверял их наличие/отсутствие/соответствие, а раз скачав их уже не пытался скачать их заново ...
Автор: Molt
Дата сообщения: 07.01.2008 10:38
Блин, сломал голову: как можно загрузить с сайта файлы только вида con*.asm ? Ставлю Типы файлов > Другие > Согласно фильтрам URL, в фильтре URL > Имя файла > Маска включения имен файлов: con*.asm
Проект начинает качать, шастает по первой странице и все, дальше в каталоги не лезет (
Автор: Ruxx
Дата сообщения: 09.01.2008 00:03
Скачал проект.Впапках вместе с файлами остались лежать файлы проекта Descr.WD3.
Как их удалить сразу из всех папок/подпапок?
Автор: metrim
Дата сообщения: 09.01.2008 09:46
Заметил такую неприятность при работе с ОЕ:
Когда работает мюТоррент и одновремено ОЕ - система постоянно вываливается в BSOD
Вроде как происходит это даже не когдапроект качается, а когда я ОБНОВЛЯЮ уже существующий (весьма большой , на 14+ гигов) проект
Автор: Frantishek
Дата сообщения: 09.01.2008 16:47
Подскажите плиз где ошибка. Хочу скачать форум исключив мусор (страницы авторизации, пользовательские страницы и пр.).
Ссылки на топики вида -
http://forum.homesite.org/showthread.php?t=191&page=1
http://forum.homesite.org/showthread.php?goto=lastpost&t=1974
Ставлю качать все по фильтрам URL и задаю фильтр на файловые имена вида showthread.php?t=*
В результате вообще ничего не качается...
Спасибо за помощь.
Автор: clockerxxx
Дата сообщения: 09.01.2008 20:40
Не могу никак скачать следующую информацию:


Добавлено:
Здравствуйте.
Не могу никак скачать файлы, ситуация следующая:
1) Страница находится на форуме(т.е. страница в виде форумного сообщения), необходима авторизация, чтобы можно было просмотреть страницу
2) Ссылки в виде картинок ведут на другую страницу другого сервера, а именно imagevenue.com, где уже имеется конечный адрес картинки типа http://locrand.imagevenue.com/fasdjfljsd/94123_name.jpg

Возможно ли скачать все эти картинки, учитывая то, что для просмотра главной страницы(см. п1) необходимо вводить логин и пароль, ведь только с этой страницы можно получить В ИТОГЕ прямые ссылки на imagevenue, т.к. там все имена сгенерены автоматически без какого-либо алгоритма.
Если возможно, то какие настройки необходимо поставить, а то я уже кучу вариантов перепробовал, и че-то никак, может туплю?
Заранее спасибо!
Автор: AlexandrSFX
Дата сообщения: 11.01.2008 02:42
1.Не знаю как у других, но меня сильно добивают тормоза программы. Если очередь проекта насчитывает неск. тыс. ссылок или идет обработка сотен страниц при обновлении проекта, то тормоза гарантированны - прога просто вешается/задумывается и перестает качать. Проц вроде не совсем древний - пень 2400мгц, 1гб озу. Проблема переходит из старых версий к новым.

2. Очень не хватает подробной помощи к проге, что русская, что английская очень мало инфы.

3. А в остальном отличная прога, пользуюсь уже года 3.

Frantishek
У меня был проблемный форум, заработал так:
Ссылки вида:
http://forum.ru/index.php?showtopic=126463
http://forum.ru/index.php?showtopic=126463&st=100
Ловятся масками для файлов, полными и без звездочки на конце:
http://forum.ru/index.php?showtopic=

Плюс замена УРЛов, чтоб форумные сессии отсечь из ссылок
http://*s=*& -------- s=*& ------- пусто
http://*&sid=* ------&sid=* ------ пусто
Вот такие к примеру
http://forum.ru/index.php?s=dc23ab25e6b79a847972bd1ebf50b9b2&showforum=110
станут такими как должны быть:
http://forum.ru/index.php?showforum=110
Автор: Frantishek
Дата сообщения: 11.01.2008 22:34
AlexandrSFX
Спасибо за совет, но так тоже не получается, ничего не качает...
Автор: Zakkazak
Дата сообщения: 11.01.2008 23:30
Frantishek
Попробуй этот шаблон для такого типа форумов. В настройках форума поставь - по 20 постов на странице

clockerxxx
В проект всавляешь команду Cookie=парам1=***; парам2=*** и проект автаризируется...
На предидущих страницах есть решение, если твой форум такого же типа как у Frantishek-а, то это решение подойдет и для тебя.
Автор: Frantishek
Дата сообщения: 12.01.2008 22:12
Zakkazak
Спасибо! Все заработало!
А как добавить загрузку вложений для данного шаблона проекта? (чтобы отображались встроенные картинки и сохранялись атачменты)
Автор: bredonosec
Дата сообщения: 13.01.2008 03:53
StupidUser

Цитата:
- Структура папок такая же, как на сайте, или другая?
такая же. Можешь при экспорте указать сбросить всё в одну папку, но по дефолту - идентично.

Цитата:
Файлы записываются на диск с оригинальными датами
на старых версиях записывало с датой скачки. как сейчас - хз.

Цитата:
2. Что будет, если пользователь удалил на локальном диске некоторые уже закачанные файлы (ведь в проекте они помечены как закачанные)? Будут ли они скачаны заново?
да. Если удалишь wd3 файл из папки - тож сольются утда заново..
metrim

Цитата:
Ведёт ли "Проект" какую то "базу" скачанных файлов, что бы он не проверял их наличие/отсутствие/соответствие, а раз скачав их уже не пытался скачать их заново ...
а оставить в папках (где на сайте оригинально лежали) "заглушки" - ака файлы нулевого размера с идентичными скачанным и перенесенным именами - не пробовал? У меня когда-то прокатило

Molt

Цитата:
Согласно фильтрам URL, в фильтре URL > Имя файла > Маска включения имен файлов: con*.asm
Проект начинает качать, шастает по первой странице и все, дальше в каталоги не лезет (
эээ.. а разве он не должен сначала слить странички, где будут ссылки на твой тип файлов? Он же и страницы тож по фильтру этому льёт.. Вот получается, надо добавить "текстовые" - тип (как у сайта страницы), нужная глубина, а потом текстовые удалить (напр, через поиск файлов по разрешению в тотале и контрол А, шифт-дел
Автор: Zakkazak
Дата сообщения: 13.01.2008 12:04
Frantishek
По шаблону картинки размером больше 3 кб не будут загружатьса. Надо отключить ограничение.

Примеры линка атчментов приведи, чтоб составить еще одну маску включения. Я этот шаблон год назад составлял, все не припомню.


Цитата:
Спасибо! Все заработало!
Проверь хорошенько, Если в твоих настройках на форуме "шаг" страниц больше или меньше 20 постов, то проект будет пропускать страницы. По умолчанию бывает 10 или 15.

rzt

Цитата:
вообще предлагаю типовые случаи прямо записать в шапку хотя бы через #/#

Замена Урл плохло постятся на руборд. поэтом не все проекты можно будет записать.

Добавлено:
У модеров в Файловом архиве надо бы место попросить...
Автор: Frantishek
Дата сообщения: 13.01.2008 15:00
Zakkazak

Цитата:
Примеры линка атчментов приведи

http://www.forum.homesite.org/attachment.php?attachmentid=194&stc=1&d=1119173269
http://www.forum.homesite.org/images/attach/jpg.gif
http://www.forum.homesite.org/customavatars/avatar761_1.gif

Цитата:
...По умолчанию бывает 10 или 15

Точно, по умолчанию стоит 15, а что и где нужно исправлять?, просто я этот форум качаю без авторизации, там нет тем, недоступных незарегистрированным пользователям.
Автор: Zakkazak
Дата сообщения: 13.01.2008 22:39
Frantishek

Цитата:
Точно, по умолчанию стоит 15, а что и где нужно исправлять?

В замене Урл и Масках включения. Правила в Замене Урл должны оставаться в той же последовательности


Цитата:
http://www.forum.homesite.org/attachment.php?attachmentid=194&stc=1&d=1119173269

такое правило включения в Имени Файла например:
^attachment.php
Автор: StupidUser
Дата сообщения: 14.01.2008 01:37
bredonosec
Спасибо.

OlegChernavin и All
Пока без ответа следующие вопросы:
1. Файлы записываются на диск с оригинальными датами (для сайтов "отдающих" эту информацию)?
Цитата:
на старых версиях записывало с датой скачки. как сейчас - хз.

2. Что будет при замене файла на целевом сайте, если у него:
а). имя то же, размер и дата разные;
б). имя то же, дата та же, размер другой;
в). имя то же, размер тот же, дата другая.
Будут ли закачаны новые версии файлов в случаях а) б) в)?
Автор: Molt
Дата сообщения: 14.01.2008 02:32

Цитата:
эээ.. а разве он не должен сначала слить странички, где будут ссылки на твой тип файлов? Он же и страницы тож по фильтру этому льёт.. Вот получается, надо добавить "текстовые" - тип (как у сайта страницы), нужная глубина, а потом текстовые удалить (напр, через поиск файлов по разрешению в тотале и контрол А, шифт-дел

Вобще-то да. А можно просто заставить прогу просмотреть всю структуру сайта и отобрать для загрузки только те, что соответвуют условию?
Автор: OlegChernavin
Дата сообщения: 14.01.2008 15:17
Простите, что долго отсутствовал.

StupidUser

Для Offline Explorer-а самым главным признаком изменения файла будет дата, отдаваемая сервером. Но для большинства динамических сайтов страницы будут всегда "новыми".

Но если сайт отдал новую дату, которая более поздняя, чем закачанный файл, то он будет перезаписан, даже в случае совпадения размеров.

Если дату сайт ее сообщает, то можно дополнительно в проекте указать проверку размера. В случае неизменной даты, размер не принимается во внимание.

Так что будут закачаны в случаях а) и в)

На самом деле логику с датами определяет сам сервер. Offline Explorer лишь его спрашивает, не изменился ли файл с ХХ-хххххх-ХХХХ. И если нет, то сервер ничего не пришлет. Иначе пришлет файл, который Offline Explorer может опционально проверить по размеру.

Molt

Да, есть возможность построения карты сайта в меню Загрузка.

В новой версии (5.0) будет еще вкладка Уровни, в которой можно будет еще более визуально по шагам загружать интересующие страницы.

metrim

Попробуйте изменить установку флага NTLM в Настройках - Прокси - будет использоваться в Offline Explorer другой метод скачивания файлов и он может быть более совместимым.

Ruxx

Эти файлы необходимы для корректной работы со скачанным сайтом. В них находится информация для корректного обновления. Содержимом файлов (MIME-тип) нужно для экспорта, резервной копии, просмотра в оффлайн через встронный сервер, поиска и т.д.

korosya

А какой именно сайт? Возможно, это из-за гугловской рекламы.

kimserge

Это Макросы URL - например, http://www.site.com/file{:1..100}.htm

Если были какие-то еще вопросы, на которые я за последние 3 месяца не ответил, запостьте их снова, пожалуйста. Постараюсь оперативно отвечать, как и раньше.

Добавлено:

Цитата:
Какие параметры влияют на скорость обработки (той, которая в нижнем левом углу)? А то уж больно долго она у меня идет. Скачал некоторую часть сайта (прим 2Гб/80К страниц), он обрабатывает где-то по 3 страницы в секунду - эдак я до скончания века буду с одним сайтом возится

ЗЫЖ При этом идет 100% загрузка ЦП

ЗЫЫЖ У меня в "Дополнительно" стоит: Проверять целостность, Игнорировать ошибки, Исследовать формы (может формы убрать =/ )

При этом количество обработанных и загруженных файлов неумолимо растет - закачанных уже 150 тыс файлов (при поставленной на паузу закачке)!


Да, обработка форм и скриптов намного увеличивает время обработки страниц. Следующий фактор - использование списков включенных-исключенных слов в Фильтрах URL. Если они большие, обработка будет замедляться, т.к. каждая найденная в странице ссылка будет с ними сравниваться.

Автор: iparchim
Дата сообщения: 14.01.2008 18:00
Прошу прощенья, что задаю , возможно, банальный вопрос - но случилось страшное : папка , куда все проекты складывал, при переустановке восстановилась, а сами проекты погибли. Нет ли способа их вернуть к жизни?
Автор: korosya
Дата сообщения: 14.01.2008 18:33
OlegChernavin

Цитата:
korosya

А какой именно сайт? Возможно, это из-за гугловской рекламы.

Я же пмсал: http://localization.net.ru. Эта же проблема была у DmitryKz здесь
Автор: StupidUser
Дата сообщения: 14.01.2008 20:17
OlegChernavin
Спасибо. Остался без ответа вопрос:
Цитата:
1. Файлы записываются на диск с оригинальными датами (для сайтов "отдающих" эту информацию) или с датой закачки?

Страницы: 12345678910111213141516171819202122232425262728293031323334353637383940414243444546474849505152535455565758596061626364

Предыдущая тема: Unreal Commander


Форум Ru-Board.club — поднят 15-09-2016 числа. Цель - сохранить наследие старого Ru-Board, истории становления российского интернета. Сделано для людей.