» Offline Explorer

OlegChernavin

Цитата:

Но ведь можно просто нажать F9 для завершения загрузки всех файлов, если Вы хотите остановить загрузку.

Проблема не в том что остановить нельзя, а в том что докачка не поддерживается (или я ошибаюсь?) и если файлы по 20-30 мег на 2/3 скачались то все коту под хвост.
Если модем 56 кб или сервер медленный, то обидно!
В принципе программа на голову выше аналогов, так что можно было бы и докачку сделать как в Download menagers.

Как скачать результаты поиска (т.е. нужно скачивать по одной ссылке (типа next) на каждой странице)
Если ответ пробегал - киньте на него ссылку

dariusii
14:55 27-02-2005
Цитата:

Отсюда и вопрос. Планируется ли такая функция, как динамическое изменение числа соединений в зависимости от размера файла

Поддерживаю!
Олег! Нужна своего рода балансировка нагрузки на сеть --- если сервер еле теплется (и допускает множественные соединения с одного IP), то его нужно бомбить что есть мочи, а вот если связь с ним хорошая, а полоса пропускания канала связи ограниченная, то устанавливать мильон соединений бесполезно и, более того, черевато тем, что весь канал забьется служебной информацией обмена клиент-сервер по каждому потоку...
Может быть, не для всех версий, но для энтерпрайз нужно --- когда скачивается сайт на несколько гигабайт --- эффект будет.

Цитата:

Проблема не в том что остановить нельзя, а в том что докачка не поддерживается (или я ошибаюсь?) и если файлы по 20-30 мег на 2/3 скачались то все коту под хвост.
Если модем 56 кб или сервер медленный, то обидно!
В принципе программа на голову выше аналогов, так что можно было бы и докачку сделать как в Download menagers.

Докачка есть, но очень простая - если закачка файла оборвалась, то ОЕ пытается соединиться с сервером сразу-же и докачать файл. Если эта попытка не удается, то больше он и не пытается. Если сделать слишком много попыток, то застрявший файл будет занимать каналы. Например, сервер завис, а в очереди слишком много файлов с других серверов. Тогда этот один файл застопорит загрузку остальных.

Чтобы это решить, пользуйтесь интеграцией с Mass Downloader - в проекте можно настроить загрузку больших файлов с помощью его.


Цитата:

Как скачать результаты поиска (т.е. нужно скачивать по одной ссылке (типа next) на каждой странице)
Если ответ пробегал - киньте на него ссылку

В общем случае, надо просто настроить Фильтры URL - Имена файлов на загрузку именно этого типа адресов. Если не получится - дайте пример - постараюсь помочь.


Цитата:

Поддерживаю!
Олег! Нужна своего рода балансировка нагрузки на сеть --- если сервер еле теплется (и допускает множественные соединения с одного IP), то его нужно бомбить что есть мочи, а вот если связь с ним хорошая, а полоса пропускания канала связи ограниченная, то устанавливать мильон соединений бесполезно и, более того, черевато тем, что весь канал забьется служебной информацией обмена клиент-сервер по каждому потоку...
Может быть, не для всех версий, но для энтерпрайз нужно --- когда скачивается сайт на несколько гигабайт --- эффект будет.

Понимаю, но это непросто - надо будет такую балансировку делать для каждого сервера отдельно. В ОЕ распределенная очередь (большая часть ее на диске) и управлять ей гораздо сложнее, чем если бы она вся была в памяти. Тем не менее, идею понял, буду думать.

Олег,
помогите с загрузкой обложек CD c сайта http://www.coverland.co.uk
как видно, эти обложки находятся в http://files.coverland.co.uk/covers_audio/
ну и потом соответственно буковки и циферки - например
...
http://files.coverland.co.uk/covers_audio/2/*.jpg
http://files.coverland.co.uk/covers_audio/5/*.jpg
http://files.coverland.co.uk/covers_audio/T/*.jpg
http://files.coverland.co.uk/covers_audio/N/*.jpg
...

так вот, пытаюсь загрузить изображения с папки http://files.coverland.co.uk/covers_audio/N/,
но только группы Nazareth

вот одна прямая ссылка
http://files.coverland.co.uk/covers_audio/N/Nazareth_-_2_X_S_(Back).jpg

вот ещё
http://files.coverland.co.uk/covers_audio/N/Nazareth_-_Hair_Of_The_Dog_(Front).jpg

как бы всё это автоматизировать?

А есть ли страница со ссылками на эти файлы обложек? А то сервер не дает просмотреть содержимое каталога.

Цитата:

А есть ли страница со ссылками на эти файлы обложек?

вот :(
http://www.coverland.co.uk/search_covers.php?Search=nazareth&Area=covers_audio&Image1.x=23&Image1.y=14

Да, тут очень непросто. Все имена находятся в форме, которая управляется скриптом. Пожалуй, единственный способ это взять из тегов <OPTION> названия картинок и объединить их с адресом и так загрузить этот список. Конечно, это все вручную, но другого способа я не вижу.

Цитата:

единственный способ это взять из тегов <OPTION> названия картинок и объединить их с адресом

сорри, но как это сделать? можно примерчик?

Щелкнуть правой кнопкой по странице, выбрать просмотр исходного текста страницы, найти <OPTION и сделать адреса типа:

http://files.coverland.co.uk/covers_audio/N/Nazareth_-_Hair_Of_The_Dog_(Front).jpg

Цитата:

найти <OPTION и сделать адреса типа:

да я всё понял
знаю, что не в тему, но как добытся следующего:
после просмотра исходного текста страницы и удаления лишнего, получил такой список

Nazareth_-_2_X_S
Nazareth_-_Aloud_N_Alive
Nazareth_-_Bbc_Radio_1_Live_In_Concert
Nazareth_-_Exercises
Nazareth_-_Expect_No_Mercy

...чтоб получить полноценные ссылки и скачать всё надо прибить к концу каждого файла следующее

_(Front).jpg
_(Cd1).jpg
_(Cd2).jpg
_(Back).jpg
_(Inlay).jpg
_(Inside).jpg

...и перед каждым файлом

http://files.coverland.co.uk/covers_audio/N/



как можно это сделать? или какой-небудь скрипт нужен?

сорри за оффтоп

Если вышеперечисленное сохранить в текстовый файл, напр. N.txt, то можно использовать вот такие строки в поле адресов проекта:

http://files.coverland.co.uk/covers_audio/N/{:file=c:\N.txt}_(Front).jpg
http://files.coverland.co.uk/covers_audio/N/{:file=c:\N.txt}_(Cd1).jpg
http://files.coverland.co.uk/covers_audio/N/{:file=c:\N.txt}_(Cd2).jpg
http://files.coverland.co.uk/covers_audio/N/{:file=c:\N.txt}_(Back).jpg
http://files.coverland.co.uk/covers_audio/N/{:file=c:\N.txt}_(Inlay).jpg
http://files.coverland.co.uk/covers_audio/N/{:file=c:\N.txt}_(Inside).jpg

Работает?

OlegChernavin

Цитата:

Работает?

всё пучком

большое человеческое спасибо
________________________________

...осталось одно...

как(и чем) из текста...
...
<OPTION VALUE="Nazareth_-_Exercises">Nazareth - Exercises</OPTION>
<OPTION VALUE="Nazareth_-_Expect_No_Mercy">Nazareth - Expect No Mercy</OPTION>
<OPTION VALUE="Nazareth_-_Greatest_Hits">Nazareth - Greatest Hits</OPTION>
...

...оставить только нужное?

...
Nazareth_-_Exercises
Nazareth_-_Expect_No_Mercy
Nazareth_-_Greatest_Hits
...

это так, на будущее...

...сорри за ещё один оффтоп...

Пожалуй, что только текстовым редактором. Можно еще TextPipe Pro попробовать для таких операций, если надо массово подобные штуки делать. Для разовых вещей он слишком тяжеловесный.

OlegChernavin

Цитата:

Давайте по другому - нажмите Ctrl + W в программе. Появится окно сообщений. В нем щелкните правой кнопкой и снимите галку с Паузы. Затем запустите скачивание и после появления Delay 1 seconds ... остановите закачку. Запостите содержание лога здесь.

Все равно не помогает делал все как ты говорил.ничего.........проблема остается.
Я уже скачал Offline Explorer 3.6.1950 и установил ............тоже такая же проблема так что даже низнаю..................что и делать.
В этом то и проблема, дело в том что я смотрел уже Настройки - Прокси - HTTP(менял по разному.....то одни параметры выставлял то другие-эфект один т.е. никакой) , а что там точно сделать и как настроить Прокси - HTTP я незнаю. Подскажи пожалуйста OlegChernavin и если есть возможность то не мог бы напримере сайта _http://www.zakat.ru/ написать подробнее пошаговые настроики по пунктам самой Программы ..... и пошаговые настроики по пунктам Своиства Проекта .
С уважением Vmarlboro !

Проблема тут не сайтом, а скорее всего именно с настройками прокси. Я просил дать мне информацию из лога программы.

Да уж, похоже лога я не дождусь.

Я тут наконец-то перевел Offline Explorer на другую версию Дельфи (7-ю). Просьба потестить, не всплывут какие-нибудь странности:

http://www.metaproducts.com/download/betas/oep1964.zip

Вроде погонял сам - все нормально.

OlegChernavin
Извени что я не смог сразу ответить....уезжал. Спасибо тебе за твои отклики.....

Цитата:

Проблема тут не сайтом, а скорее всего именно с настройками прокси. Я просил дать мне информацию из лога программы.

Ты имеешь ввиду свойства программы описать или что? Попунктами или.....?

Нажать Ctrl+W, затем щелкнуть в окне лога правой кнопкой, снять галку с паузы, начать загрузку проекта, через некоторое время остановить загрузку и запостить здесь содержимое лога.

Если ты имеешь ввиду это: то вот оно..
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:32 AM] HTTP0: Connecting to Proxy server...
[3/10/2005 1:11:32 AM] HTTP1: Connecting to Proxy server...
[3/10/2005 1:11:33 AM] HTTP0: Connection to host www.zakat.ru failed.
[3/10/2005 1:11:33 AM] HTTP0: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:33 AM] HTTP1: Connection to host www.zakat.ru failed.
[3/10/2005 1:11:33 AM] HTTP1: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:34 AM] HTTP0: Connecting to Proxy server...
[3/10/2005 1:11:34 AM] HTTP1: Connecting to Proxy server...
[3/10/2005 1:11:35 AM] HTTP0: Connection to host www.zakat.ru failed.
[3/10/2005 1:11:35 AM] HTTP0: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:36 AM] HTTP1: Connection to host www.zakat.ru failed.
[3/10/2005 1:11:36 AM] HTTP1: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:36 AM] HTTP0: Connecting to Proxy server...
[3/10/2005 1:11:37 AM] HTTP1: Connecting to Proxy server...
[3/10/2005 1:11:38 AM] HTTP0: Connection to host www.zakat.ru failed.
[3/10/2005 1:11:38 AM] HTTP0: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:38 AM] HTTP1: Connection to host www.zakat.ru failed.
[3/10/2005 1:11:38 AM] HTTP1: Delay 1 seconds before http://www.zakat.ru/.
[3/10/2005 1:11:39 AM] HTTP0: Connecting to Proxy server...
[3/10/2005 1:11:39 AM] HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP0: Connecting to Proxy server...
HTTP1: Connecting to Proxy server...
HTTP0: Connection to host www.zakat.ru failed.
HTTP0: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connection to host www.zakat.ru failed.
HTTP1: Delay 1 seconds before http://www.zakat.ru/.
HTTP1: Connecting to Proxy server...
HTTP0: Connecting to Proxy server...
HTTP0: Aborted.
HTTP1: Aborted.
Или чтото я не правельно понял?

Это именно проблемы с настройками прокси. А что там сейчас стоит?

И опять тишина...

OlegChernavin топик не перечитывал, хоцца ответа и сразу.
Интеграция с MassDownloader происходит в OE или в MD ? и как?

При задании паузы для одной из закачек останавливаются все - в чем проблема?

столкнулся с проблемой, когда закачанный сайт отображает не все картинки, несмотря на их физическое присутствие в дереве и на винте. решается только с помощью "правый клик -> показать рисунок". если рисунков много, это причиняет определенные неудобства.

еще - после экспорта в CHM при клике на некоторые ссылки выскакивает IE, и просмотр возможен только в нем. это баг или фича? как поправить, чтобы смотреть можно было в самом CHM файле без помощи внешних приложений?

установки проекта обычные - глубина 4, качать только графику.
версия OE - 3.4.1844

Цитата:

Интеграция с MassDownloader происходит в OE или в MD ? и как?

В ОЕ - в Фильтрах Файлов можно настроить так, что файлы больше определенного размера будут передаваться MD для загрузки.


Цитата:

При задании паузы для одной из закачек останавливаются все - в чем проблема?

А как именно задается пауза для одной закачки?


Цитата:

столкнулся с проблемой, когда закачанный сайт отображает не все картинки, несмотря на их физическое присутствие в дереве и на винте. решается только с помощью "правый клик -> показать рисунок". если рисунков много, это причиняет определенные неудобства.

А во встроенном браузере разрешено показывать картинки? На его тулбаре есть такая настройка.


Цитата:

еще - после экспорта в CHM при клике на некоторые ссылки выскакивает IE, и просмотр возможен только в нем. это баг или фича? как поправить, чтобы смотреть можно было в самом CHM файле без помощи внешних приложений?

Это значит, что в HTML файлах используются popup-окна. Тут уже ничего не сделаешь - таков дизайн сайта. На самом деле, CHM - это тот-же MS IE, просто с другим тулбаром.

OlegChernavin
Есть ли готовый шаблон для 1 (одного) топика руборда (не получается пока автоматическое прекращение закачки пустых страниц при большом счетчике, счетчик приходится периодически править), также хотелось бы чтобы на компе сохранялись не ...forum.ru-board.com/topic.cgi@forum=..start=N а покороче (page=N или лучше N/20 )

Самое простое будет - Уровень=1, Фильтры URL - Имена файлов - добавить в список разрешенных масок:

topic.cgi*topic

OlegChernavin
во встроенном браузере разрешено показывать картинки. часть отображается, часть нет. зато с запрещением проблем нет - тут все четко, ни одного рисунка ))

обнаружил неудобную вещь - в окошке "Очередь" не работают стрелки вправо/влево. например, хочу я посмотреть расширение закачиваемого файла, приходится пользоваться горизонтальным скролингом внизу. сам скролинг какой-то неправильный: во-первых, он безразмерный (сравнить хотя бы с соседней вкладкой "Карта"- там он ограничен величиной самой длинной строки); во-вторых, бегунок маленький, не сразу мышом попасть можно. в соседних вкладках фича "Ctrl+стрелка" реализована, наверно про "Очередь" просто забыли )). да, можно еще сделать перемещение бегунка капельку пошустрее.

возможно, я плохо искал - есть ли в справке раздел "Сочетания клавиш"? если нет, то стоит создать. может стоит повесить на каждое окно фиксированный hotkey, типа как в Опере и др.:
Проекты ---- Ctrl+1
Карта ---- Ctrl+2
Очередь ---- Ctrl+3
Браузер ---- Ctrl+4

да и во встроенном браузере тоже неплохо было бы синхронизировать клавиши с обычными браузерами (Esc, Backspace, F5 и т.д. и т.п. etc)

это бы повысило удобство и скорость работы с программой.