» HandyCache - локальный кеширующий прокси сервер

У меня странный глюк, очень часто после разрыва соединения становится недоступной панель задач Windows (та что внизу где меню Пуск и значки в трее). Сама система не зависает, между программами можно переключаться через Alt-Tab. Это проходит если подождать 1-2 минуты. В этом случайно обнаружил виноват HandyCache (как мне показалось когда он постепенно захватывает ~ 10MB памяти). Приходится его отключать через диспетчер задач и заново запускать, после этого все нормально на какое-то время. Стоит WinXP(SP2). Это только у меня?

mai62

1. А прямые линки в списки можно добавлять? Пишу +www.blablabla.com — не работает. Пишу +*blablabla.com — работает. А мне вот хочется именно www.blablabla.com.

2. Нельзя ли добавить в меню правого клика в мониторе что-нибудь типа Открыть папку в кэше? Чтобы не открывать кучу папок, если понадобился какой-нибудь файл.

Спасибо.

В последнее время программа стала часто вылетать в момент установки соединения, в окне с сообщением об ошибке написано:
Подпись ошибки

Цитата:

AppName: handycache.exe AppVer: 0.9.2.0 ModName: ntdll.dll
ModVer: 5.1.2600.1201 Offset: 00007ec4[q/]
В отчет будут включены следующие файлы
Далее содержимое файла appcompat.txt

[q]
<?xml version="1.0" encoding="UTF-16"?>
<DATABASE>
<EXE NAME="HandyCache.exe" FILTER="GRABMI_FILTER_PRIVACY">
<MATCHING_FILE NAME="HandyCache.exe" SIZE="400384" CHECKSUM="0x663FE311" BIN_FILE_VERSION="0.9.2.0" BIN_PRODUCT_VERSION="0.9.2.0" PRODUCT_VERSION="0.9.2.0" FILE_DESCRIPTION="HTTP Proxy server with cache" COMPANY_NAME="MAI" PRODUCT_NAME="HandyCache" FILE_VERSION="0.9.2b" ORIGINAL_FILENAME="HandyCache.exe" INTERNAL_NAME="HandyCache" LEGAL_COPYRIGHT="MAI" VERFILEDATEHI="0x0" VERFILEDATELO="0x0" VERFILEOS="0x4" VERFILETYPE="0x1" MODULE_TYPE="WIN32" PE_CHECKSUM="0x65EE6" LINKER_VERSION="0x0" UPTO_BIN_FILE_VERSION="0.9.2.0" UPTO_BIN_PRODUCT_VERSION="0.9.2.0" LINK_DATE="06/19/1992 22:22:17" UPTO_LINK_DATE="06/19/1992 22:22:17" VER_LANGUAGE="Русский [0x419]" />
<MATCHING_FILE NAME="unins000.exe" SIZE="641508" CHECKSUM="0xF4B1C052" BIN_FILE_VERSION="51.34.0.0" BIN_PRODUCT_VERSION="51.34.0.0" PRODUCT_VERSION="" FILE_DESCRIPTION="Setup/Uninstall" COMPANY_NAME="" PRODUCT_NAME="Inno Setup" FILE_VERSION="51.34.0.0" ORIGINAL_FILENAME="" INTERNAL_NAME="" LEGAL_COPYRIGHT="Copyright (C) 1997-2005 Jordan Russell. Portions Copyright (C) 2000-2005 Martijn Laan." VERFILEDATEHI="0x0" VERFILEDATELO="0x0" VERFILEOS="0x4" VERFILETYPE="0x1" MODULE_TYPE="WIN32" PE_CHECKSUM="0x0" LINKER_VERSION="0x0" UPTO_BIN_FILE_VERSION="51.34.0.0" UPTO_BIN_PRODUCT_VERSION="51.34.0.0" LINK_DATE="06/19/1992 22:22:17" UPTO_LINK_DATE="06/19/1992 22:22:17" VER_LANGUAGE="Английский (США) [0x409]" />
</EXE>
<EXE NAME="ntdll.dll" FILTER="GRABMI_FILTER_THISFILEONLY">
<MATCHING_FILE NAME="ntdll.dll" SIZE="654336" CHECKSUM="0x61BB0ED8" BIN_FILE_VERSION="5.1.2600.1201" BIN_PRODUCT_VERSION="5.1.2600.1201" PRODUCT_VERSION="5.1.2600.1201" FILE_DESCRIPTION="NT Layer DLL" COMPANY_NAME="Microsoft Corporation" PRODUCT_NAME="Microsoft® Windows® Operating System" FILE_VERSION="5.1.2600.1201 (xpsp2.030405-1324)" ORIGINAL_FILENAME="ntdll.dll" INTERNAL_NAME="ntdll.dll" LEGAL_COPYRIGHT="© Microsoft Corporation. All rights reserved." VERFILEDATEHI="0x0" VERFILEDATELO="0x0" VERFILEOS="0x40004" VERFILETYPE="0x2" MODULE_TYPE="WIN32" PE_CHECKSUM="0xA93AA" LINKER_VERSION="0x50001" UPTO_BIN_FILE_VERSION="5.1.2600.1201" UPTO_BIN_PRODUCT_VERSION="5.1.2600.1201" LINK_DATE="04/11/2003 08:27:19" UPTO_LINK_DATE="04/11/2003 08:27:19" VER_LANGUAGE="Английский (США) [0x409]" />
</EXE>
<EXE NAME="kernel32.dll" FILTER="GRABMI_FILTER_THISFILEONLY">
<MATCHING_FILE NAME="kernel32.dll" SIZE="903680" CHECKSUM="0x72F2D558" BIN_FILE_VERSION="5.1.2600.1152" BIN_PRODUCT_VERSION="5.1.2600.1152" PRODUCT_VERSION="5.1.2600.1152" FILE_DESCRIPTION="Windows NT BASE API Client DLL" COMPANY_NAME="Microsoft Corporation" PRODUCT_NAME="Microsoft® Windows® Operating System" FILE_VERSION="5.1.2600.1152 (xpsp2.021217-1051)" ORIGINAL_FILENAME="kernel32" INTERNAL_NAME="kernel32" LEGAL_COPYRIGHT="© Microsoft Corporation. All rights reserved." VERFILEDATEHI="0x0" VERFILEDATELO="0x0" VERFILEOS="0x40004" VERFILETYPE="0x2" MODULE_TYPE="WIN32" PE_CHECKSUM="0xE7953" LINKER_VERSION="0x50001" UPTO_BIN_FILE_VERSION="5.1.2600.1152" UPTO_BIN_PRODUCT_VERSION="5.1.2600.1152" LINK_DATE="04/11/2003 08:27:18" UPTO_LINK_DATE="04/11/2003 08:27:18" VER_LANGUAGE="Английский (США) [0x409]" />
</EXE>
</DATABASE>

GregoryPek
такого глюка не наблюдал, памяти у меня много и 10mb не жалко. Hа шпионов и всякую другую дрянь проверял (проги Ad-Aware, Spy-Bot)?

GregoryPek

Цитата:

У меня странный глюк, очень часто после разрыва соединения становится недоступной панель задач

Разрыв соединения по какой причине?

Цитата:

Сама система не зависает

Что происходит с НС? Зависает или работает?

Цитата:

Это проходит если подождать 1-2 минуты

1-2 минуты после чего? А если подождать еще? Что с загрузкой процессора в это время?
Описанное Вами происходит с самого начала использования НС? Или раньше этого не было?
nickddd

Цитата:

1. А прямые линки в списки можно добавлять? Пишу +www.blablabla.com — не работает. Пишу +*blablabla.com — работает. А мне вот хочется именно www.blablabla.com.

Если написать +blablabla.com, то будет работать. Дело в том, что я перед запуском фильтров убираю www. из URL.

Цитата:

2. Нельзя ли добавить в меню правого клика в мониторе что-нибудь типа Открыть папку в кэше? Чтобы не открывать кучу папок, если понадобился какой-нибудь файл.

OK.
CriticalMass

Цитата:

В последнее время программа стала часто вылетать в момент установки соединения

Что предшествовало наступлению "последнего времени"? Соединение устанавливаете какой программой?

mai62

Цитата:

Разрыв соединения по какой причине?

Обычный, после окончания сеанса разрываю.

Цитата:

Что происходит с НС? Зависает или работает?

Нет нормально, работает.

Цитата:

1-2 минуты после чего?

1-2 минута после того как разорвал соединение и зависла панель задач Windows.

Цитата:

А если подождать еще?

Потом она оживает и все нормально.

Цитата:

Что с загрузкой процессора в это время?

Все в норме.

Цитата:

Описанное Вами происходит с самого начала использования НС? Или раньше этого не было?

Да примерно так, просто я сначала не связывал это с HC. Но факт, если выгрузить HC после "зависания" панели задач, то она сразу оживает.

mai62
Дозвон осуществляется по комбинации клавиш навешенных на ярлык соединения в windows, т.е. без помощи каких либо программ. Как мне кажется, хотя я и не уверен, вылеты участились после накопления кеша, т.е. пока кеш был маленький, вылетала редко.
Кстати говоря заменил у себя глюк описанный GregoryPek
раньше я думал что это Maxthon чудит, а оказалось HC.

GregoryPek
CriticalMass
Текущая версия пытается контролировать диал ап соединение даже если установление/разрыв производится без участия НС. Подозреваю, что в этом причина проблем. В след. версии поправлю.

mai62
Заранее спасибо. А скоро она выйдет?

Ну и еще один глюк хотя я опять не уверен в причине. При работе в Maxthon в нескольких вкладках относящихся к разным сайтам при переходе по ссылке в одной вкладке вместо этой ссылки открывается окно с сайта открытого в другой вкладке с сообщением что страница не найдена (откуда ж ей взяться на этом сайте), происходит редко исправляется перезапуском HC.

CriticalMass

Цитата:

А скоро она выйдет?

Я сейчас в отпуске, у компьютера бываю редко. Думаю, что через несколько дней что-нибудь выложу.

Цитата:

при переходе по ссылке в одной вкладке вместо этой ссылки открывается окно с сайта открытого в другой вкладке с сообщением что страница не найдена

Если НС работает без родительского прокси, то я догадываюсь в чем причина. В след. версии тут будут изменения, надеюсь, к лучшему.

mai62

Цитата:

Я сейчас в отпуске, у компьютера бываю редко. Думаю, что через несколько дней что-нибудь выложу.

А я как раз вышел из отпуска
И унес конфигурацию, вместе с кешем в контору, и действительно - ошибка "502 Bad Gateway", довольно редкая. (только когда 404 ошибку возвращает сервер удаленный)
--
Кстати в связи с этим, повторю чью то просьбу, нельзя ли 404 и прочие ошибки выдавать все же в браузер, а не простой чистый экран? (да и 502 лучше вываливать в браузер.)

Nimnul

Цитата:

Кстати в связи с этим, повторю чью то просьбу, нельзя ли 404 и прочие ошибки выдавать все же в браузер, а не простой чистый экран? (да и 502 лучше вываливать в браузер.)

Я выдаю коротенькие html-ки и при 404 и при 502 ошибках. Но браузеры их почему-то не хотят показывать, заменяют своими. Чистый IE (без надстроек), например, показывает мою html-ку на 404 и заменяет своей при ошибке 502. Opera же заменяет мою html-ку при 404 ошибке своей, а на 502 вообще показывает пустую страницу.

mai62
Очень нужная и полезная программа.
Но есть несколько вопросов:

-собирается ли автор открыть ее исходники, что ускорит добавление новых функций и отладку прогу?

-как организован дисковый кэш? ведь не секрет , что некоторые запросы могут превышать в длинну 255 символов, между слешами, и как кодируются символы которые запрещены в файловой системе FAT и NTFS такие как ? и др.

-кроме запросов с ответами no-cache есть еще и другие no-store, private и др как кэшируются они а также запросы post и запрос get c параметрами запроса после знака вопроса?

mai62

Цитата:

заменяет мою html-ку при 404 ошибке своей, а на 502 вообще показывает пустую страницу

Понятно...

Smirnovi

Цитата:

-собирается ли автор открыть ее исходники, что ускорит добавление новых функций и отладку прогу?

Вот этого вряд ли. Я бы не открыл.
Во-первых это не выгодно автору.
Во-вторых ничего это не ускорит, а скорее внесет хаос. (только не надо кивать на оупен сорс, там все таки разработчики умеющие работать в команде и уже не один год, причем проекты начинались с нуля и хорошо документируются...)
В-третьих радоваться надо что бесплатно

Цитата:

как организован дисковый кэш? ведь не секрет , что некоторые запросы могут превышать в длинну 255 символов, между слешами, и как кодируются символы которые запрещены в файловой системе FAT и NTFS такие как ? и др.

А самому глянуть в кеш слабо?

Код: topic.cgi?=topic.cgi^

mai62
Почему-то при работе в FireFox из кэша HC берется ~35-40% траффика, а при работе в Opera - только ~ 16-17%. Что можно сделать, чтобы и в Opera информация бралась из кэша HC? Заранее благодарен.

Smirnovi

Цитата:

как кодируются символы которые запрещены в файловой системе FAT и NTFS такие как ? и др.

тут уже ответили
http://forum.ru-board.com/topic.cgi?forum=5&bm=1&topic=16397&start=200

tanned

Цитата:

Что можно сделать, чтобы и в Opera информация бралась из кэша HC?

попробуй уменьшить кеш оперы

tanned

Цитата:

Что можно сделать, чтобы и в Opera информация бралась из кэша HC?

В Опере очень хороший встроенный кеш и если она находит что-то в своем кеше, то, естественно, не запрашивает у НС. Попробуй его отключить - увидишь много процентов

Smirnovi

Цитата:

собирается ли автор открыть ее исходники

Пока нет.

Цитата:

есть еще и другие no-store, private и др как кэшируются они

Игнорируются
На остальные вопросы уже ответили.
tanned

Цитата:

Почему-то при работе в FireFox из кэша HC берется ~35-40% траффика, а при работе в Opera - только ~ 16-17%.

Согласен с V0lt и arsvrn.

mai62
Хотелось бы иметь возможность увеличить агрессивность кеширования, т.е. иметь возможность сохроанять предыдущие состояния страниц.
Это было в первой версии coolproxy,во
второй куда-то исчезло, а в offline Explorer есть аж три варианта сохранения копий старых файлов. Это очень удобно для создания архива любимых сайтов, которые просматриваешь каждый день,а иначе много важной информации теряется.
При нынешнем соотношении цены места на диске и трафика хотелось бы иметь
возможность кешировать ВСЕ!!!
Имею еще много идей по совершенствованию программы, но хотел бы кое что
сообщить конфиденциально , но нигде не видел адрес Автора,если не секрет,хотел
бы узнать.

mai62

Как обстоят дела с кэшированием редиректов?
С кодами 301 и 302 , очевидно для них придется сохранять на диске специальные файлы

И еще вопрос.
С помощью каких компонентов велась разработка?

vovatupin

Цитата:

предыдущие состояния страниц.

Это конечно интересно, но как вызывать старую копию и как новую? И самое главное как их отличать?

Цитата:

но нигде не видел адрес Автора,если не секрет,хотел
бы узнать.

Отправить личное сообщение для пользователя mai62
Smirnovi

Цитата:

С помощью каких компонентов велась разработка?

Мне думается это чистый дельфи... (хотя есть подозрение на RxLib).

mai62
не сочтите за нахождение в танке, но после прочтения всего топика и установки программы появилась масса вопросов, на которые не могу найти ответа ни тут ни в факе.

нельзя ли, как ранее тут уже просили, подготовить некое подобие темплейтов/пресетов/т.п. с детальным описанием каждого параметра, чтобы можно было качественно отстроить такую великолепную программу, причем было бы весьма приятно, если пресеты каким-то образом еще были заточены под конкретные браузеры и/или вообще связки различных программ и ситуаций (например прямой выход в инет, парент-прокси и т.п.)

несколько часов работы показали 43% попадания в кеш, что после Proxy+ не может не радовать.

огромное спасибо.

DAphnie

Цитата:

нельзя ли, как ранее тут уже просили, подготовить некое подобие темплейтов/пресетов/т.п. с детальным описанием каждого параметра, чтобы можно было качественно отстроить такую великолепную программу, причем было бы весьма приятно, если пресеты каким-то образом еще были заточены под конкретные браузеры и/или вообще связки различных программ и ситуаций (например прямой выход в инет, парент-прокси и т.п.)

Это все вряд ли, т.к. все настройки индивидуальны.
Настройки данные автором практически оптимальны для начинающего, а дальше, как говорил великий Ленин...
И вообще все зависит от того как используешь интернет. У меня например это постоянный обход двух трех форумов. Причем я не люблю делать закладки, и у меня настроено так что если инфа есть в кеше она всегда выдается из кеша, а если ее нет, то она берется из инета, если мне нужно обновить страничку, то при нажатии контрола + обновить в браузере я получаю новую страничку из интернет.

vovatupin

Цитата:

Хотелось бы иметь возможность увеличить агрессивность кеширования, т.е. иметь возможность сохроанять предыдущие состояния страниц

Тут много вопросов. Некоторые из них задал Nimnul. Опишите подробнее, как Вы это себе представляете.
Мой mail есть на вкладке О программе
Smirnovi

Цитата:

Как обстоят дела с кэшированием редиректов?
С кодами 301 и 302 , очевидно для них придется сохранять на диске специальные файлы

А что там кешировать? Там же, насколько я понимаю, данные не приходят. Приходит только сообщение, что данные находятся в другом месте.

Цитата:

С помощью каких компонентов велась разработка?

Delphi7
Indy
RxLib
BergNextSuite
Ну и еще кое что по мелочам.
DAphnie

Цитата:

нельзя ли, как ранее тут уже просили, подготовить некое подобие темплейтов/пресетов/т.п. с детальным описанием каждого параметра

Этого пока нет. Планируется сохранение/загрузка конфигураций.

mai62
В offline exlorere предусмотрены следующие форматы сохранения старых файлов вместо перезаписи:
1) name.htm(2)
2) name(2).htm
3) name_2.htm
4) name(дата\время указанного формата).htm
Мне лично больше нравится вариант 2, с ним автоматически получается удобный архив.
А для просмотра циферку можно и руками ввести... Хотя я предпочитаю в этом случае
пользоваться CoolProxy там есть преполезнейшие фичи index.all/dirname/ и
index.tree/dirname/ первая выдает список файлов в папке, а вторая разворачивает
карту папки. Единственный недостаток, что при этом запускается автоочистка кеша , а
он уменя 12 гиг...Об проблеме с неуправляемой автоочисткой люди Юру уже полгода
просят , но вы же в курсе как там с поддержкой ...
Кстати очень хотелось бы иметь что-то похожее и в этой программе.
И еще вопрос ко всем может кто подскажет , как бороться с неправильными архивами,
где самый свежий файл добавляется под номером 1, а следующие сдвигаются на 1. Закачаешь такой сайт качалкой, а как потом обновить?Вся структура теряется
например fishki.net medigo.ru и много других .Как можно их локальный архив поддерживать в актуальном состоянии?

Mai62 есть предложения и вопросы:

1 думаю что лучше не сокращать в кэше имена сайтов, начинающихся на www, так как www.ya.ru и ya.ru могут быть разными сайтами.

2 записывать в файл и полный ответ сервера для того чтобы работали куки
в автономном режиме.

3 в случае других запросов кроме GET (для запроса POST) также сохранять и запрос к серверу с переданными данными (конечно если передается не файл а только параметры)

4 хранить только файлы не сохраняя заголовки бесполезно, так как все равно
невозможно будет загрузить страничку минуя автономный режим HandyCache.
Причина проста,- для этого нужно будет модифицировать код и ссылки страницы.

5 как работает HandyCache в случае одновременной загрузки одного и тогоже URL?
Если использовать твою прогу как прокси для большого количества юзеров то такая ситуация неизбежна.

6 Цитата:Как обстоят дела с кэшированием редиректов?
С кодами 301 и 302 , очевидно для них придется сохранять на диске специальные файлы

А что там кешировать? Там же, насколько я понимаю, данные не приходят. Приходит только сообщение, что данные находятся в другом месте.

Данные действительно не приходят а только заголовок. Однако без их кэширования странички в автономном режиме работать не будут. Например на странице какая нибудь картинка показывается через редирект.

7 неплохо бы было добавить список перекодировки на закладку списки, вынув его изнутри программы чтобы иметь возможность изменять перстановку символов самому при записи на диск например изменять : на ! и др.

8 горячие кнопки для временного включения режимов неудобны и много их не упомниш
гораздо удобнее по одной кнопке выводить всплывающее окошко с перключателями и в нем одной из цифровых клавиш выбирать включить или выключить режим

P.S. Не могу найти BergNextSuite

mai62

Цитата:

Тут много вопросов. Некоторые из них задал Nimnul

Меня мой конфиг больше чем устраивает. Все очень агрессивно, как я и хотел, страничка не обновляется до тех пор пока я ее принудительно не обновлю.
А эти навороты, типа архивы и прочее, для меня это не актуально - не нужно.
Во-первых, все нужные странички я сохраняю в chm, а во вторых если нужно поднять старую страничку, часто она бывает в webarchieve.org...
Так что с полной ответственностью могу заявить: НС можно настроить на агрессивное кеширование!


Добавлено:
PS
Все остальное это доп. сервис, не имеющий никакого отношения к кеширующему прокси... Все IMHO.

А нельзя сделать в HandyCache поддержку не просто родительского прокси в виде ПРОКСИ:ПОРТ, а поддержку URL автоматической настройки прокси (как в броузерах)???

Nimnul
Я прошу прощения конечно, но вы случаем раньше не имели в начале ника 044h, 072h?

Цитата:

Это все вряд ли, т.к. все настройки индивидуальны.
Настройки данные автором практически оптимальны для начинающего, а дальше, как говорил великий Ленин...

Ну в моем посте была же оговорка про танк... не зеленка я какая-нибудь...

Цитата:

И вообще все зависит от того как используешь интернет. У меня например это постоянный обход двух трех форумов.

аналогично, только еще сюда добавляются блоги, варезники и пр. То, что можно тащить через фиды, то естественно посещается редко, только когда в фиде есть действительно интересующее.

Цитата:

Причем я не люблю делать закладки, и у меня настроено так что если инфа есть в кеше она всегда выдается из кеша, а если ее нет, то она берется из инета,

вот тут на вкус и на цвет третий лишний... мне привычнее на те места, где бываю регулярно все-таки делать закладки.

DAphnie

Цитата:

Я прошу прощения конечно, но вы случаем раньше не имели в начале ника 044h, 072h?

Неа... [Дата регистрации: 05-02-2003] с тех пор и Nimnul я

Цитата:

Ну в моем посте была же оговорка про танк... не зеленка я какая-нибудь...

Ну и в путь, а чего не понятно спрашиваем! Постараемся помочь...

Цитата:

вот тут на вкус и на цвет третий лишний... мне привычнее на те места, где бываю регулярно все-таки делать закладки.

Я ж предпочитаю сервис "Закладки" подобному как на ru-board & iXBT.com...
А с закладками на темы я забил. Темы растут и обновлять каждый раз все 25 сообщений ради одной цифири что бы узнать есть ли новая страничка - нееет... (А браузеры пока не имеют макроса типа "%GoToLastPageFromThisThread%". (да и форумы пока эту фичу не поддерживают).
По этому я обновляя одну страничку типа закладок убиваю сразу много зайцев
Во всех ветках что я отвечал сразу видно есть ли новый ответ