Ru-Board.club
← Вернуться в раздел «Программы»

» HandyCache - локальный кеширующий прокси сервер

Автор: DenZzz
Дата сообщения: 10.03.2006 20:55
and3636

Цитата:
Info4Web: 'Content-Length: 832535'

Все ясно!!! Разбирайся, какая "сволочь" пишет это... Должно быть так:

Код: Content-Length: 832535
Автор: unreal666
Дата сообщения: 10.03.2006 21:01
DenZzz
unreal666
Кстати, если перед HC идет Проксомитрон и в нем включены веб-фильтр, то заголовок Content-Length тоже будет отсутствовать для файлов типа text/html, css и js. Так что если стоит Прокс, то по содержимому лучше фильтровать им, а не HC.
Автор: KireevSasha
Дата сообщения: 10.03.2006 21:04
А все-таки. Интересен ответ на вопрос о двойном кеше - прокси+Опера и обновлением картинок и т.д.

Не устраивает такая работа, даже с хоткеем для отключения "только из кеша".

Например
1. загрузил страницу - пока без картнико (включена опция "только из кеша")
2. увидел что нужны все картники на странице.
3а. средстваим оперы на тулбаре жму кнопку Show images и Опера сама подгружает недостающих картникок

3б нажав заданый хоткей для отключения опции только из кеша картники то на странице не появлятся пока я еще в опере не нажму или обновить (если в опере включены Show images). И в чем логика - когда при нажатии на F5 опера обновит и саму страницу html - логично что его прокси то будет грузить еще раз - не из кеша же брать.
А для примера загрузить http://forum.ru-board.com/misc.cgi?action=printtopic&forum=5&topic=18348 еще раз 201 кбайт если нужно картинок скачать там на 50кбайт от силы (смайлы там все и прочью мелочь). Так тут с Gzip - а там где выключен и того более.

Вот именно по этому не устраивает. Или перехватывать включение загрузки картинок из оперы и загружать их автоматом - но тогда проблема с тем что опера то их уже не просит когда загрузилась страничка. Или встраивать свою кнопку для режиа загрузки страницы напрямую связаную с кешем НС а не Оперы.
Автор: rs
Дата сообщения: 10.03.2006 21:11
C0USIN

Цитата:
Попробуй записать Оперу на флешку. Будешь иметь всегда актуальную историю.

пробовал
в конце концов отказался - то и дело нужно то вытащить флешку из компа, то на её место другую, при этом браузер не закрыт - в общем, то браузер вылетает, то ещё какая хрень - практика показала полное неудобство таокго подхода

Автор: DenZzz
Дата сообщения: 10.03.2006 21:11
unreal666
Хорошо, что я не пользуюсь Проксомитроном... Всегда знал, что от него одни проблемы...
Автор: unreal666
Дата сообщения: 10.03.2006 21:15
DenZzz

Цитата:
Хорошо, что я не пользуюсь Проксомитроном... Всегда знал, что от него одни проблемы...

И в чем же тут проблема?
Автор: and3636
Дата сообщения: 10.03.2006 21:20

Цитата:
Info4Web

Ндя..
Это фильтр в проксимитроне.Он добавляет в заголовок дополнительное поле Info4Web: Content-Length: и через него врезает в HTML тэг <title>размер этой страницы.Но он не вырезает настоящее 'Content-Length.
Вопрос разрешился.Это был глюк Proxomitrona с передачей Content-Length.

proxomitron
HTTP/1.0 200 OK
Date: Fri, 10 Mar 2006 19:12:14 GMT
Server: Microsoft-IIS/6.0
X-Powered-By: ASP.NET
Content-Length: 832535
Content-Type: text/html
Cache-control: private
Info4Web: 'Content-Length: 832535'

HC
10.03.2006 22:12:45 # 365 <<< URL: http://rnd.sunrise.ru/fullprice.asp?reg=4
HTTP/1.1 200 OK
Date: Fri, 10 Mar 2006 19:12:14 GMT
Server: Microsoft-IIS/6.0
X-Powered-By: ASP.NET
Content-Type: text/html
Cache-control: private
Info4Web: 'Content-Length: 832535'
Connection: close
Автор: unreal666
Дата сообщения: 10.03.2006 21:20
KireevSasha
Опиши нормально, чего ты вообще хочешь?
Автор: rs
Дата сообщения: 10.03.2006 21:21
DenZzz

Цитата:
Хорошо, что я не пользуюсь Проксомитроном... Всегда знал, что от него одни проблемы...

ну да
он мне экономит поболе, чем НС даже

почти всё через WebWarper идёт
Автор: unreal666
Дата сообщения: 10.03.2006 21:24
and3636
Любая страница, измененная Проксом не будет содержать заголовка Content-Length, т.к. ее размер после обработки Проксом уже будет другой и поэтому прокс не передает дальше этот заголовок.
Так что если надо блокировать HTML файлы по размеру, то блокируй самим Проксом.
Автор: DenZzz
Дата сообщения: 10.03.2006 21:29
unreal666

Для меня проблема в том, что PM распаковывает GZIP и передает в таком виде HC, может фильтровать Content-Length и мешать HC нормально работать...

И вообще, я стараюсь не лезть в код самой страницы, а блокировать рекламу на дальних подступах - по URL. Да и зачем делать работу за "криворукого" вебмастера - может, это его творческая работа... Раз уж страница закачалась, то пусть показывается так, как задумана ее создателем, кроме рекламы разумеется, с блокировкой которой прекрасно справляется браузер и HC. Проксомитрон в этой цепочке мне не нужен...


Добавлено:
rs

Цитата:
он мне экономит поболе, чем НС даже

Приведи пример страницы, рекламу на которой нельзя вырезать HC, а PM можно... Если сможешь такую найти...
Автор: unreal666
Дата сообщения: 10.03.2006 21:34
DenZzz

Цитата:
И вообще, я стараюсь не лезть в код самой страницы, а блокировать рекламу на дальних подступах - по URL.

А кто мешает делать это средствами самого Прокса?

Добавлено:
DenZzz

Цитата:
Приведи пример страницы, рекламу на которой нельзя вырезать HC, а PM можно

- Оффсайтовые ссылки
- Блокировка по типу содержимого файла.
И скорее всего он говорил про возможность использования WebWarper.
Автор: rs
Дата сообщения: 10.03.2006 21:43

Цитата:
Приведи пример страницы, рекламу на которой нельзя вырезать HC, а PM можно... Если сможешь такую найти..

я упомянул экономию посредством webwarper (gzip на лету) - режущий функционал я не упоминал
Автор: DenZzz
Дата сообщения: 10.03.2006 21:45
unreal666

Цитата:
А кто мешает делать это средствами самого Прокса?

"Прокса" - в смысле "Проксомитрона"? PM остановился в развитии и лучше уже не станет.
А HC полностью соответствует моим потребностям и развивается динамично, что меня, лично, радует.

Если "Прокса" - в смысле просто "прокси"? То я не имею возможности влиять на аппетиты моего провайдера, которому на руку большой трафик...
Автор: unreal666
Дата сообщения: 10.03.2006 21:48
DenZzz
Прокса - в смысле проксомитрона. Прокс - это проксомитрон, а прокси - это прокси-сервер. "Прокси" - не склоняется.
Цитата:
PM остановился в развитии и лучше уже не станет.

У него и так возможностей выше крыши. Нужно только уметь ими пользоваться.
Автор: DenZzz
Дата сообщения: 10.03.2006 22:06
rs

Цитата:
я упомянул экономию посредством webwarper (gzip на лету) - режущий фенкционал я не упоминал

Не знаком с этой штукой. Чем она круче HC? Приведи примеры, чтобы мы посмотрели и сказали: "Да, ты чертовски прав! Как мы глубоко заблуждались!"
Пока только слова, слова... Лично я считаю, что при грамотной настройке и нормальных списках HC вряд ли уступит другим баннеро-резалкам...
Автор: unreal666
Дата сообщения: 10.03.2006 22:11
DenZzz

Цитата:
Не знаком с этой штукой. Чем она круче HC?

Webwarper - это прокси-сервер по какому-то там адресу. Все страницы проходящие через него сжимаются gzip'ом вне зависимости.
Автор: DenZzz
Дата сообщения: 10.03.2006 22:38
unreal666

Цитата:
Webwarper - это прокси-сервер по какому-то там адресу. Все страницы проходящие через него сжимаются gzip'ом вне зависимости.

Понятно, знаю проги такого типа. Среди очевидных минусов:
- наверняка платная;
- видимо, регулярно просит денег за подписку (трафик), т.к. бесплатный сыр...
- прокси-сервер создателя не "резиновый" и может тормозить, когда много пользователей одновременно решили выйти в Инет;
- если их фильтры писали иностранцы, то для нас он неэффективны;
- не весь контент эффективно сжимается, например, картинки;
- многие сайты и так поддерживают GZIP, бесплатно...

Цитата:
- Оффсайтовые ссылки
- Блокировка по типу содержимого файла..

Интересные опции. Мы их уже как-то обсуждали. Mai62 даже обещал подумать над этим в будущем...
Пока же, не много таких URL-ов, которые нельзя заблокировать списками HC.
Автор: unreal666
Дата сообщения: 10.03.2006 22:47
DenZzz

Цитата:
Понятно, знаю проги такого типа. Среди очевидных минусов:

Webwarper - это не прога, а удаленный прокси-сервер. И он бесплатный (пока по крайней мере).

Цитата:
Пока же, не много таких URL-ов, которые нельзя заблокировать списками HC.

Хватает. Например флеш без расширения или картинки, загружаемые через серверные скрипты вида http://site.com/download.php?image=152.
Автор: DenZzz
Дата сообщения: 10.03.2006 23:10
unreal666

Цитата:
И он бесплатный (пока по крайней мере).

Удивительно! И зачем только его тогда "варезят" в Варезнике...

Цитата:
Например флеш без расширения или картинки, загружаемые через серверные скрипты вида http://site.com/download.php?image=152.

Если очень надо, то можно заблокировать через фильтр \?image= или через "большие файлы"...
Content-Type может не помочь - как отличить рекламу от полезного?

P.S. unreal666, мы опять превратили форум в диалог... Все, ушел спать...
Автор: C0USIN
Дата сообщения: 11.03.2006 00:08
DenZzz

Цитата:
И зачем только его тогда "варезят" в Варезнике...

Там WebWasher а тут речь про Webwarper
Автор: jlmurat
Дата сообщения: 11.03.2006 03:37
mai62
Спасибо огромное за ссылку на плагин к тотал командеру. сейчас намного удобнее. Мне в общем-то просмотр кэша нужен в основном для того, чтобы всякий мусор выискивать и удалять его.
А насколько сложно итерефейс Очистки кэша сделать как в Монитооре (древовидная структура)? Иногда по такому виду можно определить место положение рекламы. Это не требование, а только пожелание.

unreal666
Хочу спросить как специалиста, как загнать в черный список все, что связано с бегуном (begun) и softbn?
Автор: KoNick
Дата сообщения: 11.03.2006 07:27
unreal666

Цитата:
Webwarper - это не прога, а удаленный прокси-сервер. И он бесплатный (пока по крайней мере).

Подскажи, как ты смог использовать WebWarper в качестве ПРОКСИ-СЕРВЕРА???
У меня получается юзать только через его WEb-ИНТЕРФЕЙС!!! А это не одно и то-же...
Автор: arsvrn
Дата сообщения: 11.03.2006 08:37
KoNick

Цитата:
Подскажи, как ты смог использовать WebWarper в качестве ПРОКСИ-СЕРВЕРА???
У меня получается юзать только через его WEb-ИНТЕРФЕЙС!!!

Начни читать вот отсюда.
Автор: KoNick
Дата сообщения: 11.03.2006 08:56
arsvrn

Цитата:
Начни читать вот отсюда .

Благодарю за полезную ссылку. Это очень и очень интересно! Обязательно опробую...
Автор: and3636
Дата сообщения: 11.03.2006 08:58
KoNick
Просто подставь свой адрес в _http://webwarper.net/ww/запрашиваемыйадрес
Автор: KireevSasha
Дата сообщения: 11.03.2006 09:08
and3636

А я пользуюсь CProxy совместно с HC для таких целей - полнофункциональнй прокси-портмаппер для работы в свою очередь через другой прокси (Socks4/Socks5/HTTPS) , сжатия траффика и ясное дело укрытия от админов реальных URL.

А так в основом для сжатия траффика и ускорения загрузки.
Автор: ALeXkRU
Дата сообщения: 11.03.2006 09:49
jlmurat
04:37 11-03-2006
Цитата:
как загнать в черный список все, что связано с бегуном (begun) и softbn?

так примерно:

Код: (.)*softbn.ru
(.)*begun.ru
Автор: DenZzz
Дата сообщения: 11.03.2006 11:29
Фанатам HC и любителям WebWarper-а посвящается!

Новое правило для списка "Переадресация" (ранее "URL-конвертор"):
Правило (обязательное):
^http://(?!.*webwarper\.net/.*)(.*(site\.com)(?!.*(css|jpeg|jpg|gif|png|ico)($|\?)).*)$
Замена:
http://www.webwarper.net/ww/\1

Вместо site\.com впишите сайты (через | ), которые будут грузиться через WebWarper.
Рекламу WebWarper-а внесите в "Черный список":
.*webwarper\.net/ww/~wwservicescriptgz/.*

Критикуйте!
Автор: and3636
Дата сообщения: 11.03.2006 11:42
DenZzz
Отлично!
Теперь прикрутить бы site\.com как внешний список,как это сделано в проксимиртоне.
И ещё файлы попадали бы в родной каталог.

Страницы: 12345678910111213141516171819202122232425262728293031323334353637383940414243444546474849505152535455565758596061626364656667

Предыдущая тема: грабилка экрана под OpenGL


Форум Ru-Board.club — поднят 15-09-2016 числа. Цель - сохранить наследие старого Ru-Board, истории становления российского интернета. Сделано для людей.