» HandyCache ( Часть 5 )

DenZzz

Цитата:

Не будь так категоричен! Посмотри хотя бы здесь или здесь счетчик Рамблера внизу! Таких "исключений" из твоего "правила" можно найти много...

Эти баннеры я решил просто не обновлять, поскольку они не приводят к накапливанию огромного количества файлов на диске. Вот их URLs, они не изменяются и попадают в стандартное правило "Не обновлять" для картинок:
http://top100-images.rambler.ru/top100/banner-88x31-rambler-gray2.gif
http://pics.rbc.ru/img/ver99/counter_rambler.gif

Думаю, это даже не счётчики, а просто баннеры. Они один раз скачались - и больше не обновляются!
Думаю, они даже не относятся к разряду тех, из-за которых надо заморачиваться! проблемой являются именно баннеры, url которых постоянно меняется - да ещё и большого размера сама картинка! Вот такие баннеры - просто наглая подстава для посетителя сайта со стороны вэб-мастера!


Цитата:

Или вот еще пример: http://mumurik.narod.ru/hc.html на правый счетчик внизу твое правило не сработает!

Исправил свои правила в Правилах для счётчиков. Теперь работают! Спасибо за замечание.

ZONE51

Цитата:

чтобы картинки с них грузились тока один первый раз а потом по моему требованию

Добавь правило (оно должно присутствовать и по умолчанию):
#5#~#True#~#(.)*\.(jpg|jpeg|png|gif|bmp|ico)#~#(\.imageshack\.us/gal\.php|\.rapidshare.de\.access(\d)*\.png)#~##~#
Естественно, галочка "Разрешен" в списке "Не обновлять" должна стоять... Проверь Белый список.
А как ты себе представляешь частичную загрузку текста? Это утопия...

Цитата:

Добавь правило (оно должно присутствовать и по умолчанию):
#5#~#True#~#(.)*\.(jpg|jpeg|png|gif|bmp|ico)#~#(\.imageshack\.us/gal\.php|\.rapidshare.de\.access(\d)*\.png)#~##~#

Можно для непонятливых объяснить куда нужно добавить это правило?
Почему при попытке добавить сообщение стало появляться

Цитата:

HandyCache: File http://forum.ru-board.com/post.cgi not found in cache.

раньше такого не было, чтобы добавить это сообщение пришлось отключить в настройках браузера прокси сервер.

goga11

Цитата:

Можно для непонятливых объяснить куда нужно добавить это правило?

В список Не обновлять

Цитата:

Почему при попытке добавить сообщение стало появляться

Потому, что на этот URL срабатывает список Только из кэша. Смотри какое правило сработало и отключи его или подправь.

ZONE51

Цитата:

картинки с них грузились тока один первый раз а потом по моему требованию

Так и происходит с настройками по умолчанию для всех сайтов.

Цитата:

текст не перезагружался целиком а добавлялся.

Это фантастика

goga11

Цитата:

Можно для непонятливых объяснить куда нужно добавить это правило?

Нужно выделить целиком содержимое этой цитаты:
Цитата:

#5#~#True#~#(.)*\.(jpg|jpeg|png|gif|bmp|ico)#~#(\.imageshack\.us/gal\.php|\.rapidshare.de\.access(\d)*\.png)#~##~#

Затем открыть список Не обновлять, кликнуть правой кнопкой мыши, выбрать "Вставить правило из буфера". Оно появится над той ячейкой, которая предварительно была выделена.

MaxWell
Даже для сайтов без GZip полезно загружать некоторые объекты напрямую. Например картинки png, архивы и т.д.

MaxWell

Цитата:

Можно ли имеющимися средствами программы организовать условный прокси, проверяющий сжатость данных с сайта, и в зависимости от этого принимающий решение, пускать их напрямую либо через родительский прокси?

Нельзя. Чтобы проверить "сжатость данных с сайта" надо сначала запросить заголовки либо начать закачку, а потом уже принимать решение, через какой прокси отправить запрос! А это все те же затраты времени и трафика!

Например, начали качать неизвестный сайт без Toonel'я -> выяснили, что он не сжат -> остановили закачку -> запросили сайт снова через Toonel'ь. В итоге имеем значительные потери времени и трафика на закачку этого сайта! За что боролись? Одно ускоряем - другое тормозим!

Единственное решение - прямо прописывать нужные сайты в правилах!

Можно ли как-то настроить НС так чтобы при посещении сайтов и их разделов впервые не срабатывало правило "только из кэша"

Цитата:

Потому, что на этот URL срабатывает список Только из кэша. Смотри какое правило сработало и отключи его или подправь.

Сейчас все работает и при включенном списке "только из кэша", да и этот список я использую редко. И такая штука случилась только сегодня. Непонятки.

ZONE51

Цитата:

А мот ктонть показать как юзать связку НС и сжатие трафика?

FAQ поможет...

---

popkov

Цитата:

Думаю, это даже не счётчики, а просто баннеры. Они один раз скачались - и больше не обновляются!

Не помню где, но точно видел, как каждый раз грузился новый счетчик с расширением картинки!

---

goga11

Цитата:

Почему при попытке добавить сообщение стало появляться

Цитата: HandyCache: File http://forum.ru-board.com/post.cgi not found in cache.

DenZzz

Цитата:

Нельзя. Чтобы проверить "сжатость данных с сайта" надо сначала запросить заголовки либо начать закачку, а потом уже принимать решение, через какой прокси отправить запрос!

Можно сделать как в проксомитроне. В текстовые файлы накапливаются списки сайтов, поддерживающих/не_поддерживающих GZip. И при повторных запросах уже работает оптимальным способом.

DenZzz
Цитата:

Нельзя. Чтобы проверить "сжатость данных с сайта" надо сначала запросить заголовки либо начать закачку, а потом уже принимать решение, через какой прокси отправить запрос!

Всё было бы правильно, если б ты написал "пока нельзя", т.к. в HC этой фичи пока нет, но в принципе оно вполне реализуемо. Жаль, что обработку заголовков mai62 предполагает реализовывать через плагины...


Цитата:

Например, начали качать неизвестный сайт без Toonel'я -> выяснили, что он не сжат -> остановили закачку -> запросили сайт снова через Toonel'ь

Начинать качать, чтобы выяснить "сжатость" вовсе не обязательно. Например, можно использовать HTTP-команду "OPTIONS" - так, кстати, поступает Опера как раз для выяснения поддержки протокола HTTP1.1

C0USIN

Цитата:

Даже для сайтов без GZip полезно загружать некоторые объекты напрямую. Например картинки png, архивы и т.д.

Спору нет, но это легко организовать уже имеющимися в HC средствами.

Не знаю у кого как, а у меня периоды быстрой работы Toonel, WebWarper или Cproxy достаточно часто сменяются временами жутких тормозов (видать их серверы и/или линии связи перегружены). Поэтому тема очень актуальна.
Кстати, может кто подскажет более стабильно-быстрый сервис?

Вопрос по статистике НС. Например сегодня у меня такое:

20343/4404(17%)/1847

подскажите, как понимать показания статистики?

всего/взято_из_кеша/? или как?

Цитата:

А у тебя HC не в "Автономном режиме"? Иконка HC в трее как выглядит? "Домиком"?

Нет не домиком,иногда разные заморочки случаются и почему-то на руборде, хотя я добавил те правила
которые пробегали в теме по руборду, но повторяю, изредка да возникнет что-нибудь.

NothingAnother

Цитата:

Всё было бы правильно, если б ты написал "пока нельзя", т.к. в HC этой фичи пока нет

Поэтому и написал "нельзя", потому что этой фичи нет и в ближайшее время не будет!

Цитата:

Начинать качать, чтобы выяснить "сжатость" вовсе не обязательно. Например, можно использовать HTTP-команду "OPTIONS" - так, кстати, поступает Опера как раз для выяснения поддержки протокола HTTP1.1

Ты невнимательно читал мой пост! Я писал: "надо сначала запросить заголовки либо начать закачку". А вообще, сто раз это обсуждали в контексте работы опции "Не загружать большие файлы".
Если запрашивать отдельно HEAD или OPTIONS, то теряем время + небольшой побочный трафик.

C0USIN

Цитата:

Можно сделать как в проксомитроне. В текстовые файлы накапливаются списки сайтов, поддерживающих/не_поддерживающих GZip. И при повторных запросах уже работает оптимальным способом.

Этот вариант более интересен, ИМХО...

поясните неучу на пальцах(если конечно не затруднит(FAQ читал), или ткните носом точнее где почитать)- как НС дружит с кэшем IE? В смысле пишутся файлы параллельно в кэш IE и НС или последовательно, сначала в кэш IE, а потом в папку Cache HC, или в папку Cache HC мимо кэша IE? Я это больше к тому, что в IE7 теперь минималка 8 метров, не пропадут у меня файлы насовсем, если я почищу кэш IE7?
И ещё- периодически на некоторые сайты хожу без НС, соответственно они кэшируются IE. Как мне корректно перекинуть из кэша IE в НС файло, дабы всё лежало в одном месте?

Цитата:

всего/взято_из_кеша/? или как?

именно так... последний знак вопроса - отправлено данных...

DenZzz
Цитата:

теряем время + небольшой побочный трафик

Беплатно бывает известно что... Но позволю себе пару ремарок - потеря времени в зависимости от хоста (конкретику можно посмотреть по пингу или трейсеру) в среднем десятки ms - это просто тонет в разнице по рендерингу различных браузеров. Да и траф дополнительный - по одному сетевому пакету на запрос многократно окупится, т.к. если это делается для выяснения необходимости прогона через онлайновые сжимающие сервисы, то по-любому такое решение было бы гораздо эффективнее каких бы то ни было списков в силу их принципиальной неполноты да и необходимости дополнительных ручных операций

NothingAnother

Цитата:

Но позволю себе пару ремарок - потеря времени в зависимости от хоста (конкретику можно посмотреть по пингу или трейсеру) в среднем десятки ms - это просто тонет в разнице по рендерингу различных браузеров.

Ну извините, пинг на GPRS бывает по 400-700 ms, а если входящий трафик через спутник - то до нескольких секунд (в зависимости от тарифа)!
В итоге, за день набегут минуты игры на нервах пользователя! И во всем он обвинит HC, т.к. без него все будет грузится заметно быстрее!


Добавлено:
KOXAH

Цитата:

20343/4404(17%)/1847

Взято из Интернет / Взято из кэша (% Экономии) / Отправлено

P.S. BESTRAFER немного ошибся...

Valerijmih

Цитата:

как НС дружит с кэшем IE?

У каждой программы свой кэш и им по барабану - есть кэш у другой или нет. Файлы пишутся одновременно в оба кэша.

Цитата:

не пропадут у меня файлы насовсем, если я почищу кэш IE7?

Нет конечно Откуда HC никогда не узнает, что IE очистил свой кэш.

Цитата:

Как мне корректно перекинуть из кэша IE в НС файло, дабы всё лежало в одном месте?

Никак. Пока.

Valerijmih

Цитата:

как НС дружит с кэшем IE?

Никак! Они враждуют...

Цитата:

В смысле пишутся файлы параллельно в кэш IE и НС

Параллельно. HC пишет в свой кэш, IE - в свой.

Цитата:

не пропадут у меня файлы насовсем, если я почищу кэш IE7?

Если их нет в кэше HC, то пропадут.

Цитата:

Как мне корректно перекинуть из кэша IE в НС файло, дабы всё лежало в одном месте?

Никак! Что там IE пишет в свой замысловатый кэш известно только в M$ и то не всегда, т.к. index.dat временами глючит...

P.S. C0USIN, по последним двум вопросам наши мнения разошлись...

DenZzz

Цитата:

Не помню где, но точно видел, как каждый раз грузился новый счетчик с расширением картинки!

Но как он может обновляться, если в Не обновлять для него безусловное правило стоит?
Цитата:

#5#~#True#~#(.)*\.(jpg|jpeg|png|gif|bmp|ico)#~#(\.imageshack\.us/gal\.php|\.rapidshare.de\.access(\d)*\.png)#~##~#

popkov

Цитата:

Но как он может обновляться, если в Не обновлять для него безусловное правило стоит?

Картинка каждый раз была с новым URL, как у "хитрых" баннеров!
Возможен даже такой вариант: при каждом заходе на сайт хитрый скрипт генерит новую картинку и выдает уникальный URL, ну как в защите от спама...

Товарищи, вот я сделал настройку веб-враппера на хенди кеш и что то не замечаю тогочто страниы жмутся. А в мониторе везде ответ From Cache. Как бы непонятно. Поставил в правило руборд и пару форумов еще. Ответов типа gzip нигде не видно.
Спасибо.

зы. там есть ссылка типа постичать экономию трафика-не находит. грит битая.
И еще моя 9-я опера не поддерживает гзип-что за дела. Так мне пишут в рекламке. вверху. Помогите

o_0
Цитата:

моя 9-я опера не поддерживает гзип

Опера->Настройки->Дополнительно->Сеть->Прокси-серверы->Включить HTTP 1.1 для прокси-сервера. В крайнем случае HC->Настройки->Управление загрузкой->Добавить Accept-Encoding при загрузке из браузера

NothingAnother
Только что сделал. То же самое. Нету и все. У фокса работает. Как? Спасибо.

o_0

Цитата:

Поставил в правило руборд

Это ты зря! На этом форуме gzip используется и без WebWarper-а.

Цитата:

Так мне пишут в рекламке. вверху.

Что-то ты не так настроил! Если бы настроил правильно, как описано в ФАКе, то эту рекламу бы вообще не увидел!

DenZzz

Цитата:

Это ты зря! На этом форуме gzip используется и без WebWarper-а.

А почему тогда у меня в ответах сервера нету gzip?

Цитата:

Что-то ты не так настроил! Если бы настроил правильно, как описано в ФАКе, то эту рекламу бы вообще не увидел!

Сделал все в точности

1)
Цитата:

Добавить новое обязательное правило в список "Переадресация" (ранее "URL-конвертор")
Правило: ^http://([^/]*(site\.ru)/(?!.*\.(css|jpeg|jpg|gif|png|ico|bmp)($|\?)).*)
Замена: http://www.webwarper.net/ww/\1
Вместо site\.ru впишите через | сайты (домены), которые будут грузиться через WebWarper. В скобках справа указываются расширения файлов, сжатие которых не поддерживается сервером WebWarper - это будет видно из монитора по множеству строк с "Ответом": 302 Moved (WebWarper).

Сделано.

2)
Цитата:

Рекламу WebWarper-а внесите в "Черный список"
.*webwarper\.net/ww/~wwservicescriptgz/.*

Сделано

3)
Цитата:

Чтобы сохранять файлы в "родные" каталоги, добавьте обязательное правило в список "Преобразование URL"
.*webwarper\.net/ww/(~clientscriptgz/)?(?!~)(www\.)?(.*) Замена: \3

Сделано.

Помогите. Спасибо.

o_0

Цитата:

А почему тогда у меня в ответах сервера нету gzip?

У всех есть! А Outpost у тебя не стоит случайно?

Цитата:

Рекламу WebWarper-а внесите в "Черный список"

А почему у правила 0 срабатываний? Черный список включен? А что в Белом списке?

Запость полностью свое правило из списка Переадресация через контестное меню списка "Копировать правило в буфер". Не надо больше скрин-шотов! На них не все видно!

Первое правило на скрине в Преобразование URL явно неправильное, хотя это к делу не относится...

DenZzz

Цитата:

У всех есть! А Outpost у тебя не стоит случайно?

Да, стоит родимый.

Цитата:

А почему у правила 0 срабатываний? Черный список включен? А что в Белом списке?

Да хз че у него 0 срабатываний, я тоже не понимаю. В белом вот
Блин а в белом ваще пусто.

Цитата:

Запость полностью свое правило из списка Переадресация через контестное меню списка "Копировать правило в буфер".

есть

Цитата:

#5#~#True#~#^http://([^/]*(forum.vitebsk.by|lifeby.info)/(?!.*\.(css|jpeg|jpg|gif|png|ico|bmp)($|\?)).*)#~#http://www.webwarper.net/ww/\1#~#False#~#True

Все брал из фака, тока надо forum.vitebsk.by или forum\.vitebsk\.by?
В общем посмотрите. Спасибо.

зы. Кстати да, вырубаю аутпост-есть запись гзип, врубаю-нету

o_0
Цитата:

стоит родимый

В таком случае надо в реестре разрешить ему (OF) использовать GZip - значение ключа HKLM\SOFTWARE\Agnitum\Outpost Firewall\EnableGzipEncoding установить, равным 1