» squid и вырезание баннеров

lynx
по этой ссылке
http://ru-board.com/forall/lynx/netarchive/fa.html

в строке
Список adult-сайтов для блокировки adult.txt 1.5 mb

ссылка указывает на http://ru-board.com/forall/lynx/netarchive/php4apache2.dll

error imho

А не скажется ли на производительности сквида использование таких огромнейших блок-листов?

TILK

Цитата:

А не скажется ли на производительности

нет
чем больше листы - чем больше памяти
но
ты сам подумай - 1.15МБ текстовый файл с линками допустим adult
это ОЧЕНЬ много

допустим чтобы он увеличился до 5МБ - это надо полмира на порно подсадить

p.s. так что все ок - можешь пользоваться

sattan


Цитата:

error imho

Не могу не согласиться Спасибо. fixed

TILK


Цитата:

А не скажется ли на производительности сквида использование таких огромнейших блок-листов?

А вот нам сейчас расскажут те, чьи это листы

А имхо такое.
Сквид экономит траффик - деньги, если он будет поддормаживать из-за больших блок-листов, то это издержки, на которые стоит пойти. Это раз.
Второе. Не знаю, как у кого, но у нас машина со сквидом больше никаких функций, кроме прокси, не выполняет, так пусть уж выполняет их по полной.

lynx

Цитата:

А вот нам сейчас расскажут те, чьи это листы

уже сделано, командир!


Цитата:

Сквид экономит траффик - деньги

лично у нас - алимитед, потому у нас другая причина - чтобы лишний траффик не забивал канал.


Цитата:

у нас машина со сквидом больше никаких функций, кроме прокси, не выполняет

у нас такое только в проекте
но это очень правильно
отдельно - сквид
отдельно - почта
отдельно - файрволл

А у меня это комплект из сквида, файрвола и NAT. Так что о производительности приходится беспокоиться. А апгрейд не планируется, по крайней мере, апгрейд железа.

И, все-таки, как насчет производительности?
Вот, например, в справке ipf сказано, что производительность будет падать, когда количество правил перевалит за 45 тысяч. Немало...
А что можно сказать о сквиде?

sattan

esli mozesh, vishli i mne
admin@parliament.ge

Sikvdila
что выслать ?

есть небольшой список регулярных выражений такого типа :

Цитата:

B 100[\w]|ad[\w]|ab[\w]|[\d]count(.)*
B (.)*/(ads|adv|banview|[\d]count)
B (^(stat|count[\d]|hitbox|banner|advertising|linkexchange|click[\d]|[\d]count))
B (.)*banner(.)*
B (.)*adv(.)*
B (.)*counter(.)*
B ^(.)*.hotlog.ru

Как заставить сквид что бы он не обратывал запросы совпадающие с этими выражениями ?

squid- никак, только если настроить редиректор- хоть самопальный на perl (да хоть на grep'е

Народ помогите....В сквиде обрезал порнуху, но надо чтобы избранные всё-таки могли смотреть голых тёлок......как это сделать?

DJAntares
вначале дать allow избранным на всё, а потом - denay порнуху

сквид просматривает правила последовательно - как они написаны последовательно

рульная прога http://www.junkbusters.com/
для обрезания банеров куков и прочего ненужного
очень гибка в настройках, без проблем работает со сквидом ,)

А кто нить проверил скорость работы редиректора на сквиде после добавления всех баз?
я проверил, чуть не заплакал: ~2 сек на каждый запрос!!! а у мна > 400 компов в локалке, +куча модемов, на выделенке сидят еще 2 не хилые контроры, и всего 2 сквидовых сервака, с 20 редиректорами на каждом (иногда нехватает, ну да хрен с ними)
короче, ИМХО это бред полнейший... шас начну маски создавать, ака "http\:\/\/ads\." и денаить их

DAngel
squidguard регулярные выражения понимает.

Ответь для себя на вопрос- что тебе важнее: быстрая работа прокси или качественная фильтрация. Тогда и принимай решение. Но если попытаться оптимизировать по обеим критериям, то выход - покупать более производительную технику.

Режик: http://www.rejik.ru/
Режит как минимум 95% _рунетной_ рекламы

Енто батенька уже глупость: ждать загрузки 1 страницы: ~ 4 img * 2 sec + 1 htm (если без фреймов)* 2 sec + X bannerov (Х = 0..~10)* 2 sec ~ до х.. получается слишком (и скромненькая такая страничка), поправь если я не прав.
Насчет regex: так я свой редиректор перловый написал.
Свой вариан листов запощу чуть позднее, если кому нить это вообще интересно.

Цитата:

Енто батенька уже глупость

Цитата:

поправь если я не прав

Разве запросы выполняются не параллельно? Или редиректоров так мало, что к ним образуется такая длинная очередь? Я думаю (и почти уверен), что тормозит не редиректор, а прокси-сервер. Проверь работу редиректора не на сквиде, а отдельно- вот и получишь реальную скорость.

finist
а я по вашему его на squid'e мерил?
ты тока подумай скока редиректоров нада, чтоб очередь из ~ 400/4 = 100 (точно ходят в инет одновременно), при хотябы 0.5 запросах с компа в секунду, при 2 сек на обработку одного запроса (измерял в standalone, а при паралельной работе время обработки запроса увеличится) получается 100 (!!!) редиректоров? а до скольки дойдет время отклика при этих 100 редиректорах?

Добавлено
И куда листы скидывать нынче то?

Добавлено
client_http.requests = 2.885128/sec

Однако странно:

Пытаюсь резать баннеры.
acl banners urlpath_regex "/usr/local/squid/etc/banners"
http_access deny banners

а в файле banners есть строчка:
ad[0-9]\.rambler\.ru*

однако баннеры http://ad2.rambler.ru/ban.clk?pg=4604&bn=35552 НЕ режутся...
почему?
Может быть дело в том, что редактирую я этот файл в винде?

YaroslavOne, возможно браузер из собственного кэша прогружает картинку...

Вопрос наверное избитый, но всё же Как грамотнее резать банеры ICQ? Плюс знакомый сказал, что могут забанить(у него якобы было такое на практике). Я сомневаюсь, поэтому обращаюсь к Вам

Цитата:

Вопрос наверное избитый, но всё же Как грамотнее резать банеры ICQ?

самый грамотный способ пропатчить аськи антибанерным патчем или использовать альтернативные клиенты

Цитата:

http://www.rejik.ru/

Рыжыков не надо Хотелось бы более тривиальный метод.

Markes ICQ5 - нет баннеров.

Что-то эту тему уже давно никто не открывали...
Кто может мне выложить тут или в ПМ часть часть конфига сквида где прикручены
файлы со страницы http://forall.ru-board.com/lynx/netarchive/fa.html
блокирующие рекламу, порно и мп-3. Если не затруднит то с
объяснениями, хоть чуть-чуть. Я уже апач поднял и выложил в нем
страницы для отображения типа porno.htmp mp3.html bad.html,
если не трудно скажи как сделать чтоб при совпадении введенного
пользователем запрещенного сайта выдавалась опреленная им страница.
Машинка со сквидом + iptabels и все из сетки бегают через прокси, ну
кроме меня кончено =)
пасибо заранее

Добавлено:
Вот нашел хорошую статью http://www.fork.kiev.ua/index.phtml?id=12 для меня, но теперь вопрос как мне заменить введенный запрещенный адрес на страницу и моего веб сервера?

подскажите как правильно перегрузить сквинд что бы изменения сделанные в скивдгуарде вступили в силу?
заранее благодарен

Подскажите пожалуйста как запретить загружать определенный файл по расширению с определенной страницы? Например с сайта r.mail.ru расширение *.swf

tolyn77
та вроде так
squid -k reconfigure
Но это, если изменеия были в конфиге squidGuard. А если изменялись файлы типа domains, то
squidGuard -C all && squid -k reconfigure