» Как сэкономить интернет-трафик

S0ldier
Можно конечно применить и программы - оптимизаторы, но я не стороник их.
Они оптимизируют в одном направлении за счёт чего, можно патерять чтото другое, что может понадобиться.

Serg_Ivanov

Цитата:

Можно конечно применить и программы - оптимизаторы, но я не стороник их. Они оптимизируют в одном направлении за счёт чего, можно патерять чтото другое, что может понадобиться.

Имеется в виду программы для оптимизации интернет-соединения (установка TTL, RWIN)?

S0ldier

Цитата:

Имеется в виду программы для оптимизации интернет-соединения (установка TTL, RWIN)?

Да MTU, MSS и программы типа TweakMASTER и SwiftNet3000.

Serg_Ivanov
Угу, BeFaster и иже с ними?

S0ldier

Цитата:

Угу, BeFaster и иже с ними

Да.
Настраивать в ручную куда не шло. Знаешь где потом исправить.
А когда она наоптимизирует ... . Но я говорю не об этой программе конкретно.
Эта то имеет и авто и ручные настройки. Вообще о таких программах помоему Auslogic Boot Speed или меня опять занесло не туда7

Serg_Ivanov

Цитата:

Вообще о таких программах помоему Auslogic Boot Speed или меня опять занесло не туда7

BoostSpeed хорошая программа, главное всё можно самому выставить...

S0ldier

Цитата:

BoostSpeed хорошая программа,

Хорошая то хорошая, но выбор большой и опять же кому что нравиться.
Мне тоже GPRSBooster понравилась по функционалу а попробовать не даёт.
Лекарства нет. А так и жмёт и рубит, и память не грузит.
Это не оптимизатор.

Добавлено:
З.Ы. Лишний раз убеждаюсь что на смену старому даже хорошему приходит новое.
Так и на смену GPRSBooster пришли tonnel и CProxy.

Ребята! А что можете сказать по поводу комбинации программ TrafficCompressor и HandyCache? Пробовал ли кто? Эффективно?

ad1981
Пробовали вот здесь:
http://forum.ru-board.com/topic.cgi?forum=5&bm=1&topic=15322&start=120
А так, почему бы и не использовать.
У прог задачи разные, а цель одна - экономия.

Serg_Ivanov
Прочитал. Познавательная и нужная статья. Только че то я не догнал. Интернет - CProxy потом Proxomitron или наоборот? У меня сейчас вот так стоит + НС еще.
Трафик однозначно уменьшился, хотя не могу сказать насколько. СProxy одно показывает, НС другое. Не пойму. Proxomitron еще настроить бы. Там в топике спросил, че то тишина пока.

shapr

Цитата:

СProxy одно показывает, НС другое. Не пойму.

Ну правильно...
СProxy показывает что через него прошло и сколько из этого он сжал, а НС показывает что взято с инета, а что из кэша.

shapr

Цитата:

Интернет - CProxy потом Proxomitron или наоборот?

Выход всегда осуществляется черз сжимающий прокси CProxy или toonel или др.
Перейди сюда, т.к вопрос касается прокси почитай и если, что спросишь:
http://forum.ru-board.com/topic.cgi?forum=5&bm=1&topic=13043&start=60

ZEWS
Serg_Ivanov
Спасибо за помощь всем.Если нетрудно посмотрите еще разок. CProxy - блокировка баннеров откл, рекламы вкл., кэш - откл; Proxomitron - ну там как было так и оставил. НС- вроде настроен. С ним я лучше всего разобрался пока. В Опере кэш откл.
Все правильно???

shapr
Не надо отключать кэш в Opera и CProxy.
Оно тебе мешает?
Если связка работает постепенно подстраивай под себя.

Serg_Ivanov
Еще раз благодарю. Связка вроде работает. Причем нормально, без тормозов. Вот только еще объясни почему резку баннеров нужно в СProxy отключить. Я так понимаю он будет их грузить, сжимать. Или я че то не так понял?

shapr

Цитата:

Или я че то не так понял?

Ты добился того что связка у тебя работает хорошо.
А теперь уже оптимизируй каждую прогу по отдельности
как нужно тебе, отключай баннеры и т.д
Если связка заглючит ты будешь знать, что сделал и
сможешь вернуться назад.

Serg_Ivanov

Цитата:

Не надо отключать кэш в Opera и CProxy.

Оперой не пользуюсь (на дух не переношу ) А вот в своём FireFox'е я кэш полностью отключил! Экономия сразу повысилась и теперь всё в одном кэше, а не в двух... иногда неудобство это доставляло...
А вот в CProxy кэша 12 метров оставил... тут рекомендовали, ну я и оставил

shapr

Цитата:

Вот только еще объясни почему резку баннеров нужно в СProxy отключить.

Не знаю... у меня включено.

Тоже резку баннеров включил. Зачем лишнее. Я так понял, при отключенной резке чешский сервер будет сжимать и пересылать на мою сторону. На фига, если их можно не трогать совсем. Кэш у Оперы оставил 5 метров с очисткой после закрытия. Может кто в курсе как Proxomitron настроить, чтоб не резал скрипт Ru.Board. Киньте в ПМ. А то там в топике молчат че-то.

shapr

Цитата:

Может кто в курсе как Proxomitron настроить, чтоб не резал скрипт Ru.Board.

Посмотри здесь и почитай в теме:
http://forum.ru-board.com/topic.cgi?forum=5&topic=0339&start=1280#lt

Цитата:

А то там в топике молчат че-то

Значит дела есть. Со временем ответят.

Цитата:

Обе программы могут сжимать трафик не только по протоколу HTTP, но ещё и SMTP & POP3 (ICQ и электронная почта). Кроме того, CProxy жмёт ещё и ICQ-трафик

Если настроить ICQ клиент на работу через toonel, то трафик icq тоже будет сжиматься. В таблице привожу пример для загрузки контакт листа с toonel и без него.
Подключение Принято, байт Предано, байт Всего, байт

casm82

Цитата:

Если настроить ICQ клиент на работу через toonel, то трафик icq тоже будет сжиматься. В таблице привожу пример для загрузки контакт листа с toonel и без него.

А есть такая же табличка, только ещё +CProxy через чё лучше асю пустить?

ZEWS
Смотри короче. Statist XP показывает к примеру 240кВ. НС аж 541. Я понимаю что реальный трафик 240. Или после CProxy он разжимается и НС показывает уже этот трафик?
Serg_Ivanov

Цитата:

Посмотри здесь и почитай в теме:
http://forum.ru-board.com/topic.cgi?forum=5&topic=0339&start=1280#lt

Спасибо. Я уже это видел, но ниче для себя не нашел. Там вышли из положения заменой проги. Но мне это почему то не помогло. Будем ждать может в том топике подскажут.

shapr
541 "Взято из интернета" показывает?

Да

ZEWS

Цитата:

А есть такая же табличка, только ещё +CProxy через чё лучше асю пустить?

Поэкспериментировал с qip - подключался несколько раз к сети. Сравнивал экономию при подключении через Cproxy (http и socks), toonel.net, с подключеним напрямую.
Все подключения проводились с одним и тем же составом контакт листа - количество записей и количество online контактов не изменялось.
Замеры производил с помощью BWmeter (в режиме секундомера - Ctrl-W). Результаты следующие.
Вид подключения Принято из сети, байт Послано в сеть, байт Всего из\в сеть, байт Статистика программы Всего из\в сеть по прог. Экономия

casm82
к сожалению, это все искусственные тесты, которые не показывают реальную жизнь
напр, как часто ты открываешь асю по сравнению с как часто ты шлешь сообщения? как я подозреваю, сообщения ты все-таки шлешь чаще, чем коннектишься
а вот жмутся ли сообщения (и как), ты не проверил

с вебварпером тоже не совсем правильно - обычно ты не загружаешь чистый текст, ты загружаешь страничку с какого-то сайта. а в страничке полно других элементов - тех же картинок. toonel/cproxy умеют сжимать запросы к этим картинкам, вебварпер - не умеет. а запросы, кстати, не маленькие, запрос-ответ порядка 800 байт (даже если картинка размером 43 байта). на страничке обычно порядка 10 картинок - итого получаем 8К трафика, который вебварпер не жмет, а toonel/cproxy сжимают где-то на 50%. на самом деле трафик заголовков может быть даже больше, чем собственно страничка.

но так как ты сделал, с комбинацией вебварпер + toonel может и есть лучший вариант. по-идее получается что заголовки на картинки будут сжиматься. я бы еще посмотрел как жмутся .js и .css - они текстовые но жмет их вебварпер или нет, я не знаю.

хотя странный все-таки результат насчет сжатия текста - ты бы не мог дать адрес этой странички, которая 54879 байт? хочется самому проверить.

fnfn

Цитата:

к сожалению, это все искусственные тесты...

это верно, но, во-первых, для того чтобы провести эксперимент с учетом передачи сообщений, потребовалось бы найти человека, который бы их принимал и писал в ответ если бы я писал по 10 сообщений и мне бы отвечали, то в общей сложности потребовалось обменяться 10 сооб. *2 чел.*12 замеров=240 сообщений, при условии что в контакт листе статус у контактов не измениться (online|offline).
Эксперимент, что я делал, был для оценки сжатия выбранных сервисов при равных условиях, конечно, он полностью не соответствует реальным условиям, но хоть какую-то информацию об оценке сжатия получил.
Насчет сжатия текста и Webwarper, то я скачивал книгу, взятую с lib.ru. Если есть желание можно проверить на любой из выложенных книг.

Цитата:

я бы еще посмотрел как жмутся .js и .css - они текстовые но жмет их вебварпер или нет, я не знаю

С js проблем не наблюдал – сжимаются как вполне прилично. Привожу статистку из Far для файла bombus-im.org/flyspray/javascript/prototype/prototype.js
Архив GZip
…
Общий размер 136,816
Упакованный размер 15,190
Степень сжатия 11%
C css немного сложнее – не со всех сайтов, удавалось их скачать через Webwarper- происходит зацикливание 302 Moved Temporarily (так же как для большинства картинок), поэтому я добавил их в исключения с mz.txt.
[more=Кому интересно, привожу его здесь]

Цитата:

; На Webwarper.net перенаправляются все URL, кроме тех, что исключены в данном списке
!#(?:.*^(?:pic|img).*)|.*\.(7z|a(ac|ce|mf|mr|sf|vi)|b(i(k|n)|z|z2)|c(ab|hm|ss)|d(j(v|vu)|ll|oc)|exe|ff(l|t|x)|flv|ja(d|r)|gz|m(af|mf|pf|p(g|v)|rw|si)|mp\w{1,2}|p(l|df|ng|p(s|t))|r(\d{2}|a(r|w))|scr|t(a(r|z)|b(z|z2)|g(a|z))|tif{1,2}|w(av|ma)|x(ls|pi|sl|xe)|z|zip|jpg|jpeg|png|gif|bmp|swf|ico)
!#webwarper\.net/.*
!#.*(avatar|attach|downl).*
!#forum\.(ru-board\.com|ixbt\.com)
!#.*(google).*
!#rambler\.ru
!#yandex\.ru
!#.*wiki(pedia|books|media)\.org.*
!handycache.ru
!ihelper.mts.ru
!webfile.ru
!support.microsoft.com
!ocsp.thawte.com

#.*

[/more]

casm82

Цитата:

С js проблем не наблюдал – сжимаются как вполне прилично. Привожу статистку из Far для файла bombus-im.org/flyspray/javascript/prototype/prototype.js

то, что они текстовые и сжимаются, я знаю.
имелось ввиду, сжимает ли их вебварпер, когда подгружает в составе странички?

fnfn

Цитата:

имелось ввиду, сжимает ли их вебварпер, когда подгружает в составе странички?

да сжимает, статистика что я привел как раз для js, который был сжат Webwarper-ом

casm82

Цитата:

Как оказалось сильнее всего сжимает текст Webwarper (сжатие более чем в 2 раза).

дошли руки проверить webwarper vs toonel
проверялось на maxtron 1.5.6, adsl, мерял TMeter (он позволяет фильтр выставить на конкретный IP в отличии от bwmeter, который меряет все подряд), реклама в webwarper отключена, кеш чистился после каждого замера.

оригинал (http://lib.ru/DETEKTIWY/AMBLER/dimitr.txt) :
послано 7 099, принято 321 419

webwarper (http://webwarper.net/ww/~av/lib.ru/DETEKTIWY/AMBLER/dimitr.txt) :
послано 11 380, принято 186 600

toonel
послано 2750, принято 140 800

три раза на каждый заход, цифры немного +- болтались из-за потерь пактов, в пределах сотен байт для входного канала и десятков байт для исходящего канала.

пысы - могу выслать логи пакетов для проверки

Добавлено:
заинтересовало, почему такой большой исходящий трафик у вебварпера.
покопался, понял что очищать кеш в случае с вебварпером нельзя - таким образом я его заставлял грузить свои скрипты. пришлось ручками кеш чистить, оставляя скрипты.
получилось:

webwarper
послано 3 491, принято 135 260

итого - вебварпер потратил на 4 799 байт меньше, что есть около 4% экономии по сравнению с toonel.

нужно учесть что
а) скрипты вебварпер подгружает каждые 2 часа
б) эта страничка совсем не характерна для и-нета, т.к. это чистый текст, без всяких оформительных элементов, поэтому http заголовок только один - т.е. toonel не смог толком сжимать то, что не сжимает вебварпер.

забавно, что через вебварпер исходящий трафик получился меньше, чем оригинальный, что вообще-то не должно быть. оказалось, что хотя HTTP-заголовок через вебварпер больше, но у меня до сервера вебварпер соединение существенно лучше, чем до lib.ru, пакеты до вебварпера почти не терялись, а до либ.ру было много потерь. понятно, что у каждого свой провайдер и там уже как карта ляжет.

update
cproxy
послано 3500, принято 152 700