LINUX.ORG.RU

Трафик-компрессор для пользователей Dial-Up


0

0

В статье описывается трафик компрессор, предлагаемый как дополнительная услуга пользователям Dial-Up-интернета в небольшом операторе связи (http://tnpko.ru).

В основе компрессора лежит прокси-сервер ziproxy, который умеет сжимать проходящий через него трафик и рефакторить HTML-код, однако чтобы немного его разгрузить и добавить нормальную возможность разграничения доступа добавлен второй каскад - прокси сервер squid, который кэширует пользовательские запросы и снижает нагрузку на ziproxy.

Так же приведён очень простой скрипт для минимального разбора логов ziproxy и генерации статистики по дням.

>>> Статья

Ага, мне надо быть оператором связи, чтобы этого заюзать? Каждый лоровец - оператор связи!

anonymous
()
Ответ на: комментарий от anonymous

> Ага, мне надо быть оператором связи, чтобы этого заюзать? Каждый лоровец - оператор связи!

Я - сотрудник оператора связи. И здесь есть и ещё сотрудники операторов.

MooSE ★★★★
() автор топика
Ответ на: комментарий от anonymous

> Ага, мне надо быть оператором связи, чтобы этого заюзать? Каждый лоровец - оператор связи!

Не обязательно, конечно. Фича, возможно, более полезна не диалапщикам, а пользователям дорогих тарифных планов, GPRS - там или ещё что. Если есть возможность завести свой сайт/сервер с дешёвым трафиком и поднять там прокси, то реально полезно.

anonymous_incognito ★★★★★
()
Ответ на: комментарий от anonymous_incognito

> Не обязательно, конечно. Фича, возможно, более полезна не диалапщикам, а пользователям дорогих тарифных планов, GPRS - там или ещё что. Если есть возможность завести свой сайт/сервер с дешёвым трафиком и поднять там прокси, то реально полезно.

Хы. ты прав, Пятачок. Я сам такую штуку использую именно для уменьшения стоимости трафика:)

Но вообще у этой штуки применений достаточно много. В любом случае она показывает наибольшую эффективность на тексте. Хотя графику оно за счёт потери качества тоже может жать. Но уж больно сильно ресурсы жрёт.

MooSE ★★★★
() автор топика

Классно! Вы там для себя чтоли новости постите? ананимный ананимус и мус?

anonymous
()
Ответ на: комментарий от anonymous_incognito

>Если есть возможность завести свой сайт/сервер с дешёвым трафиком и поднять там прокси, то реально полезно.

firstvds.ru в помощь бедным (и не очень) диалапщикам

pahank
()

Как раз мой провайдер, надо бы почитать и попробовать.

Привет всем казанским!

anonymous
()
Ответ на: комментарий от anonymous

> Классно! Вы там для себя чтоли новости постите? ананимный ананимус и мус?

Мы постим то, что интересно нам. В расчёте на то, что мы не одни такие, и это будет интересно и другим людям.

MooSE ★★★★
() автор топика
Ответ на: комментарий от anonymous

> Как раз мой провайдер, надо бы почитать и попробовать.

> Привет всем казанским!

Тогда для тебя адресом компрессора будет compressor.tnpko.ru:8080.

P.S. Превед, Абонентиг! :)

MooSE ★★★★
() автор топика
Ответ на: комментарий от MooSE

И в догонку:

Вроде когда счета за апрель вам готовили, на них рекламу этой штуки печатали. Неужели не читал?:)

MooSE ★★★★
() автор топика

хмм... ради интереса открыл наугад 10 сайтов из закладок - все были уже пожаты. смысл этим заниматься если на любом приличном сайте итак всё что нужно уже жмется? ProcessHTML_NoComments - а яваскрипты внутри html`овских комментов не порежет? Или, скажем, конструкции внутри комментариев типа [IF IE] Учитывая что html`а существует сейчас куча разновидностей.. Так ли часто в html коде встречаются комментарии (и насколько они большого объема, даже если попадаются?) чтобы имело смысл парсить весь html, рискуя вырезать что-нибудь нужное?

"а главное - рефакторига(!)" - это 5:)

картинки пережимать это вообще супер-идея) надо заодно mencoder какой-нить прикрутить чтобы пережимать видео и аудио, а то "on most pages are of unnecessary high quality and/or saved in unsuitable format"(выдрано с сайта ziproxy)

pawnhearts ★★★★★
()
Ответ на: комментарий от anonymous

> Лучше уж Глобакс взять.. ;) http://globax.biz/ "Высокоскоростной интернет канал сервера Globax, который обеспечивает высокую скорость передачи данных" - супер вообще :)

ну там много веселого) FrontPage/5.0.2.2635.SR1.2 X-Powered-By PHP/5.2.0

pawnhearts ★★★★★
()
Ответ на: комментарий от anonymous

> Лучше уж Глобакс взять.. ;) http://globax.biz/

Блин. Сравнил хрен с пальцем.

Вам предлагают свободную, полностью открытую технологию, а вы за какой-то проприетарщиной лезете. Небось ещё из под ентернет-ехспллорера свои посты пишете?

MooSE ★★★★
() автор топика
Ответ на: комментарий от MooSE

>Вам предлагают свободную, полностью открытую технологию, а вы за какой-то проприетарщиной лезете.

Вам работать или пыской меряться? Автор видимо не пробовал на жопорезе сидеть.. там уже не посмотришь, проприетарщина оно или нет.. :Е

Мое сообщение находится исключительно в контексте посильной помощи бедным жопорезникам и подобным обделенным тырнетом пользователям, а никак не технологий и философских аспектов свободного ПО. %)

Вы пробовали учить голодного? ;)

anonymous
()
Ответ на: комментарий от MooSE

> Вам предлагают свободную, полностью открытую технологию

К сожалению, эта технология бесполезна для конечных пользователей. Правльный заголовок должен бы быть «Трафик-компрессор для провайдеров».

Кроме того, как я понял, ziproxy работает только для веб-страниц; штуки вроде globax.biz или toonel.net за счёт необходимости использования клиентского софта позволяют сжимать любой трафик. Так как toonel бесплатен и шевелится везде, где есть жаба, ziproxy становится бесполезен и для тех, кто может позволить себе VPS на толстом канале. Разве что этот кто-то - фоннат FOSS ^_^

reitetsu
()
Ответ на: комментарий от dreamer

> MooSE, а ты в ТНПКО кем работаешь?

Серваки админю. Кое-какой софт пописываю и поддерживаю. А что, работу предложить хочешь?:)

MooSE ★★★★
() автор топика

-ты когда-нибудь сидел на далапе?
-Нет
-Тогда ты ничего не знаешь о боли и страдании.

some_x
()

vtund + 2 oops прокси - один у меня, другой на моем дедике парентом для того который у меня.

Сжатие + шифрование. +возможность реального ип за 2 бакса в месяц а не за 12. + экономия до 50% на текстовом контенте - а мне нужен именно он. + невозможность подсмотреть логи аси и ирц со стороны провайдера.

+ настраивается и подымается за 15 минут

anonymous
()
Ответ на: комментарий от AcidumIrae

>Dial-Up должен сгореть в агонии!!!

+n

Наверное, я долго спал. Году этак в 2001-2003, помнится, была реклама модемов со сжатием. Типа, они трафик жмут. Аппаратно. Все, кто на V42bis. Куда же это делось?

abraziv_whiskey ★★★★★
()
Ответ на: комментарий от abraziv_whiskey

> Году этак в 2001-2003, помнится, была реклама модемов со сжатием. Типа, они трафик жмут. Аппаратно. Все, кто на V42bis. Куда же это делось?

Оно и сейчас есть. Но специально тестировали - аппаратное сжатие эффективно. В итоге можно получить 64K. Но ZiProxy даже тут дал некоторый выигрыш:)

MooSE ★★★★
() автор топика

А IPComp не лучше ли пожмет? Правда где то придется VPN сервер поднять, но настраивается в любой ОС и быстро, да и ничего не вырезается...

saper ★★★★★
()
Ответ на: комментарий от alt0v14

>диалап мертвый сервис, че с ним так возиться? )

гм, ну нету диалапа в москве, питере, казани, ростове, новосибе, екатеринбурге(точно не знаю) и других крупных городах, а в мелких городах? бля, быстрей бы уже все перешли..

dragon_djanic ★★
()

toonel - наше все, ЗЫ: по ссылке не ходил, смысла щелкать, как всегда нет :)

One ★★★★★
()

Приложил некоторые руки к данному ziproxy исключительно для своей необходимости: не хотелось пускать весь билайн на свой проксик, пришлось дописать auth к нему. Даже упоминули в changelog ;) Пользуюсь с gprs'a и доволен до усрачки :)

rkorolev
()
Ответ на: комментарий от anonymous

>Вы пробовали учить голодного? ;)

если ты голодный то откуда деньги на комп и интернет?

anonymous
()
Ответ на: комментарий от saper

IPComp (и прочие сжимающие туннели) или аппаратное сжатие модема в любом случае хуже пожмет т.к. словарь компрессора строится по одному пакету (или одному передаваемому блоку, в случае модема). Ziproxy строит словарь, грубо говоря, по всему файлу, что значительно повышает эффективность.

anonymous
()
Ответ на: комментарий от saper

Да, именно поэтому по HTTP я хожу через Ziproxy, а весь остальной трафик гоняю в сжимающем VPN :)

jl

anonymous
()
Ответ на: комментарий от MooSE

> Тогда для тебя адресом компрессора будет compressor.tnpko.ru:8080.

Спасибо, вроде бы пошустрее стали сайты грузится, которые не имеют своего сжатия.

anonymous
()
Ответ на: комментарий от anonymous

>> Тогда для тебя адресом компрессора будет compressor.tnpko.ru:8080.

> Спасибо, вроде бы пошустрее стали сайты грузится, которые не имеют своего сжатия.

Ну хоть где-то положительный отзыв о своей работе услышал. А то судя по форуму - работаю в самом ужасном операторе связи в мире:)

MooSE ★★★★
() автор топика

Кто знает, toonel.net это единственный бесплатный сервис такого рода? Или ещё есть такие? globax этож не на халяву?

Sherak ★☆
()
Ответ на: комментарий от Sherak

globax продают по принципу предоставления услуги (то есть вам дают только клиента, вы оплачиваете трафик).

для серфинга по gprs вещь очень полезная (в отличии от tcp быстро устанавливает соединение, легко переживает потери пакетов).

edo
()

Вроде и pppd со стандартными опциями для текста дает нормальное сжатие.

anonymous
()

> Году этак в 2001-2003, помнится, была реклама модемов со сжатием. Типа, они трафик жмут. Аппаратно. Все, кто на V42bis. Куда же это делось?

Помню как раз в этих годах когда на диалапе еще по траффику, пару провайдеров что юзал считали не модемный траффик, а tcp/ip. Хотя конечно диал-ап по траффику это изврат, но для определенных сервисов, потребляющих мало траффика тогда это было выгодно.

А вообще тут дело не только в диал-апе, а в экономии пропускной способности канала. Что из этого экономится - деньги или время уже от ситуации зависит.

anonymous
()
Ответ на: комментарий от anonymous_incognito

я ставлю vtund и отключаю картинки. заодно плагин по блокировке флеша. среднее отношение несжатый/умятый трафик - 1:2. на жопорезе очень полезно как для собственного кармана так и для скорости.

sg
()
Ответ на: комментарий от dragon_djanic

Вот-вот. Хоть я и живу в городе, где dial-up'у достаточно альтернативы, но знаю, что в глубинке на 1 модеме часто висят "интернет-клубы" и школы... А применение $subj не сводится к dial-up - есть еще и GPRS/EDGE, и "иже с ними".

SySAlex
()
Ответ на: комментарий от MooSE

ну я уже показывал что сейчас практически все страницы отдаются уже пожатыми в gz/bz2 (это уже браузер что в Accept-Encoding header укажет), каментов не так и много встречается в коде, так что ИМХО сомнительна польза =]

Ex ★★
()
Ответ на: комментарий от Ex

к сожалению,как показывает практика, не почти все
а всётаки меньшинство

proforg
()
Ответ на: комментарий от dragon_djanic

Как это нету? Есть. Почти даром.

eXOR ★★★★★
()
Ответ на: комментарий от Ex

серверов со включенным gzip - меньшинство

помимо комментов в коде повсеместно куча говна вроде пробелов и табуляции рекламу туда же

хорошая штука, сам давно пользуюсь ziproxy. Squid вроде и не нужен, один фиг сервер почти простаивает..

KA6AH
()

http://gzip.ru платформонезависимый компрессор, работает через браузер. рекомендую, экономия доходит до 70%.

anonymous
()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.