Gzip сжатие, настройка Webwarper

Gzip сжатие - один из основных способов экономии трафика. Сжатие текстового содержания страниц даёт заметную выгоду, и пренебрегать им ни в коем случае не стоит. Потому далее подробно рассмотрим настройку наиболее функциональных и бесплатных сервисов gzip сжатия.

http://webwarper.net/ru/ - один из первых появившихся сервисов такого плана. Пользование им возможно в двух вариантах:

• с главной страницы Webwarper ввести в форму адрес сайта, который Вы хотите посетить, далее все посещенные по ссылкам сайты будут работать через Webwarper. Это самый постой способ, никаких программ скачивать и настраивать не придётся.
• использовать специальную утилиту автокоррекции адресной строки браузера для Internet Explorer (и только для него!). Действие утилиты заключается в следующем: когда Вы набираете в адресной строке браузера адрес сайта, например yandex.ru, утилита автоматически перенаправляет запрос к Webwarper, и сайт открывается уже через сервис сжатия.

Также Webwarper поддерживает "сверхплотный" режим, когда со страниц удаляются вся графика и остаётся только текст.

Однако Webwarper показывает рекламу, которую можно за небольшие деньги отключить на год, либо просто закрыть рекламный блок, в следующие 18 часов он не появится.

Есть еще один вариант использования Webwarper, и, пожалуй, он самый оптимальный.

Существует специальный фильтр для Proxоmitron, этот фильтр решает задачу загрузки сайтов через Webwarper в сжатом виде. Выгоды очевидны: работа ведётся прозрачно, т.е. не нужно постоянно заходить на сайт Webwarper или устанавливать утилиты, Proxоmitron режет всю рекламу, в том числе и рекламу самого Webwarper.

Фильтр был создан людьми с форума Proxоmitron: http://www.proxomitron.ru/board/, за что им огромное спасибо. Однако импортирование фильтра требует определённых навыков работы с программой. Учитывая что эти навыки есть далеко не у всех, далее максимально подробно будет показано как импортировать фильтр сжатия в Proxоmitron.

Прежде всего, скачайте небольшой архив (4Кб) с фильтром: http://traffsave.info/tools/wwfilter.zip

Далее необходимо скопировать три текстовых файла с именами Warped, NonWarped и Uncompressible из папки "Block lists" скаченного архива в папку "Lists", которая находится в каталоге, где установлен Proxоmitron. Это списки с новыми правилами.

Новые списки нужно привязать к программе, для этого в главном окне Proxоmitron кнопка "Настройки", затем вкладка "Списки" и кнопка "Добавить".

В открывшемся окне выберите один из новых списков, после добавления переименуйте его из NewItem соответственно его имени.

Таким же образом добавляются и оставшиеся два списка.

Теперь необходимо добавить фильтры заголовков.

Выделите и скопируйте содержимое файла "Фильтры заголовков".

В главном окне Proxоmitron кнопка "Заголовки", в отрывшемся окне нужно выбрать какой-либо фильтр и нажать правую клавишу мыши. Далее "Импортировать фильтры из буфера обмена".

Фильтры импортируется, они отмечены красным, нажимаем "ОК".

Таким же образом нужно импортировать фильтры для Web страниц, выделяем и копируем содержание файла "Фильтры страниц", в главном окне Proxоmitron кнопка "Страницы", правая клавиша мыши и "Импортировать фильтры из буфера обмена".

Импортируем, нажимаем "ОК".

Всё, импорт окончен, осталось сохранить настройки, щёлкнув по значку дискетки.

Для того, что бы понять что всё правильно настроено и работает, посетите какую-либо страницу и посмотрите в заголовок окна браузера (левый верхний угол окна).

- если сайт прошёл через WebWarper, то фильтр добавляет надпись GZIP(WebWraper).

- если сайт отдаёт данные уже в сжатом виде, то они пойдут напрямую, и фильтр об этом отчитается, добавив надпись GZIP.

Более сложный способ - открыть лог Proxоmitron, и посмотреть HTTP заголовки. Лог открывает кнопка "Журнал" в главном окне Proxоmitron. Только сначала откройте окно лога, а затем соединяйтесь с сайтом.

Из служебной информации нас интересует следующее:

 

 

"RedirectTo: http://webwarper.net/" - фильтры работают, Proxоmitron перенаправляет запросы на WebWarper.

 

 

Accept-Encoding: gzip, deflate - браузер сообщил, что поддерживает gzip сжатие.

 

Content-Encoding: gzip - сервер сообщил, что данные отправлены в сжатом виде. Чего, собственно, мы и добивались.

 

Разумеется, браузер должен быть настроен на работу с Proxоmitron!

К недостаткам WebWarper можно отнести то, что он отказывается работать на сайтах, где нужна регистрация (форумы, гостевые книги и т.д.).

При использование WebWarper для отправки текстовых сообщений в форумах, гостевых книгах, почтовых системах и любых других веб-формах режим анонимности автоматически отключается!

Это связано с нежеланием Webwarper выступать в качестве анонимного прокси-сервера.

Неудобством может выступать и то, что удобный "прозрачный" режим работы возможен только в связке с Proxоmitron.

Также статистика сжатия довольно бедная, кроме информации о факте сжатия нет никаких способов наглядно узнать, сколько данных было отправлено в сжатом виде.

Большие плюсы - скорость работы Webwarper в среднем выше чем у аналогичных сервисов, Webwarper не требует от компьютера наличия Java- машины и не конфликтует с антивирусными программами.

Далее: Gzip сжатие, настройка Toonel