Три месяца назад прикрутил к Squid'y squidGuard что б резать банера. За это время собрал свой блэклист на основе анализа офисного трафика. Вроде всё нормально, но последнее время пользователи стали жаловаться что многие страницы при открытии осликом сообщают в строке состояния об ошибке или о том что загрузка продолжается и осталось загрузить н-объектов. Вроде, это и не мешает работе, но несколько нервирует пользователей. Может что я не так настроил? вот мои конфиги:
%more domains
yadro.ru
spylog.com
welcome.icq.com
xtraz.icq.com
205.188.250.25
cb.icq.com
top.list.ru
top1.list.ru
top3.list.ru
baner.ukr.net
adriver.ru
ben.ru
tbn.ru
banner.kiev.ua
counter.topping.com.ua
c.bigmir.net
ad0.bigmir.net
ad1.bigmir.net
ad2.bigmir.net
ad3.bigmir.net
ad4.bigmir.net
ad5.bigmir.net
ad6.bigmir.net
ad7.bigmir.net
bbn.img.com.ua
top.startua.com
hotlog.ru
rb.sport-express.ru
ad.rambler.ru
ad0.rambler.ru
ad1.rambler.ru
ad2.rambler.ru
ad3.rambler.ru
lbe.ru
lbn.ru
sj0.ru
sj1.ru
sj2.ru
sj3.ru
sj4.ru
sj5.ru
sj6.ru
sj7.ru
sj8.ru
sj9.ru
bs.yandex.ru
abnad.net
engine.awaps.net
mbn.com.ua
counter.mystat-in.net
c.mystat-in.net
icq-ws.rambler.ru
ua.hit.gemius.pl
top.startua.com
abn.com.ua# more expressions
(/ads|banner|click\.)more urls
counter.rambler.ru/top100.cnt
a-counter.kiev.ua/a/
russianamerica.com/top/logo/index.php
yandex.ru/cycounter
kmindex.ru/c/
kmindex.ru/p/
c.proext.com/c.cgi
i.bigmir.net/cnt
r.mail.ru/b.......swpЗ.Ы.: И вообще кто-то занимается резалкой банеров или это дурня? Подсчитал что у меня на 1.5Гб/мес. 350 000 запросов из которых 60 000 режу как банера, что составляет порядка 20М.
у меня сделано такsquid.conf
---------------
acl good_site url_regex "/usr/local/etc/squid/good_site.list"
http_access allow good_site
acl banners url_regex "/usr/local/etc/squid/banner.list"
http_access deny banners
deny_info http://сайт/blank.gif banners
----------------ну и два файла, good_site.list - список адресов или слов которые нужно разрешать
файл banner.list - там список блокируемых слов
blank.gif - прозрачный гифчик 1х1
PS Резкой занимаюсь. Экономия есть, так как банеры как правило не кешируются ( вернее часто обновляются и приходится их заново качать). Да и не люблю я банеры, страничка без них лучше смотрится :)
>ну и два файла, good_site.list - список адресов или слов которые нужно
>разрешать
>файл banner.list - там список блокируемых слов
А можете ими поделится?
>PS Резкой занимаюсь. Экономия есть, так как банеры как правило не кешируются
>( вернее часто обновляются и приходится их заново качать). Да и
>не люблю я банеры, страничка без них лучше смотрится :)
А не возникает таких проблем как я описал (в строке состояние сообщения об ошибках или об бесконечном ожидании загрузки ообъекта)?
>>ну и два файла, good_site.list - список адресов или слов которые нужно
>>разрешать
>>файл banner.list - там список блокируемых слов
>А можете ими поделится?пожалуйста
good_site.list
-------------------------
windowsupdate.microsoft.com/
update.microsoft.com/
download.drweb.com/
drweb.ru/
www.arsi.tomsk.ru/images/banners/Price
bank.uralsib.ru/
bs.yandex.ru/count/
-------------------------banner.list
-------------------------
banner
/Banner/
\.banner\.
/banners/
banners.
\.banners\.
banpics
[\./]ad[s]?[\./]
ad2\.rambler\.ru
/cgi-bin/banner
advert
adverts
/advertimg
/adimages/
banner\.linkexchange\.com
bs\.yandex\.ru/count/
pics\.rbc\.ru/rbcmill/img/
top3.list.ru/counter
spylog\.com/cn
top100-images\.rambler\.ru/top100/banner
counter\.rambler\.ru/top100\.cnt
counter.yadro.ru
ad*\.lbn\.ru/bb\.cgi
ad4.lbn.ru
ad4.bigmir.net
adv.hardwarez.ru
ad4\.bannerbank\.ru/bb\.cgi
ad*\.bannerbank\.ru/bb\.cgi
ad2.bb.ru
upload/bx
/bx/
/468x60*
/728x90_*
_327x90.gif
240x400.gif
www.yadro.ru
/counter/
top100-images.rambler.ru
top.mail.ru/
top100.rambler.ru/
http://*.spylog.ru/*webex\.ru/bn/tbe
banner&event
top1.list.ru
top.list.ru
/bitrix/bx.php/*
ar\.atwola\.com/link/
ar\.atwola\.com/image
http://banners\.rambler\.ru/advert/.*\.gif
http://kulichki.rambler.ru/reklama/banners/.*\.gif
http://www.*\.yandex\.ru/cgi-bin/banner/*
http://www1\.reklama\.ru/cgi-bin/banner/*
http://www\.reklama\.ru/cgi-bin/banner/*
http://www\.reklama\.ru/cgi-bin/href/*
http://www\.100mb\.net/images/ban/banner.*\.gif
http://www\.bizlink\.ru/cgi-bin/irads\.cgi.*
http://www\.linkexchange\.ru/cgi-bin/rle\.cgi...
http://www\.linkexchange\.ru/users/.*/goto\.map
http://www\.netcq\.com/banners/banner\.gif&nb...
http://1000\.stars\.ru/cgi-bin/1000\.cgi ...
http://ad10.bannerbank.ru/ &nbs...
ad.citforum.ru/*
bx.metka.ru
/adcontrol/
topping.od.ua
1000stars.ru
r.mail.ru/b*
ad*.rambler.ru
/adclick
a.citforum.ru
/citforum.ru/a/
a.lvt.ru
ad2.litbn.ru
links.bigmax.ru
ad.text.tbn.ru
ad02.adonspot.com
us.ard.yahoo.com
us.a1.yimg.com
bc.us.yahoo.com
.hotlog.ru/
images.rambler.ru/top100/banner
adserver.itsfogo.com
/bann/
www.bannermarket.com
welcome.icq.com
b100x10
as.specificmedia.com
a.tribalfusion.com
cdn1.tribalfusion.com
atdmt.com
link.subscribe.ru
linkexchange.ru
pagead2.googlesyndication.com
engine.awaps.net
doubleclick.net
/adimage.php
clx.ru
br.gcl.ru
clck.yandex.ru
/adjs.php
/adview.php
btxt.abn.com.ua
.imho.ru
probe.prohosting.com/showframe
be468.netbynet.ru
a.gismeteo.ru
/ban/
a.as-us.falkag.net
bs.serving-sys.com
ds.serving-sys.com
/admentor/
.spylog.com
opennet.ru/but/
/ttt/
/bnr/
/clc/
468_60.gif
.adnet.ru/
.adward.ru/
.advernet.ru/
zuni.tyndex.ru/
base.zaycev.net
/reclama/
finbit.ru
cb.icq.com
.abn.com.ua
213.59.0.100
205.188.250.25
link.subscribe.ru
-------------------------
>>PS Резкой занимаюсь. Экономия есть, так как банеры как правило не кешируются
>>( вернее часто обновляются и приходится их заново качать). Да и
>>не люблю я банеры, страничка без них лучше смотрится :)
>А не возникает таких проблем как я описал (в строке состояние сообщения
>об ошибках или об бесконечном ожидании загрузки ообъекта)?да нет, загружается все. А то что банеры - тогда со своего сайта гифчиком подменяю
PS то что считать банером - это по собственному вкусу. Как правило смотрю лги куда пользователи ходят, и по ихним следа на страничку - смотрю что лишнее и добавляю в список
Кстати, а у кого еще какие списки банеров? может скажете
Чтоб сделать один полный
>Кстати, а у кого еще какие списки банеров? может скажете
>Чтоб сделать один полный
>good_site.list
>-------------------------
>windowsupdate.microsoft.com/
>update.microsoft.com/
>download.drweb.com/
>drweb.ru/
>www.arsi.tomsk.ru/images/banners/Price
Это понятно зачем, а вон зачем всё остальное в good_site.list я не могу понять.
>bank.uralsib.ru/
>bs.yandex.ru/count/
>------------------------->banner.list
>-------------------------
>counter.yadro.ru
>www.yadro.ru
А почему просто yadro.ru не запретить?
>http://www1\.reklama\.ru/cgi-bin/banner/*
>http://www\.reklama\.ru/cgi-bin/banner/*
>http://www\.reklama\.ru/cgi-bin/href/*
Почему весь домен reklama.ru не запретить?>>>PS Резкой занимаюсь. Экономия есть, так как банеры как правило не кешируются
>>>( вернее часто обновляются и приходится их заново качать). Да и
>>>не люблю я банеры, страничка без них лучше смотрится :)
А в какого размера сетке Вы это практикуете (для одного себя или для 50 комп.)?
>>А не возникает таких проблем как я описал (в строке состояние сообщения
>>об ошибках или об бесконечном ожидании загрузки ообъекта)?
>да нет, загружается все. А то что банеры - тогда со своего
>сайта гифчиком подменяю
Я тоже подменяю, но вот при открытии этого портала ослик постояно сообщает о ожидании загрузки одного объекта, а на bigmir.net вообще об ощибке (жёлтый триугольник) хотя показывает всё кроме баннеров.
>Это понятно зачем, а вон зачем всё остальное в good_site.list я не
>могу понять.Иногда надо и банеры смотреть, например при поиске контекстная реклама - хоть это и реклама, но иногда ведет на то что ищещь
>>banner.list
>>-------------------------
>>counter.yadro.ru
>>www.yadro.ru
>А почему просто yadro.ru не запретить?
>>http://www1\.reklama\.ru/cgi-bin/banner/*
>>http://www\.reklama\.ru/cgi-bin/banner/*
>>http://www\.reklama\.ru/cgi-bin/href/*
>Почему весь домен reklama.ru не запретить?это пример, не всегда весь домен нужно блокировать.
>>>>PS Резкой занимаюсь. Экономия есть, так как банеры как правило не кешируются
>>>>( вернее часто обновляются и приходится их заново качать). Да и
>>>>не люблю я банеры, страничка без них лучше смотрится :)
>А в какого размера сетке Вы это практикуете (для одного себя или
>для 50 комп.)?более 50, прокси в прозрачном режиме.
>>>А не возникает таких проблем как я описал (в строке состояние сообщения
>>>об ошибках или об бесконечном ожидании загрузки ообъекта)?
>>да нет, загружается все. А то что банеры - тогда со своего
>>сайта гифчиком подменяю
>Я тоже подменяю, но вот при открытии этого портала ослик постояно сообщает
>о ожидании загрузки одного объекта, а на bigmir.net вообще об ощибке
>(жёлтый триугольник) хотя показывает всё кроме баннеров.а в логах что прокси пишет? На какой именно объект ослик ругается. Похоже что не может выкачать подмененный объект
>Три месяца назад прикрутил к Squid'y squidGuard что б резать банера. За
>это время собрал свой блэклист на основе анализа офисного трафика. Вроде
>всё нормально, но последнее время пользователи стали жаловаться что многие страницы
>при открытии осликом сообщают в строке состояния об ошибке или о
>том что загрузка продолжается и осталось загрузить н-объектов. Вроде, это и
>не мешает работе, но несколько нервирует пользователей. Может что я не
>так настроил? вот мои конфиги:
>%more domains
>yadro.ru
>spylog.com
>welcome.icq.com
>xtraz.icq.com
>205.188.250.25
>cb.icq.com
>top.list.ru
>top1.list.ru
>top3.list.ru
>baner.ukr.net
>adriver.ru
>ben.ru
>tbn.ru
>banner.kiev.ua
>counter.topping.com.ua
>c.bigmir.net
>ad0.bigmir.net
>ad1.bigmir.net
>ad2.bigmir.net
>ad3.bigmir.net
>ad4.bigmir.net
>ad5.bigmir.net
>ad6.bigmir.net
>ad7.bigmir.net
>bbn.img.com.ua
>top.startua.com
>hotlog.ru
>rb.sport-express.ru
>ad.rambler.ru
>ad0.rambler.ru
>ad1.rambler.ru
>ad2.rambler.ru
>ad3.rambler.ru
>lbe.ru
>lbn.ru
>sj0.ru
>sj1.ru
>sj2.ru
>sj3.ru
>sj4.ru
>sj5.ru
>sj6.ru
>sj7.ru
>sj8.ru
>sj9.ru
>bs.yandex.ru
>abnad.net
>engine.awaps.net
>mbn.com.ua
>counter.mystat-in.net
>c.mystat-in.net
>icq-ws.rambler.ru
>ua.hit.gemius.pl
>top.startua.com
>abn.com.ua
>
># more expressions
>(/ads|banner|click\.)
>
>more urls
>counter.rambler.ru/top100.cnt
>a-counter.kiev.ua/a/
>russianamerica.com/top/logo/index.php
>yandex.ru/cycounter
>kmindex.ru/c/
>kmindex.ru/p/
>c.proext.com/c.cgi
>i.bigmir.net/cnt
>r.mail.ru/b.......swp
>
>З.Ы.: И вообще кто-то занимается резалкой банеров или это дурня? Подсчитал что
>у меня на 1.5Гб/мес. 350 000 запросов из которых 60 000
>режу как банера, что составляет порядка 20М.есть класная на мой взгляд тема по етому вопросу на rejik.ru
А как мне для одних IP резать банера, а для других - нет?
> есть класная на мой взгляд тема по етому вопросу на rejik.ru
>
вас прикололо играть в их игры с рейтингами? у меня лично нет свободного времени и желания заниматься тупизной вида: нажми на кнопку, кто из этих сайтов не web-mail
пока их листы не будут в свободном доступе, rejik останётся не удел в общем списке софта борьбы с банерами.
p.s. их общий банер-лист от 2003 года не всчёт
