URL: https://www.opennet.me/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID12
Нить номер: 6750
[ Назад ]

Исходное сообщение
"Контент фильтр"

Отправлено sav_83 , 12-Дек-11 11:56 
Приветствую.

Использую Rejik в качестве фильтра довольно давно, все устраивало, но недавно на предприятие пришла бумажка, согласно которой предстоит ужесточить правила блокирования сайтов.
В итоге шеф задал задачу сделать контент-фильтр, который будет отсеивать сайты с определенным содержимым.
К примеру, нужно отсеивать все сайты где встречается слово "вконтакте", и плевать даже если это реклама или просто ссылка, если на сайте есть это слово то сайт должен быть забанен.
Знаю что такое может сделать Dansguardian, но он не подходит мне по ряду причин.

Можете мне посоветовать какие нибудь скрипты или программы поддерживающие этот функционал??????

Я готов потратить время на реализацию такого функционала, загвоздка лишь в том, что я понятия не имею как перехватить данные, которые вытягивает squid.
Либо может кто подскажет как перехватывает данные Dansguardian...

P.S. Сервера на freebsd, переход на linux и использование iptables не варинат...


Содержание

Сообщения в этом обсуждении
"Контент фильтр"
Отправлено sherlock , 12-Дек-11 13:41 
>[оверквотинг удален]
> К примеру, нужно отсеивать все сайты где встречается слово "вконтакте", и плевать
> даже если это реклама или просто ссылка, если на сайте есть
> это слово то сайт должен быть забанен.
> Знаю что такое может сделать Dansguardian, но он не подходит мне по
> ряду причин.
> Можете мне посоветовать какие нибудь скрипты или программы поддерживающие этот функционал??????
> Я готов потратить время на реализацию такого функционала, загвоздка лишь в том,
> что я понятия не имею как перехватить данные, которые вытягивает squid.
> Либо может кто подскажет как перехватывает данные Dansguardian...
> P.S. Сервера на freebsd, переход на linux и использование iptables не варинат...

посмотрите в сторону ICAP, через него антивирусы прикручиваются к SQUID, но готовьтесь к тому, что нагрузка на процессор резко возрастет, ну и отзывчивость сквида упадет


"Контент фильтр"
Отправлено sav_83 , 12-Дек-11 14:06 
>[оверквотинг удален]
>> Знаю что такое может сделать Dansguardian, но он не подходит мне по
>> ряду причин.
>> Можете мне посоветовать какие нибудь скрипты или программы поддерживающие этот функционал??????
>> Я готов потратить время на реализацию такого функционала, загвоздка лишь в том,
>> что я понятия не имею как перехватить данные, которые вытягивает squid.
>> Либо может кто подскажет как перехватывает данные Dansguardian...
>> P.S. Сервера на freebsd, переход на linux и использование iptables не варинат...
> посмотрите в сторону ICAP, через него антивирусы прикручиваются к SQUID, но готовьтесь
> к тому, что нагрузка на процессор резко возрастет, ну и отзывчивость
> сквида упадет

Этот вариант уже рассматриваю.
Но мне все больше интерес просыпается как перехватывает данные Dansguardian.
Как я понял он фильтрует данные до и после обработки их Squid-ом...
Хотелось бы более подробнее о сей технологии почитать...


"Контент фильтр"
Отправлено sherlock , 13-Дек-11 06:22 

> Этот вариант уже рассматриваю.
> Но мне все больше интерес просыпается как перехватывает данные Dansguardian.
> Как я понял он фильтрует данные до и после обработки их Squid-ом...
> Хотелось бы более подробнее о сей технологии почитать...

До? хм, это значит что для SQUID'а он выступает вышестоящим прокси, иначе каким образом он может получить данные до самого SQUID, не зеркалированием же всего трафика на него.
В общем раз это задача шефа, то рекомендую посмотреть на аппаратный FireWALL, там эта фича будет уже из коробки.


"Контент фильтр"
Отправлено Алексей , 12-Дек-11 16:11 
> ....все сайты где встречается слово "вконтакте", и плевать
> даже если это реклама или просто ссылка, если на сайте есть
> это слово то сайт должен быть забанен.

Ухты... Это Ваш шеф после митинга 10 числа так разволновался?


"Контент фильтр"
Отправлено sav_83 , 12-Дек-11 16:23 
>> ....все сайты где встречается слово "вконтакте", и плевать
>> даже если это реклама или просто ссылка, если на сайте есть
>> это слово то сайт должен быть забанен.
> Ухты... Это Ваш шеф после митинга 10 числа так разволновался?

В Украине с января 2012 начинаются проверки предприятий на тему информационной безопасности...


"Контент фильтр"
Отправлено sage444 , 12-Дек-11 16:35 
> В Украине с января 2012 начинаются проверки предприятий на тему информационной безопасности...

а откуда такая инфа, можно ссылочку по теме?

и по сути, что вам мешает глянуть исходники Dansguardian?


"Контент фильтр"
Отправлено sav_83 , 12-Дек-11 17:01 
>> В Украине с января 2012 начинаются проверки предприятий на тему информационной безопасности...
> а откуда такая инфа, можно ссылочку по теме?

Ссылочки нет, был на семинаре по защите информации в Луганске на прошлой неделе, там товарищи из держспецзв'язка обрадовали, + мой шеф с СБУ общался.
Проверять может и не все будут, но гос предприятия точно.

> и по сути, что вам мешает глянуть исходники Dansguardian?

В с++ я не силён, хотя есть уже четкая расписанная мысль как переделать под себя Dansguardian...
Чувствую вскоре сяду за С++


"Контент фильтр"
Отправлено rovdy , 21-Дек-11 11:52 
bfilter->squid или сквид снизу

"Контент фильтр"
Отправлено rovdy , 21-Дек-11 11:57 
> bfilter->squid или сквид снизу

тупанул не прочитав полностью вопрос. режет контент, но только ссылки, картинки и прочую ерунду по фильтру.


"Контент фильтр"
Отправлено Greignar , 06-Янв-12 07:21 
Privoxy позволяет писать такие фильтры. Правда могут появиться устранимые проблемы с кодировками.