https://opennet.ru/openforum/vsluhforumID3/107221.html Состоялся (https://rspamd.com/announce/2016/03/21/rspamd-1.2.0.html) выпуск системы фильтрации спама Rspamd 1.2 (https://rspamd.com), предоставляющей средства для оценки сообщений по различным критериям, включая правила, статистические методы и чёрные списки, на основе которых формируется итоговый вес сообщения, используемый для принятия решения о необходимости блокировки. Код системы написан на языке Си и распространяется (https://github.com/vstakhov/rspamd) под лицензией BSD. <br><br><br><br>В новой версии (https://github.com/vstakhov/rspamd/blob/1.2.0/ChangeLog): поддержка динамического обновления (https://rspamd.com/doc/modules/rspamd_update.html) правил блокировки, поддержка динамической загрузки модулей и обработчиков, возможность использования регулярных выражений в таблицах сопоставления, улучшенная производительность (поддержка pcre2 (http://pcre.org/), более быстрая работа с хэшами и деревьями, использование инструкций AVX2, ускорение выборок по IP) и стабильность (включены исправления ошибок, выявленных в пр https://opennet.ru/openforum/vsluhforumID3/107221.html#19 Wed, 23 Mar 2016 09:02:21 GMT &gt; Мне пофиг, что там написано в документации, я смотрю как оно работает по факту<br><br>Бага с матчингом url'ей была. Примерно год или больше назад.<br><br>&gt; Ну как только она будет - так сразу. Всё что там есть - я уже прочёл и не по одному разу.<br><br>Ну так надо открывать тикеты, что непонятно. Я понимаю, что мой английский далек от совершенства и зачастую получается так, что, вроде, все слова на месте, а смысл потерялся.<br><br>&gt; Видишь слово "expensive"? Так что ты со своими "десятками тысяч регэкспов" жидко обгадился.<br><br>Я об этом: https://highsecure.ru/rspamd-hyperscan.pdf ну и можно еще послушать мое выступление с фосдема, где я об этом рассказываю: https://www.youtube.com/watch?v=_fl9i-az_Q0<br><br>А с pcre это реально expensive.<br><br>&gt; О, отмазки пошли. Ну мне нужно, дальше что? Вот не хочу я разводить зоопарк компонентов перемотанный изолентой на пустом месте.<br><br>Так открой тикет - сделать это несложно, но я не могу понять, зачем такое нужно и в какой ситуации (например, в postfix + rmilter + rspamd это нафиг не нужно).<br> https://opennet.ru/openforum/vsluhforumID3/107221.html#18 Wed, 23 Mar 2016 03:48:48 GMT &gt; Последние 2 года конфиг не ломался ни разу. Во времени 0.5, 0.6 и 0.7 такое было. <br>&gt; Символы никогда не переименовываются (опять же за последние 2+ года).<br><br>Ты сейчас нагло врёшь. гемор с 0.8 -&gt; 0.9, 0.9 -&gt; 1.0 я прекрасно помню. Вот здесь описаны грабли перехода с 0.8, 0.9, 1.0 и 1.1 =&gt; https://rspamd.com/doc/migration.html<br><br>Переход xml -&gt; ucl - это вообще всё с нуля.<br><br>Это теперь называется "не ломался с 0.7"? Кроме того я прекрасно помню ежерелизное переделывание DNSBL_*<br><br>Вот целые секции из ченжлога, посвящённые фиксам самых примитивных case:<br><br> * RBL fixes (by @fatalbanana):<br> - silence errors;<br> - yield unknown results from RBLs;<br> - fix scoring for DNSWL;<br> - fix use of RBL name as symbol; # &lt;&lt; !!!<br> - ignore RBL names that would not be yielded;<br><br> * Multiple fixes to URL detection:<br> - support port definition; # &lt;&lt;<br> - fix query and path recognition; # &lt;&lt;<br> - fix parsing of multiple slashes in URL; # &lt;&lt;<br> - fix parsing query just after por https://opennet.ru/openforum/vsluhforumID3/107221.html#17 Wed, 23 Mar 2016 03:29:11 GMT Бздyн? Бздyн.<br><br>&gt; А ничего, что rspamd поддерживает весь набор регэкспов SA?<br><br>Смотрим в текст, видим фигу. К диалекту регекспов у меня нет претензий, вопросы к тому как оно матчит в итоге.<br><br>&gt; Ложь - rspamd матчит url целиком.<br><br>Мне пофиг, что там написано в документации, я смотрю как оно работает по факту.<br><br>&gt; Можно попробовать документацию почитать, например.<br><br>Ну как только она будет - так сразу. Всё что там есть - я уже прочёл и не по одному разу.<br><br>&gt; вы можете задавать хоть десятки тысяч регэкспов без влияния на производительность.<br><br>Вот например цитата из официальной "документации" про модуль regex:<br><br>&gt; We strongly discourage from using of raw message regexps as they are expensive and should be replaced by trie rules if possible.<br><br>Видишь слово "expensive"? Так что ты со своими "десятками тысяч регэкспов" жидко обгадился.<br><br>&gt; Сделать хранение ключей грейлистинга очень просто, но это никому не было нужно.<br><br>О, отмазки пошли. Ну мне нужно, дальше что? Вот не хочу я разводить зоопарк компонентов пер https://opennet.ru/openforum/vsluhforumID3/107221.html#16 Tue, 22 Mar 2016 15:44:26 GMT Только что проверил в qemu - отлично работает. Выражаю вам благодарность за столь оперативное решение проблемы!<br><br>То что медленно - не страшно. У меня сервер маленький, всего на 5 человек. Да и арм сами по себе не могут похвастаться большой производительностью. Но даже при всем этом, работает разы быстрее SA и легче настраивается.<br> https://opennet.ru/openforum/vsluhforumID3/107221.html#15 Tue, 22 Mar 2016 13:38:49 GMT RAW и в SA очень не рекомендуется.<br> https://opennet.ru/openforum/vsluhforumID3/107221.html#14 Tue, 22 Mar 2016 13:10:34 GMT &gt; Спасибо за ответ. Выложил немного отладочной информации: <br>&gt; лог: https://paste.ee/p/1dxmR <br>&gt; бактрейс: https://paste.ee/p/Jxip5 <br>&gt; Впринципе, если проблема действительно в окружении дебиана, то попробую собрать статически <br>&gt; на какой-нибудь убунте и потом перенести обратно. Очень уж понравилась ваша <br>&gt; программа - для маленького сервера альтернатив и нет (SA очень толст <br>&gt; и неповоротлив).<br><br>Спасибо, я воспроизвел проблему. Вот этот патч ее у меня исправил: https://github.com/vstakhov/rspamd/commit/c6836066bd90451f97c4db256385e23f2e922572<br><br>Кстати, rspamd очень плохо оптимизирован по 32-х битные системы, поэтому там очень многое будет работать медленно. В принципе, можно подумать и решить эту проблему тоже.<br> https://opennet.ru/openforum/vsluhforumID3/107221.html#13 Tue, 22 Mar 2016 12:06:51 GMT Спасибо за ответ. Выложил немного отладочной информации:<br><br>лог: https://paste.ee/p/1dxmR<br><br>бактрейс: https://paste.ee/p/Jxip5<br><br><br>Впринципе, если проблема действительно в окружении дебиана, то попробую собрать статически на какой-нибудь убунте и потом перенести обратно. Очень уж понравилась ваша программа - для маленького сервера альтернатив и нет (SA очень толст и неповоротлив).<br> https://opennet.ru/openforum/vsluhforumID3/107221.html#12 Tue, 22 Mar 2016 10:31:21 GMT Есть некое впечатление, что это сочетание wheezy со старым openssl и армом. Я попробую посмотреть, если у меня есть доступ на scaleway, в чем там может быть проблема. Спасибо за репорт.<br> https://opennet.ru/openforum/vsluhforumID3/107221.html#11 Tue, 22 Mar 2016 10:26:48 GMT не работает на линукс arm (armv7 debian wheezy) платформе ,если еспользовать sqlite backend. после запуска падает процесс controller process, затем он перезапускается родителем и так по кругу. пробовал версии 1.1.4 и 1.2 и разные libsqlite - тщетно. написал бы багрепорт на гитхабе, но в англиском не шибко силен.<br>