The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



"Опубликован Netflow-коллектор Xenoeye"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от opennews (??), 12-Апр-23, 22:30 
Доступен Netflow-коллектор Xenoeye, который позволяет собирать с различных сетевых устройств статистику о потоках трафика, передаваемую с использованием протоколов Netflow v9 и IPFIX, обрабатывать данные, генерировать отчёты и строить графики. Кроме этого, коллектор может запускать пользовательские скрипты при превышении порогов. Ядро проекта написано на языке С, код распространяется под лицензией ISC...

Подробнее: https://www.opennet.me/opennews/art.shtml?num=58958

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения [Сортировка по времени | RSS]


1. "Опубликован Netflow-коллектор Xenoeye"  –4 +/
Сообщение от Аноним (1), 12-Апр-23, 22:30 
Мне название не нравится, плохой маркетинг, не взлетит.
Ответить | Правка | Наверх | Cообщить модератору

2. "Опубликован Netflow-коллектор Xenoeye"  –1 +/
Сообщение от Аноним (2), 12-Апр-23, 22:54 
А кто в теме, поясните, зачем оно?
Ответить | Правка | Наверх | Cообщить модератору

8. "Опубликован Netflow-коллектор Xenoeye"  +2 +/
Сообщение от швондер (?), 13-Апр-23, 00:04 
Коллектор использует скользящие средние для подсчёта превышения скорости трафика.
Коллектор можно использовать для поиска заражённых хостов (рассылающих почтовый спам, HTTP(S)-flood, SSH-сканеров), для определения резких всплесков при DoS/DDoS-атаках.
Ответить | Правка | Наверх | Cообщить модератору

10. "Опубликован Netflow-коллектор Xenoeye"  +4 +/
Сообщение от Аноним (10), 13-Апр-23, 00:22 
Для сбора нетфлоу очевидно. Что это такое - гугл в помощь.
Ответить | Правка | К родителю #2 | Наверх | Cообщить модератору

13. "Опубликован Netflow-коллектор Xenoeye"  +2 +/
Сообщение от швондер (?), 13-Апр-23, 01:28 
коллекторов как грязи еще в конце нулевых было.
Ответить | Правка | Наверх | Cообщить модератору

16. "Опубликован Netflow-коллектор Xenoeye"  +3 +/
Сообщение от Аноним (16), 13-Апр-23, 07:15 
> коллекторов как грязи еще в конце нулевых было

Почему-то их любили писать на Java и на каких-то скриптовых языках.

Из опенсорсных выжило с тех времен буквально 1.5 штуки - простейший nfdump и полу-коммерческий FastNetMon.

Сейчас, в 2023 ситуация очень непонятная. Иностранные коммерческие коллекторы закрыли даже доступ к своим сайтам для русских IP

https://www.solarwinds.com/netflow-traffic-analyzer

https://www.plixer.com/products/scrutinizer/

Непонятно зачем, их все равно легально нельзя купить. Насколько я понимаю, FastNetMon тоже не продает коммерческие версии, хотя Павел вроде как из России. У него на github-странице написано что разработкой занимается какое-то LTD из Лондона.

Современные опенсорсные коллекторы массово появились, когда Cloudflare выложили в свободный доступ свою netflow-библиотеку goflow. Сейчас классический опенсорс коллектор это экспортер на go + Kafka/Elastic/Greylog + какое-то хранилище + визуализатор. Докеры, кластеры, пайплайны, терабайтные хранилища, вот это все

Ответить | Правка | Наверх | Cообщить модератору

38. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Анонанон (?), 14-Апр-23, 09:12 
Nfacctd (из состава pmacct) вполне себе жив, шустр и кошерен. Но это только коллектор, морду/экспортер к нему надо самому пилить.
Ответить | Правка | Наверх | Cообщить модератору

41. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от pofigist (?), 16-Апр-23, 11:13 
А как же https://www.ntop.org/?
Ответить | Правка | К родителю #16 | Наверх | Cообщить модератору

42. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 18-Апр-23, 08:18 
> А как же https://www.ntop.org/

Ни разу не видел чтобы кто-то им пользовался именно для netflow

Ответить | Правка | Наверх | Cообщить модератору

45. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от pofigist (?), 20-Апр-23, 16:32 
А он именно под него и заточен изначально.
Ответить | Правка | Наверх | Cообщить модератору

15. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 13-Апр-23, 06:54 
Для продвинутого сетевого мониторинга. По IP адресам, протоколам, портам, TCP-флагам. И по другим полям, которые могут быть в netflow (а их может быть дофига разных). AS, VLAN, номер порта и т.п.
Ответить | Правка | К родителю #2 | Наверх | Cообщить модератору

30. "Опубликован Netflow-коллектор Xenoeye"  –2 +/
Сообщение от ivan_erohin (?), 13-Апр-23, 10:04 
для закона Мизулиной (или закона Яровой ? забыл точно кто из этих дурных баб - кто).

я в свое время для сверки с провайдером обходился ipacctd.

Ответить | Правка | К родителю #2 | Наверх | Cообщить модератору

9. "Опубликован Netflow-коллектор Xenoeye"  –10 +/
Сообщение от Аноним (10), 13-Апр-23, 00:20 
>Ядро проекта написано на языке С

Кому-то нужно, чтобы его флоу стали общедоступны из-за очередной уязвимости? Вперёд и с песней использовать коллектор на Це =)

Ответить | Правка | Наверх | Cообщить модератору

11. "Опубликован Netflow-коллектор Xenoeye"  +4 +/
Сообщение от Аноним (11), 13-Апр-23, 00:50 
Просто серьезные вещи для рельного применения пишут на Це очень даже.
Ответить | Правка | Наверх | Cообщить модератору

12. "Опубликован Netflow-коллектор Xenoeye"  –2 +/
Сообщение от Аноним (12), 13-Апр-23, 01:24 
дооооо, инкремент в табличке значения в соотв паттерн-матчингом по полю - серьезная вещь, куда уж
Ответить | Правка | Наверх | Cообщить модератору

14. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (14), 13-Апр-23, 04:39 
Так в чем собственно вопрос в надежности и безопасности Си?
Или в быстродействии Rust?
Ответить | Правка | Наверх | Cообщить модератору

18. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (18), 13-Апр-23, 08:09 
В быстродействии чего?
Ответить | Правка | Наверх | Cообщить модератору

17. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 13-Апр-23, 07:30 
> Кому-то нужно, чтобы его флоу стали общедоступны из-за очередной уязвимости?

Непонятно, что вы этим хотели сказать. Netflow экспортируется от роутера к коллектору, это обычно происходит внутри доверенной сети. Из дикого интернета netflow никто не принимает. Он (обычно) ходит по UDP, адрес источника можно легко заспуфить.

Единственное, что из коллектора может торчать наружу - это визуализатор, например Grafana. Или самодельная страничка с отчетами. Но если там найдут дыры, то претензии уже не к коллектору

Ответить | Правка | К родителю #9 | Наверх | Cообщить модератору

20. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (18), 13-Апр-23, 08:11 
Недоброжелатели обычно тусят именно в доверенной сети. И обычно этот тот человек, который сидит рядом с тобой и которому ты максимально доверяешь.
Ответить | Правка | Наверх | Cообщить модератору

21. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от жявамэн (ok), 13-Апр-23, 08:20 
этот недоброжелатель он сейчас с тобой в комнате?
под кроватью посмотри кстати
Ответить | Правка | Наверх | Cообщить модератору

24. "Опубликован Netflow-коллектор Xenoeye"  +2 +/
Сообщение от Аноним (24), 13-Апр-23, 08:37 
> под кроватью посмотри кстати

Нашёл! Спасибо за подсказку.

Ответить | Правка | Наверх | Cообщить модератору

23. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 13-Апр-23, 08:35 
> Недоброжелатели обычно тусят именно в доверенной сети

А зачем тогда недоброжелателю искать дыры в коллекторе? Он же может и так сделать флоу общедоступными?

Ответить | Правка | К родителю #20 | Наверх | Cообщить модератору

35. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (35), 13-Апр-23, 16:56 
> происходит внутри доверенной сети

Таких сетей существует ровно две: ::1/128 и 127.0.0.0/8. Все остальные сети недоверенные.

Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору

22. "Опубликован Netflow-коллектор Xenoeye"  +1 +/
Сообщение от яя (?), 13-Апр-23, 08:24 
можно подумать дыры зависят от языка, а не от человеческого фактора...
Ответить | Правка | К родителю #9 | Наверх | Cообщить модератору

19. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Catwoolfii (ok), 13-Апр-23, 08:10 
В свое время остановился на logstash, там препроцессинг удобнее. Да и выводить данные можно почти куда угодно.
Ответить | Правка | Наверх | Cообщить модератору

25. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 13-Апр-23, 08:55 
Elastic стек, скажем так, на любителя.

У них еще произошла смена лицензий, часть продуктов стали не совсем open source:

https://www.elastic.co/pricing/faq/licensing#elasticsearch-k...

> Neither the Elastic License nor SSPL have been approved by the OSI, so to prevent confusion, we no longer refer to Elasticsearch or Kibana as open source

То есть пока для обычных пользователей вроде как ничего не изменилось, но кто знает что им дальше придет в голову

Ответить | Правка | Наверх | Cообщить модератору

32. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Catwoolfii (ok), 13-Апр-23, 11:36 
Не, у меня: logstash -> clickhouse -> grafana
Ответить | Правка | Наверх | Cообщить модератору

27. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Tron is Whistling (?), 13-Апр-23, 09:18 
Um, и зачем это, если есть flowd?
Ответить | Правка | Наверх | Cообщить модератору

28. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Tron is Whistling (?), 13-Апр-23, 09:19 
Еще nfdump есть.

Вообще, какой смысл у сий поделки? Что там такого, чего бы не хватало в имеющемся?

Ответить | Правка | Наверх | Cообщить модератору

29. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от 1 (??), 13-Апр-23, 09:35 
> Производительность коллектора в зависимости от характера трафика и отчётов может достигать нескольких сотен тысяч "flows per second" на одном CPU.

Для этого

Ответить | Правка | Наверх | Cообщить модератору

37. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Tron is Whistling (?), 14-Апр-23, 09:02 
nfdump вполне себе справляется и с бОльшим количеством, вне зависимости от характера трафика :D
Ответить | Правка | Наверх | Cообщить модератору

43. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 18-Апр-23, 08:26 
> nfdump вполне себе справляется и с бОльшим количеством, вне зависимости от характера трафика :D

Понятно. nfdump - это определенно не самый быстрый коллектор. Слово dump в названии кагбе намекает, что он пишет все фловы на диск и только потом их обрабатывает

Ответить | Правка | Наверх | Cообщить модератору

44. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Tron is Whistling (?), 18-Апр-23, 09:15 
Нет, если тебе надо обрабатывать вот строго одним алкоритмом - да, можно не писать.
Но если у тебя пост-аналитика и возможны изменяющиеся обработки - придётся писать, куда ты денешься.
Ну и опять же, "диск" - понятие очень растяжимое. tmpfs и zram - диск или не диск?
Ответить | Правка | Наверх | Cообщить модератору

33. "Опубликован Netflow-коллектор Xenoeye"  +/
Сообщение от Аноним (16), 13-Апр-23, 11:51 
flowd настолько прекрасен, что им уже лет 10 не пользуются даже авторы.

Выше написал - из старых коллекторов остались более-менее в живых только FastNetMon и nfdump. Причем у FastNetMon все интересное только в коммерческих версиях.

Можно считать, что xenoeye это такой гибрид nfdump (для отчетов, графиков, поиска аномалий в трафике) + FastNetMon (для быстрой реакции на пробитие порогов) + экспорт в Grafana для современных дашбордов

Ответить | Правка | К родителю #27 | Наверх | Cообщить модератору

36. "Опубликован Netflow-коллектор Xenoeye"  –1 +/
Сообщение от Tron is Whistling (?), 14-Апр-23, 09:02 
Ну короче смузихлёбство, я понял.
Ответить | Правка | Наверх | Cообщить модератору

40. "Опубликован Netflow-коллектор Xenoeye"  +1 +/
Сообщение от Аноним (40), 14-Апр-23, 17:44 
Хочется поблагодарить авторов и пожелать им успехов.
Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру