Профиль: Аноним (вход | регистрация) неRU opennet.me  
The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



"98% запросов к git.kernel.org формируют боты"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"98% запросов к git.kernel.org формируют боты"  +/
Сообщение от opennews (??), 29-Авг-26, 16:43 
Константин Рябцев, администратор инфраструктуры kernel.org,...

Подробнее: https://www.opennet.me/opennews/art.shtml?num=66171

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения [Сортировка по ответам | RSS]

2. Сообщение от Сладкая булочка (?), 29-Авг-26, 16:47   –3 +/
Поставили бы капчу.
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #7, #14, #16, #35

3. Сообщение от Аноним (3), 29-Авг-26, 16:49   +2 +/
ну так и оставили бы анонимам только git clone
Ответить | Правка | Наверх | Cообщить модератору

4. Сообщение от Аноним (4), 29-Авг-26, 16:52   +5 +/
пусть введут регистрацию и подписку, в чём проблемы? - кто не хочет платить, пусть git clone делает
Ответить | Правка | Наверх | Cообщить модератору

5. Сообщение от анондирован (?), 29-Авг-26, 16:54   +1 +/
ИИ боты?;)
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #27

6. Сообщение от Аноним (6), 29-Авг-26, 16:56   –1 +/
> 98% запросов к git.kernel.org формируют боты, создавая огромную паразитную нагрузку

Дак сами же внедряете эти всякие ИИ в том числе в ядро, что удивляетесь теперь?

Ответить | Правка | Наверх | Cообщить модератору
Ответы: #9

7. Сообщение от Чуд (?), 29-Авг-26, 17:01   +2 +/
Вот ведь проблему себе придумали... Поставить капчу, В С Ё. Но ладно, от анубиса уже не откажешься, это же "enbyware". Вопрос из этого: если ваш продукт небинарный, почему вы его запускайте в бинарной среде?
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #2

8. Сообщение от Аноним (8), 29-Авг-26, 17:07   +/
git clone от ядра линукс с его миллионами коммитов это сколько мусора надо качать, чтоб получить все исходники? Сколько по размеру надо жесткий диск?
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #11, #12, #40

9. Сообщение от Аноним (9), 29-Авг-26, 17:09   +2 +/
О да, ИИшечка, внедрённая в ядро линукс, лезет в коммиты гит-сервера на кернел.орг, чтобы убедиться в том, что её воспоминания об исходном коде легитимны и она не репликант. И так на сотнях миллионов девайсов по всему миру.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #6

10. Сообщение от Сергей Макаров (?), 29-Авг-26, 17:18   +/
Вот думаю, а не создали ли они себе проблему постоянно блокируя? Не начинают ли боты просто переходить по много раз так как не смогли достучаться?
Ответить | Правка | Наверх | Cообщить модератору

11. Сообщение от Аноним (11), 29-Авг-26, 17:20   +3 +/
Меньше 6 Гбайт.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #8 Ответы: #39

12. Сообщение от Аноним (12), 29-Авг-26, 17:21   +1 +/
--depth=1
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #8

13. Сообщение от Dishik (?), 29-Авг-26, 17:39   +3 +/
Очередной прогрев догадайтесь на тему чего.
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #28

14. Сообщение от Dishik (?), 29-Авг-26, 17:40   +7 +/
За такие советы нужно сажать на пожизненное. Итак интернет весь закапчеван.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #2

15. Сообщение от Аноним (15), 29-Авг-26, 17:44   +3 +/
>а дальше повышать уровень проблематично, так как даже пятый уровень требует нескольких секунд вычислений и сильно раздражает легитимных пользователей.

Нескольких секунд? Когда заходишь с телефона, этот *дский анубис, минимум пару минут телефон кошмарит... А ты сидишь и втыкаешь на надпись "ой кажется это заняло больше времени чем ожидалось, не обновляй страницу".

Ответить | Правка | Наверх | Cообщить модератору
Ответы: #17, #21

16. Сообщение от Аноним (16), 29-Авг-26, 17:47   +/
Ага, капчу. Даже задолго до появления массовых нейронок, у меня уже стояло расширение, решающее автоматом всякие капчи, включая всевозможные Гугловские. А сейчас написать бота, умеющего их проходить, вообще элементарно
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #2 Ответы: #19

17. Сообщение от Аноним (16), 29-Авг-26, 17:51   –1 +/
Это насколько древнее у тебя устройство? У меня на смарте с процом уровня G95 и 4 ГБ ОЗУ эта проверка секунд за 10-15 проходит. На более мощных должно быть куда быстрее
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #15 Ответы: #20, #22

19. Сообщение от Аноним (19), 29-Авг-26, 17:58   +7 +/
Я в 2011 году работал в галере, которая писала нейронку, которая решала абсолютно все капчи. на тот момент. Сегодня капча это не капча, а элемент фингерпринтинга и слежки.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #16 Ответы: #48, #50

20. Сообщение от Аноним (19), 29-Авг-26, 18:00   +2 +/
> секунд за 10-15 проходит

У меня во времена диалапа страницы быстрее грузились.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #17

21. Сообщение от Аноним (19), 29-Авг-26, 18:00   +1 +/
Анубис это не капча, а элемент фингерпринтинга.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #15 Ответы: #24, #41

22. Сообщение от Аноним (15), 29-Авг-26, 18:04   +/
У меня OnePlus 6T, фоты не фотаю, в игрушки не играюсь, а для ютуба/браузера хватает за глаза. Пока батарея не помрет менять не собираюсь.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #17

23. Сообщение от Аноним (23), 29-Авг-26, 18:25   –1 +/
Надо просто сделать логин по tls сертификату клиентскому. Сертификат выдавать лично под подпись.
Ответить | Правка | Наверх | Cообщить модератору

24. Сообщение от NameName (?), 29-Авг-26, 18:29   –1 +/
пошел посомтрел что это такое -
это вычислительная капча, не фингерпринтинг.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #21 Ответы: #30

25. Сообщение от Аноним (28), 29-Авг-26, 18:31   –1 +/
Пора вводить регистрацию по почте с запретом анонимных почт и почт однодневок.
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #54

26. Сообщение от Аноним (27), 29-Авг-26, 18:31   +/
Всю жизнь это решалось доступом только после регистрации. А потом баном неугодных.
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #55

27. Сообщение от Аноним (27), 29-Авг-26, 18:32   +/
Чтобы коммит попал в ИИ ему нужно текст получить через бот. Все правильно.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #5

28. Сообщение от Аноним (28), 29-Авг-26, 18:33   –1 +/
98% ботов похоже на шутку?
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #13 Ответы: #60

29. Сообщение от Аноним (29), 29-Авг-26, 18:41   +2 +/
Очень напрягает, что эти дурни банят чатботы. Наверно, если я прошу что-то найти, мне нужна эта информация с сайта и они не сами по себе ищут.
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #38, #42

30. Сообщение от NoJS (?), 29-Авг-26, 18:53   +1 +/
Так тебе и написали прямым текстом, что эти возможности используются для сбора данных.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #24

35. Сообщение от Аноним (35), 29-Авг-26, 18:59   +/
а чё у гит.кернел.орг нет ридонли зеркала на гитхабе? ботом оно понравится больше.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #2 Ответы: #49, #61

37. Сообщение от Аноним (-), 29-Авг-26, 19:08   +/
> хэш SHA-256 от которого в сочетании с выданной сервером
> строкой содержит определённое число лидирующих нулей

Ботоводы, берите уже ASIC для биткоина - он вам этого тера-хешей в секунду насыпет, а юзерам придется или 2 часа смотреть на счет JSом блока или идти нафиг.

Ответить | Правка | Наверх | Cообщить модератору
Ответы: #62

38. Сообщение от Аноним (-), 29-Авг-26, 19:10   +/
> Очень напрягает, что эти дурни банят чатботы. Наверно, если я прошу что-то найти,
> мне нужна эта информация с сайта и они не сами по себе ищут.

Если б у чатботов хватало ума делать git clone и потом парсить все это на своей стороне они всем пофиг были бы. Но они ж через веб лезут - и долбят миллиардами микрозапросов, на основе crawling, а вот эти - не особо легкие и спецом под них - так что не особо кешируются, и в результате - много оверхеда и тормозов изниоткуда.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #29

39. Сообщение от Аноним (-), 29-Авг-26, 19:13   +/
>  Меньше 6 Гбайт.

Теперь попробуй повторить это в том стиле как д-ловатые боты лезщие через веб. Они находят линк, парсят пагу, кравлят по линкам дельше. И ты можешь себе представить как выгоядит в этом виде линух кернел с всеми комитами, ревизиями, версиями, вот этим всем? :)

Не, 6 гиг там не будет - там будет два зиллиона микрозапросов с ломовым оверхедом.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #11

40. Сообщение от Аноним (-), 29-Авг-26, 19:14   +/
>  git clone от ядра линукс с его миллионами коммитов это сколько мусора надо качать,
> чтоб получить все исходники? Сколько по размеру надо жесткий диск?

Суммарно .git в дереве ядра у меня менее 2 гиг занимает. Не так уж и много.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #8

41. Сообщение от Аноним (-), 29-Авг-26, 19:15   +1 +/
>  Анубис это не капча, а элемент фингерпринтинга.

Не, это подобие майнера биткоинов - дико недопиленое и кривое. Что вы от игогошников хотели то. Под серьезной атакой - анубис сам жрет на сервере не мешнье проца чем насилуемый ботами вебсерв и защита получается - ну такая себе, если честно.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #21 Ответы: #53

42. Сообщение от Аноним (28), 29-Авг-26, 19:49   +/
Welcome если они будешь оплачивать хостинг
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #29 Ответы: #43

43. Сообщение от Аноним (29), 29-Авг-26, 20:03   +/
> Welcome если они будешь оплачивать хостинг

Какой тогда смысл иметь эту функциональность? Вручную запросов в 100 раз больше каждый раз.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #42

46. Сообщение от Аноним (46), 29-Авг-26, 20:26   +1 +/
Зато в дебиан разрешили использовать ИИ для написания кода🤦, а перед этим Сам "великий и ужасный" Торвальдс одобрил тоже самое вообще для кода линя.
Штош, ребята решили сами себя закопать
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #47

47. Сообщение от Аноним (-), 29-Авг-26, 20:28   +/
Нормальный ход. Не понимаю возмущения
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #46

48. Сообщение от Аноним (-), 29-Авг-26, 20:48   +/
> Я в 2011 году работал в галере, которая писала нейронку, которая решала абсолютно все
> капчи. на тот момент.

А если вдруг не того - берется живая нейронка, $2 за 1000 капч и вот оно. Ну и вы понимаете что за триллионные обороты AI - вам запросов накидают немного больше чем вы б хотели даже так? :)

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #19

49. Сообщение от Аноним (-), 29-Авг-26, 20:49   +1 +/
>  ботом оно понравится больше.

Думаешь чего гитхап икает единорогами и типа-убрал поиск, сделав его JS-only? На самом деле он конечно остался - но боты его теперь не допирают найти в общем случае. А с JS-only на видном месте - гонять полный браузер для каждого инстанса это все ж другой уровень жора ресурсов.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #35

50. Сообщение от Аноним (50), 29-Авг-26, 21:10   +/
Капча от компании Google (которая входит в холдинг Alphabet), известная как reCAPTCHA, уже много лет используется для обучения искусственного интеллекта (ИИ) и машинного зрения для беспилотных автомобилей.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #19

52. Сообщение от Аноним (52), 29-Авг-26, 21:38   +2 +/
мне кажется любая инфрастуктура типа амазон или ms посчитала за привилегию держать копию этих данных, выдавая на неё столько ресурсов сколько требуется. Ведь это буквально базовый уровень. Множество запросов к коду Linux говорит о том что система все больше набирает популярность. Надо обеспечить такую скорость выдачи которая удовлетворила бы всех.
Да, из гаражного уровня надо выбираться, ребята.
Ответить | Правка | Наверх | Cообщить модератору
Ответы: #59

53. Сообщение от Аноним (-), 29-Авг-26, 21:38   +/
Я спросил мне ответил ИИ: "Логика Anubis строится по принципу: «Сначала ты докажи делом, что ты настоящий браузер, а уже потом мы выдадим тебе пропуск».
1.Первый визит — тотальное недоверие (Вычисление хеша)
2.Проверка отпечатка (Fingerprinting) в процессе
3.Выдача «паспорта» (Куки)
4.Последующие заходы — проверка по фингерпринту"
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #41 Ответы: #57

54. Сообщение от Аноним (54), 29-Авг-26, 21:42   +/
Чё так мелко, сразу usa-id требовать
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #25

55. Сообщение от Аноним (54), 29-Авг-26, 21:43   +/
Боты уже сами могут зарегистрироваться.
Ответить | Правка | Наверх | Cообщить модератору
Родитель: #26

57. Сообщение от Аноним (57), 29-Авг-26, 21:52   +/
Anubis проигрывает под него подстроили ботов, его обходят боты те что посложнее. Anubis проигрывает целенаправленным продвинутым атакам, потому что крупные ИИ-разработчики и профессиональные скраперы адаптировали свои инструменты под его логику защиты.

"Соотношение «умных» и «простых» ботовВесь вредоносный и парсинговый трафик в интернете делится примерно пополам:55% — это продвинутые (Advanced) и умеренные (Moderate) боты. Именно этот пласт ботов без труда обходит Anubis.45% — это простые (Simple) боты. Скрипты, написанные «на коленке», которые Anubis щелкает как орешки"

"Поскольку Anubis — это бесплатный инструмент с открытым исходным кодом, разработчики ботов изучили его алгоритмы досконально. Как только крупный сайт (например, Codeberg или Arch Linux Wiki) ставит Anubis, авторы ИИ-парсеров за пару часов обновляют свои скрипты под конкретные требования этого файрвола"

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #53

58. Сообщение от нах. (?), 29-Авг-26, 22:00   +/
передайте этому м-ку что он детектирует как бота мой браузер. И я не собираюсь ничего с этим делать. Я без сайта дипломированных  м-ков как-нибудь обойдусь. Просто иногда нажимаю ссылку не успев сообразить что все равно не откроется.

И наверняка таких среди этих 98 - дохрена и выше.

Как говорили в нулевые - хуже спамеров только борцуны со спамом.

Ответить | Правка | Наверх | Cообщить модератору

59. Сообщение от нах. (?), 29-Авг-26, 22:08   +/
тебе правильно кажется. Тут сочетание чсв over 1000% с неумением в нагруженные системы и общая дерьмовость гита, разработанного для автоматизации единственного процесса у божка с пальцем, совершенно не предполагавшего что кто-то еще будет это читать.
Виноваты - боты, конечно.

Кстати, инфраструктура ms и так держит клон torvalds/linux - и не подсовывает анимешный пожиратель чужих ресурсов, как-то обходится.

> Да, из гаражного уровня надо выбираться, ребята.

Я б на всякий случай наоборот, дверь бы бревном получше подпер.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #52

60. Сообщение от нах. (?), 29-Авг-26, 22:10   +/
на вранье.

Которым и является.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #28

61. Сообщение от нах. (?), 29-Авг-26, 22:12   +/
удивительно, но факт - нет. В том числе потому что оно там через такую задницу, что ты изумишься.

Отдельные репо - типа самого линуса - есть. А полного клона в удобном виде - нет.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #35

62. Сообщение от нах. (?), 29-Авг-26, 22:26   +/
> Ботоводы, берите уже ASIC для биткоина

он под битшит только и заточен, вряд ли можно переделать под sha256

но сама идея нажористая, ага. Те же ускорители нвидии как раз с таким легко должны справляться.

Ответить | Правка | Наверх | Cообщить модератору
Родитель: #37


Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2026 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру