Вариант для распечатки |
Пред. тема | След. тема | ||
Форум Разговоры, обсуждение новостей | |||
---|---|---|---|
Изначальное сообщение | [ Отслеживать ] |
"Выпуск cache-bench 0.1.0 для исследования эффективности кэширования файлов при нехватке памяти" | +/– | |
Сообщение от opennews (?), 04-Июн-21, 16:24 | ||
cache-bench - это Python скрипт, позволяющий оценить влияние настроек виртуальной памяти (vm.swappiness, vm.watermark_scale_factor, Multigenerational LRU Framework и прочих) на производительность выполнения задач, выполнение которых зависит от кэширования файловых операций чтения в условиях нехватки памяти. Код открыт под лицензией CC0... | ||
Ответить | Правка | Cообщить модератору |
Оглавление |
Сообщения | [Сортировка по времени | RSS] |
1. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –6 +/– | |
Сообщение от Рева RarogCmex Денис (?), 04-Июн-21, 16:24 | ||
Интересно, сколько он будет мои 48Гб на сервере тестировать. | ||
Ответить | Правка | Наверх | Cообщить модератору |
2. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +11 +/– | |
Сообщение от commiethebeastie (ok), 04-Июн-21, 16:31 | ||
Понты уровня сiло. | ||
Ответить | Правка | Наверх | Cообщить модератору |
3. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +8 +/– | |
Сообщение от Ананомизец (?), 04-Июн-21, 16:35 | ||
фсяко быстрие чем маи 512Г | ||
Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору |
4. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от быдлоюзер (?), 04-Июн-21, 16:38 | ||
У меня 26гб озу. За две недели работы платформы отображающей много графиков цен криптовалют, своп распух до 78гб. | ||
Ответить | Правка | Наверх | Cообщить модератору |
6. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +/– | |
Сообщение от Аноним (6), 04-Июн-21, 16:47 | ||
Если это жава, возможно, поможет uksm и openj9 -- в теории, потребление памяти упадёт очень значительно, и своп будет использоваться более эффективно. | ||
Ответить | Правка | Наверх | Cообщить модератору |
7. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от быдлоюзер (?), 04-Июн-21, 16:49 | ||
Платформа sierrachart сделана на чистом c++ для винды, работает через wine | ||
Ответить | Правка | Наверх | Cообщить модератору |
18. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +/– | |
Сообщение от НяшМяш (ok), 04-Июн-21, 18:45 | ||
Может быть утекает сам wine. Один раз столкнулся с утечкой GDI объектов - программа просто переставала перерисовываться и замечали это не сразу, а в логах сыпались ошибки. Пофиксили с помощью winetricks gdiplus. Может и с этим софтом тоже похожая история приключилась. | ||
Ответить | Правка | Наверх | Cообщить модератору |
10. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 04-Июн-21, 17:26 | ||
>Поможет ли мне этот скрипт подобрать правильные значения vm.swappiness, vm.watermark_scale_factor, Multigenerational LRU Framework и прочих? | ||
Ответить | Правка | К родителю #4 | Наверх | Cообщить модератору |
11. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –2 +/– | |
Сообщение от Амоним (?), 04-Июн-21, 17:30 | ||
Копать в сторону drop cache и memory compaction / fragmentation. Дело вовсе не в нехватке памяти, а в её фрагментации. Теоретически ядро с этим само справляется, фактически приходится ему помогать - принудительно сбрасывать (файловый) кэш и утрабмовывать (дефрагментировать) свободную память. Смотреть в /proc/buddyinfo | ||
Ответить | Правка | К родителю #4 | Наверх | Cообщить модератору |
13. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +/– | |
Сообщение от Амоним (?), 04-Июн-21, 17:36 | ||
Правильнее будет сказать - дело не только в нехватке памяти, но и в её фрагментации. | ||
Ответить | Правка | Наверх | Cообщить модератору |
14. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 04-Июн-21, 17:38 | ||
При наличии zram основной причиной тормозов при своппинге как раз является истощение чистых файловых кэшей - приходится часто дёргать медленный диск на каждый чих. Тут как раз поможет именно увеличение своппинес, чтоб ценный кэш не выбрасывался из памяти. | ||
Ответить | Правка | К родителю #11 | Наверх | Cообщить модератору |
19. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +1 +/– | |
Сообщение от Аноним (19), 04-Июн-21, 18:46 | ||
Попробуй вот этот | ||
Ответить | Правка | К родителю #4 | Наверх | Cообщить модератору |
22. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от Аноним (22), 05-Июн-21, 02:58 | ||
Спасибо. А в каких единицах выводится Swapsize? | ||
Ответить | Правка | Наверх | Cообщить модератору |
27. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от быдлоюзер (?), 05-Июн-21, 17:57 | ||
Открытие графиков при запуске программы занимает минут 40, съев всё озу и наполняя своп до 17гб. И начинается штатная работа, в процессе которой за 2 недели своп наполняется до 80гб. | ||
Ответить | Правка | К родителю #19 | Наверх | Cообщить модератору |
25. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +/– | |
Сообщение от edo (ok), 05-Июн-21, 13:45 | ||
> не отвечает несколько минут | ||
Ответить | Правка | К родителю #4 | Наверх | Cообщить модератору |
26. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от быдлоюзер (?), 05-Июн-21, 14:01 | ||
Hdd | ||
Ответить | Правка | Наверх | Cообщить модератору |
8. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +3 +/– | |
Сообщение от Аноним (8), 04-Июн-21, 17:01 | ||
О каждом своём наколеночном скрипте теперь буду новость на опеннете писать. | ||
Ответить | Правка | Наверх | Cообщить модератору |
9. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 04-Июн-21, 17:08 | ||
Если полезный скрипт - почему бы и нет? | ||
Ответить | Правка | Наверх | Cообщить модератору |
12. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +2 +/– | |
Сообщение от Аноним (8), 04-Июн-21, 17:36 | ||
>Например, с помощью cache-bench установлено, например, что Multigenerational LRU Framework, недавно опубликованный гуглом, не вполне корректно работает со swappiness, точнее то, что swappiness (от 1 до 200) очень слабо влияет на результат, в отличие от тестов с применением классического LRU. | ||
Ответить | Правка | Наверх | Cообщить модератору |
15. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 04-Июн-21, 17:41 | ||
Скрипту месяц, просто не был опубликован. | ||
Ответить | Правка | Наверх | Cообщить модератору |
16. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 04-Июн-21, 17:42 | ||
>новость написать про ошибки в Multigenerational LRU Framework лучше, чем одноразовый скрипт пиарить? | ||
Ответить | Правка | К родителю #12 | Наверх | Cообщить модератору |
17. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 04-Июн-21, 17:51 | ||
уже было на лоре https://www.linux.org.ru/news/opensource/16350636 | ||
Ответить | Правка | Наверх | Cообщить модератору |
20. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +/– | |
Сообщение от Annoynymous (ok), 04-Июн-21, 20:42 | ||
На ЛОР-е r-test, здесь cache-bench. | ||
Ответить | Правка | Наверх | Cообщить модератору |
24. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | –1 +/– | |
Сообщение от foo (?), 05-Июн-21, 03:20 | ||
> На ЛОР-е r-test, здесь cache-bench. | ||
Ответить | Правка | Наверх | Cообщить модератору |
28. "Выпуск cache-bench 0.1.0 для исследования эффективности кэши..." | +/– | |
Сообщение от adolfus (ok), 07-Июн-21, 00:27 | ||
Что такое директория? Директрисса, что ли? | ||
Ответить | Правка | Наверх | Cообщить модератору |
Архив | Удалить |
Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема |
Закладки на сайте Проследить за страницей |
Created 1996-2024 by Maxim Chirkov Добавить, Поддержать, Вебмастеру |