URL: https://www.opennet.me/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID3
Нить номер: 81332
[ Назад ]

Исходное сообщение
"Релиз Memcached 1.4.10 со значительным увеличением производи..."

Отправлено opennews , 15-Ноя-11 18:47 
Анонсирован (http://groups.google.com/group/memcached/msg/7a7d944616502a4a) выход нового релиза системы кеширования данных в оперативной памяти Memcached 1.4.10 (http://memcached.org/), оперирующей данными в формате ключ/значение и отличающейся простотой использования. Новая версия примечательна работой (http://code.google.com/p/memcached/wiki/ReleaseNotes1410), проделанной в направлении увеличения производительности и улучшения поддержки многопоточности. Внесённые оптимизации позволили заметно увеличить производительность конфигураций, в которых memcached работает в 3-6 потоков (от "-t 3" до "-t 6", при использовании значений "-t" больше 6 - производительность падает).


Тестирование пакетом mc-crusher (http://github.com/dormando/mc-crusher) на сервере с четырёхядерным процессором показало, что пропускная способность Memcached возросла с 300 до 930 тысяч операций "set" в секунду, а скорость извлечения данных по ключам увеличилась с 1.6 до 3.7 миллионов операций "get" в секунду. Про...

URL: http://groups.google.com/group/memcached/msg/7a7d944616502a4a
Новость: http://www.opennet.me/opennews/art.shtml?num=32306


Содержание

Сообщения в этом обсуждении
"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 15-Ноя-11 18:47 
Ни чего себе так поаптомайзили

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Карбофос , 15-Ноя-11 18:59 
гораздо интереснее, какой там запас еще остался

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 00:31 
> гораздо интереснее, какой там запас еще остался

Еще около сотни строчек вида for (i=1,i<1000,i++) {};


"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Карбофос , 16-Ноя-11 03:01 
пустые циклы? они выкидываются компилятором

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено pavlinux , 15-Ноя-11 18:56 
Осталось придумать куда бы его засунуть?! :)

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 15-Ноя-11 19:40 
В кэширующий прокси - фронт-энд балансировки нагрузки на БД, не?

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено all_glory_to_the_hypnotoad , 15-Ноя-11 21:56 
у всего этого обычно есть свои кеши и memcached там ни в каком виде не нужен.

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 15-Ноя-11 22:36 
Вот я дурак, когда Memcached в помощь nginx использовал, а тот, в свою очередь, отдавал накопленную статику из кэша! Надо было напрямую отдавать SQL-сервер на растерзание, без прикрытия фронт-эндом!..

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 00:29 
Простите, у вас nginx кэшировал ответы БД-сервера?
Скажите, как вам это удалось?

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 10:35 
Используй голову, Люк (С)

Что, не доходит? Динамические страницы можно формировать в БД. Новость?


"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 19:14 
БД-сервер активно используется лишь в начале, когда копится статика для кэша. Затем он используется лишь при нестандартных запросах, которых менее 5% от общего числа в моём случае. Некоторые nginx'ом Apache прикрывают, используя и Memcached.

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 19:48 
> БД-сервер активно используется лишь в начале, когда копится статика для кэша. Затем
> он используется лишь при нестандартных запросах, которых менее 5% от общего
> числа в моём случае. Некоторые nginx'ом Apache прикрывают, используя и Memcached.

Ты совершенно прав, анон. +100500


"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 15-Ноя-11 20:23 
Эх только перелез на редис.
Хотя и правильно перелез. ТТЛ нужен, а самому его делать не охото и не правильно.
Потому как когда время жизни ключа истекает идет запрос в SQL. А запрос в SQL Это время, пусть несколько десятков милисикунд но время. И в это время кэш пустой. А раз он пустой SQL вдогонку получает еще несколько сотен запросов, от чего все и падает.
Короче упреждающее обновление кеша нужно. а без TTL неудобно.

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Aquarius , 15-Ноя-11 22:31 
а устранить условие гонки никак?

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено san , 15-Ноя-11 22:52 
Ну, сделай, например, чтобы первый, кто полез за данными в базу, установил в memcache в качестве результата для этой операции специальное значение "Work in progress", чтобы другие подождали. Или если получил данные из memcache и точно знаешь, что их нужно закешировать, а TTL вот-вот обнулиться, продли его (чтобы ты был один такой умный) и обнови данные из SQL (как вариант, можно сделать это с некоторой вероятностью, которая тем больше, чем длительнее рассчет этих данных, вместо продлевания TTL, тогда чем больше запросов лезут к этим данным и больше время тратится на их перерассчет, тем больше шансов, что кто-то попытается их продлить до обнуления TTL). Можно оба подхода скомбинировать. Да и сам, если подумаешь, сможешь придумать получше варианты для своей задачи. Тут только главное не переусердствовать, потому что кеш должен содержать данные, которые (часто нужны)*(длительно рассчитываемы), так как все подряд туда не поместится - оперативка ограничена.

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 19:47 
"Плашка оперативы стоит как лопата д.рьма" (С)

Ты ничо не напутал, Сан? На дворе 2011й, не 1996й. Чем ограничена оператива? Воображением логистика фирмы?


"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено имя , 16-Ноя-11 21:47 
мда мне бы такие проблемы ...
php?
А если серьёзно:
ключевое слово синхронизация.

"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено AlexAT , 16-Ноя-11 07:32 
>>> Потому как когда время жизни ключа истекает идет запрос в SQL. А запрос в SQL Это время, пусть несколько десятков милисикунд но время. И в это время кэш пустой. А раз он пустой SQL вдогонку получает еще несколько сотен запросов, от чего все и падает.

Если у вас при холодном кеше система неустойчива - её пора серьёзно дорабатывать.


"Релиз Memcached 1.4.10 со значительным увеличением производи..."
Отправлено Аноним , 16-Ноя-11 08:45 
Вот поэтому и редис