OpenForum RSS: Моментальное обновление данных в СУБД MySQL с помощью LVM SN... https://opennet.ru/openforum/vsluhforumID3/64808.html В статье (http://wiki.opennet.ru/MySQL_LVM_Update) представлен вариант решения проблемы блокировки сервисов извлечения информации при добавлении больших блоков данных в СУБД MySQL. Проблема решена с помощью моментальных снимков (snapshot) в менеджере томов LVM. <br><br>URL: http://wiki.opennet.ru/MySQL_LVM_Update<br>Новость: http://www.opennet.ru/opennews/art.shtml?num=25818<br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (wkon) https://opennet.ru/openforum/vsluhforumID3/64808.html#11 Fri, 19 Mar 2010 14:04:24 GMT Сдалал тесты, методика следующая:<br><br><br><br>1. оптимизируем таблицы в mydb_master.<br>2. mysqladmin refesh<br>3. sync<br>4. echo 2 &gt; /proc/sys/vm/drop_caches; echo 3 &gt; /proc/sys/vm/drop_caches<br>5. запускаем обработку + sync.<br><br>Далее добавляем симок и повтяряем операцию.<br><br>Каждый раз обрататывается один и тот же блок данных (1000000 записей,размером ~100MB).<br>Исоходные данные агрегируются оп различным схемам и записываются в индексированные таблицы. Фактически, каждый раз данные перезаписываются, то есть состояение базы не меняется.<br><br>Кроме того я проверял время копирования одного гигабайта в каждом случае.<br><br>[CODE]<br>Конфигурация Время оптимизации Обрабтка+sync Копируем 1GB + sync<br>mydb 07:03 2:50 0:05<br>mydb+1*snap 09:23 2:56 0:05<br>mydb+2*snap 10:74 3:01 1:40<br>mydb+3*snap 11:23 3:1 Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (sluge) https://opennet.ru/openforum/vsluhforumID3/64808.html#10 Thu, 18 Mar 2010 11:50:38 GMT fuse вам в помощ <br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (wkon) https://opennet.ru/openforum/vsluhforumID3/64808.html#9 Wed, 17 Mar 2010 20:08:34 GMT &gt;К сожалению, "моментальные" снимки LVM не такие-уж и моментальны ...<br><br>Я почему-то склонен верить ссылке, приведеной в статье:<br>http://www.mysqlperformanceblog.com/2009/02/05/disaster-lvm-performance-in-snapshot-mode<br><br>Общий вывод - LVN + xfs + snapshot - вполне съедобно. ZFS может и лучше, но к сожалению на Linux ее не<br>предвидется :(.<br><br>При случае проведу аккуратные тесты и выложу результаты.<br><br>--<br>Вениамин.<br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (wkon) https://opennet.ru/openforum/vsluhforumID3/64808.html#8 Wed, 17 Mar 2010 20:00:20 GMT В целом соглашусь с funky_dennis. Действительно, метод работает в случае если та часть БД<br>с которой выполняется снимок состоит из таблиц MyISAM.<br>Подкорректирую статью.<br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (walrus) https://opennet.ru/openforum/vsluhforumID3/64808.html#7 Wed, 17 Mar 2010 14:25:00 GMT И что случится, если использовать такой бэкап с innodb? то же , что при потере питания машины. Во время восстановления откатятся текущие транзакции. И все. <br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (Аноним) https://opennet.ru/openforum/vsluhforumID3/64808.html#6 Wed, 17 Mar 2010 11:25:27 GMT тора гой, не используй ZFS под vmware и все будет карашо.<br><br>если серьзно - ZFS хороша на "родном" Solaris. там она для MySQL - шикарна.<br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (ank1812) https://opennet.ru/openforum/vsluhforumID3/64808.html#5 Wed, 17 Mar 2010 11:04:44 GMT zfs реально одна из самых быстрых файловых систем. "просто добавь воды"(памяти).<br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (Аноним) https://opennet.ru/openforum/vsluhforumID3/64808.html#4 Wed, 17 Mar 2010 08:13:28 GMT Ага, только зфс тот еще тормоз....<br> Моментальное обновление данных в СУБД MySQL с помощью LVM SN... (Аноним) https://opennet.ru/openforum/vsluhforumID3/64808.html#3 Tue, 16 Mar 2010 22:37:42 GMT К сожалению, "моментальные" снимки LVM не такие-уж и моментальны и, что самое главное, под нагрузкой после снимка все начитает _так_ тормозить <br>Полноценно такую технику можно использовать "в бою" только на Copy-on-Write файловых системах, например - ZFS. <br>