The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Представлена система резервного копирования Obnam 1.0, подде..., opennews (??), 02-Июн-12, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


39. "Представлена система резервного копирования Obnam 1.0, подде..."  +/
Сообщение от Аноним (-), 03-Июн-12, 08:30 
> А rsync дедубликацию поддерживает? Актуально для однотипно настроенных компьютеров.

zfs/btrfs?

Ответить | Правка | К родителю #34 | Наверх | Cообщить модератору

43. "Представлена система резервного копирования Obnam 1.0, подде..."  +/
Сообщение от filosofem (ok), 03-Июн-12, 12:35 
В Btrfs не известно когда увидим работающую дедупликацию. В рассылке писали что уже можно дедуплицировать по расписанию и пример утилиты был, но опции для онлайн дедупликации нет и возможно не будет. Кто-то из разработчиков писал, что идеологически не верно делать дедупликацию в ФС, а надо на прикладном уровне как в Obnam. По-своему он конечно прав.
ZFS ― латентная проприетарь со всеми вытекающими. Если данный факт не смущает, то можно уже рсинкать на ZFS. =) Но проприетарные ынтырпрайз решения с дедупликацией существовали задолго до ZFS и благополучно покупаются теми кому очень надо.
Ответить | Правка | Наверх | Cообщить модератору

59. "Представлена система резервного копирования Obnam 1.0, подде..."  +/
Сообщение от Аноним (-), 04-Июн-12, 07:15 
> В Btrfs не известно когда увидим работающую дедупликацию. В рассылке писали что
> уже можно дедуплицировать по расписанию и пример утилиты был, но опции
> для онлайн дедупликации нет и возможно не будет. Кто-то из разработчиков
> писал, что идеологически не верно делать дедупликацию в ФС, а надо
> на прикладном уровне как в Obnam. По-своему он конечно прав.

По моему он совсем не прав. Теряется прорачность доступа к данным, если делать дедуплекацию через прикладной уровень, к тому же нужно держать карту хешей, которая в фс уже и так есть

> ZFS ― латентная проприетарь со всеми вытекающими. Если данный факт не смущает,
> то можно уже рсинкать на ZFS. =) Но проприетарные ынтырпрайз решения
> с дедупликацией существовали задолго до ZFS и благополучно покупаются теми кому
> очень надо.

Латентная или не латентная, а свободная и еще можно поспорить что свободнее, CDDL или GPL. Бекапы уже написаны: sh,rsync,zfs,snapshot + прочие плюшки zfs, типа прозрачного сжатия данных и дедупликации. В итоге не ломаемое решение из-за своей дубовости, моментальный доступ к любому снимку данных (а не как обычно в инкрементных бекапах - по полчаса думает) и отличная прозрачность. И прозрачность тут будет даже побольше, чем в полных бекапах запакованных tar-ом, т.к. здесь распаковывать ничего не нужно (например что бы diff сделать), просто идешь и в .zfs/snapshot и работаешь с данными от нужной даты.

Ответить | Правка | Наверх | Cообщить модератору

65. "Представлена система резервного копирования Obnam 1.0, подде..."  +/
Сообщение от PnD (??), 06-Июн-12, 20:46 
  В последнее время плотно занимался этим вопросом (zfs+дедупликация рулят для хранения сотен гиг lvm-снапшотов), так вот есть подводный камень: zfs стабильна на соляре и вроде бы опен-индиане. Т.к. дедупликатор представляет собой упаковщик с безразмерным словарем (в текущей реализации вроде пользует sha256-хэши блоков, вероятность коллизии что-то в районе 10-31, я эту математику не осилил, так что лучше перепроверьте), код дедупликатора должен как-то ограничивать аппетиты (оценка ~5 GB RAM per 1 TB DATA). Во FreeBSD 9.0 он с этим не справляется >> kernel panic. Есть еще "Native ZFS for Linux", его потестить руки пока не дошли.
  Для себя выбрал OpenIndiana domu over xen4.1 dom0 - современных процов хватает протащить гигабитный поток данных с учетом всех пенальти. Важно разумно выбирать размер пула, т.к. БД дедупликатора одна на каждый пул.
Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру