https://www.opennet.me/openforum/vsluhforumID3/95705.html Сообщество Gluster объявило (http://www.gluster.org/2014/05/glusterfs-3-5-unveiled/) о выходе распределенной файловой системы GlusterFS 3.5 (http://www.gluster.org/), позволяющей организовать работу распределённого на несколько узлов хранилища, развёртываемого поверх штатных POSIX ФС, таких как Ext4, XFS и Btrfs, с использованием механизма FUSE (ФС в пользовательском пространстве). GlusterFS предоставляет средства автоматического восстановления после сбоев и обеспечивает практически неограниченную масштабируемость, благодаря отсутствию привязки к централизованному серверу мета-данных (используются распределённые хэш-таблицы). Готовые для установки бинарные пакеты с GlusterFS 3.5 подготовлены (http://download.gluster.org/pub/gluster/glusterfs/3.5/3.5.0/) для Fedora, RHEL, CentOS, Debian, openSUSE, SLES и Ubuntu.<br><br><br><br>Основные новшества (https://github.com/gluster/glusterfs/blob/release-3.5/doc/release-notes/3.5.0.md):<br><br><br><br>- Поддержка создания снапшотов отдельных файлов. С практической стороны данная возмож https://www.opennet.me/openforum/vsluhforumID3/95705.html#65 Wed, 07 May 2014 05:21:42 GMT &gt;т.е. вот если в каталоге у нас 10 файлов, то всё, readdir() - низя?<br><br>можно. но если файлов так мало, то может распределённую фс делать не надо? можно конечно раскидывать по директориям,то как я понимаю Ceph будет лучше. <br><br>Я сам (да и не только я)в программах делаю так: в базе данных записи содержащие ссылки на файл(напимер картинки, видео), все файлы в одной директории. ls не нужно- вместо этого select с нужными критериями. <br><br><br>а если файлов в директории от сотен тысяч, то любая фс будет тормозить при ls, даже локальная<br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#64 Tue, 06 May 2014 22:23:56 GMT &gt; мне кажется использование не правильное.<br>&gt; в распределённых ФС потенциально миллиарды файлов и вызывать ls не стоит.<br><br>т.е. вот если в каталоге у нас 10 файлов, то всё, readdir() - низя?<br><br>и то, что тормознутость readdir() зависит от того, в каком каталоге вы это делаете - это вообще зачёт.<br><br><br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#63 Tue, 06 May 2014 06:44:27 GMT Вы его вживую новый видели?<br>А то они только на конфе говорили, что сделали поверх elliptics новый pohmelfs и пытались патчи в ядро протащить, но тесты у них не прошли (rsync mirror.yandex.ru загнулся на каталоге с симлинками).<br>Хотелось бы в виде модуля пощупать его, но что-то найти не могу<br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#62 Mon, 05 May 2014 19:34:10 GMT А вот тут рекомендую почитать про pNFS и заглянуть на http://www.pnfs.com/<br><br>&gt; а ты не знаешь случайно, что nfs не распределённая fs? И она <br>&gt; распределённости никак добавить не может ничему. https://www.opennet.me/openforum/vsluhforumID3/95705.html#61 Mon, 05 May 2014 18:46:19 GMT Про кредиты они и не слыхали. Зачем ты страусов такими словами пугаешь?<br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#60 Mon, 05 May 2014 18:45:20 GMT Ну расскажи уже как эти задержки скажутся на fc.<br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#59 Mon, 05 May 2014 14:42:41 GMT 200ms это что? мобильная связь? FC over LTE? :))) трансатлантика &lt; 80ms<br>так что соединить 2 ЦОДа на расстоянии 20-25 км не проблема, дальше<br><br>читать Buffer Credits, WAN optimization, FCIP WAN optimization, HyperIP, SANSlide, Brocade 7800 ну и так далее.<br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#58 Mon, 05 May 2014 10:29:02 GMT мне кажется использование не правильное.<br>в распределённых ФС потенциально миллиарды файлов и вызывать ls не стоит.<br><br>к примеру у HadoopFS ограничение на количество файлов - размер оперативной памяти ответствееоного за метаданные узла. у GlusterFS как я понимаю такого ограничения нет.<br> https://www.opennet.me/openforum/vsluhforumID3/95705.html#57 Mon, 05 May 2014 07:25:09 GMT &gt; у FC нет таких огрничений.<br><br>А тут вопрос в реализации протокола - умеет ли он упреждающую отсылку с окнами без подтверждений или нет. Если не умеет - по мере роста RTT скорость просто скатится в cpaнoe гoвнo, да и все дела.<br><br>Понимаешь, если ты кидаешь данные на скорости 100500 гигабитов - это круто. Но если ты потом 200 мс ждешь ответа, средняя скорость будет отвратительной и более похожей на диалап. Работа на скоростном линке с большим пингом - отдельный раздел сетевых грабель, требующий некислого твикинга протоколов.<br>