https://opennet.me/openforum/vsluhforumID3/38818.html Наработки по созданию транспортного уровня для организации распределенных хранилищ данных (http://tservice.net.ru/~s0mbre/old/?section=projects&item=dst) (DST), созданные Евгением Поляковым, одобрены (http://kerneltrap.org/Linux/Distributed_Storage_Subsystem_Headed_For_-mm) для включения в экспериментальную "-mm" ветку Linux ядра.<br><br><br>DST функционирует на уровне блочного устройства, работающего поверх нескольких машин в сети (ближайшие аналоги - DRBD (http://www.drbd.org/), iSCSI (http://linux-iscsi.sourceforge.net/) и NBD (http://nbd.sourceforge.net/)).<br>Обработка данных производится в неблоркирующем режиме. Поддерживаются различные алгоритмы распределения данных, например - зеркалирование или создание линейного хранилища охватывающего все узлы.<br><br><br><br>Кроме того, система снабжена средствами автоконфигурации (параметры удаленных узлов определяются автоматически) и автоматической обработки ситуации сбоя: при обнаружении сбоя (например, выключения удаленной машины), проблемный узел помечается неактивным до моме https://opennet.me/openforum/vsluhforumID3/38818.html#39 Fri, 02 Nov 2007 12:40:55 GMT &gt;В целом приемлимо, но --- насколько я понял никакого автоматического Fallover <br>&gt;для MGS/MDT службы нету. <br><br>вот с этого места тебя поправить и остальная часть поста сама собой отпадает.<br>MGS/MDT может зеркалироваться (точно так же как и OST) для переключения в случае пипеца.<br><br>Сама люстра не провайдит методов определения failover событий и их обработку.<br>Для этого они рекомендуют HeartBeat (linux-ha.org), который будет определять жив ли нод<br>и менять конфиг люстры.<br> https://opennet.me/openforum/vsluhforumID3/38818.html#38 Thu, 01 Nov 2007 12:30:06 GMT &gt;Каждая нода в люстре - виртуальная и можем состоять из нескольких <br>&gt;физических нод. READs/WRITEs идут на рабочую, активную; и WRITEs на остальные, бекапные. <br>&gt;<br>&gt;<br>&gt;В любой момент любая бекапная нода может продолжить правое дело памшего товарисча... <br>&gt;<br><br>В целом приемлимо, но --- насколько я понял никакого автоматического Fallover для MGS/MDT службы нету.<br><br>Ну то есть нельзя сделать например 2 штуки MGS чтоб в случае сбоя одного, второй включался автоматически.<br><br><br>А насчёт "мирррор" меня интересует когда можно будет задавать это в аттрибутах файла....<br><br>что вот этот файл страйпед, а вот этот мирроред....<br><br><br>про "продолжение дела падшего товарища" -- как не пытался настроить, не ловится кактус.<br><br>то есть оно работает тока при живом MGS<br><br>иначе всё отмонтировать и перетыкать руками.<br><br>Так я и без всякой люстры умею -- тупо любая файловая система + drbd<br>если чё -- перемонтировал на другой сервер вручную<br> https://opennet.me/openforum/vsluhforumID3/38818.html#37 Wed, 31 Oct 2007 13:06:52 GMT &gt;В схожих -- да. Только эти условия должны быть_очень_ схожи. К примеру, <br>&gt;меняете диск на более медленный -- и все, лидеры совсем другие. <br>&gt;Практически же получение схожих результатов реально только на абсолютно одинаковом железе <br>&gt;(вывод чисто эмпирический). <br>&gt;<br>&gt;ext2 -- она идеально для небольших, малозаполненных (следовательно не фргментированных) разделов. На <br>&gt;активно используемом диске объемом, хотя бы, 100 Gb, заполненном на 70%, <br>&gt;она явный аутсайдер по всем параметрам. По чисто математическим причинам. <br><br>А у вас есть какие нибудь сведения на счет надёжности reiserfs4 (может тесты устраивали), интересует как она ведёт себя при возникновении единичного бэда или ошибки при передаче по шине винчестера (если винт переносной или комп лажёвый :). <br>На бедах reiserfs v3 говорил "Permission denied" руту при открытии файла :)<br><br>PS:<br>Нда, флеймеры быстро набежали...<br><br> https://opennet.me/openforum/vsluhforumID3/38818.html#36 Wed, 31 Oct 2007 05:26:44 GMT &gt;А вот вы не в курсе, когда в люстре появится режим мирроринга <br>&gt;для файлов, а не только stripe? <br><br>вкурсе<br>если и изначально не было (давно дело было...) то щас он есть.<br><br>Каждая нода в люстре - виртуальная и можем состоять из нескольких<br>физических нод. READs/WRITEs идут на рабочую, активную; и WRITEs на остальные, бекапные.<br><br>В любой момент любая бекапная нода может продолжить правое дело памшего товарисча...<br> https://opennet.me/openforum/vsluhforumID3/38818.html#35 Tue, 30 Oct 2007 19:34:43 GMT &gt;ниасилившым люстру посвящаеться... <br><br>А вот вы не в курсе, когда в люстре появится режим мирроринга для файлов, а не только stripe?<br><br> https://opennet.me/openforum/vsluhforumID3/38818.html#33 Tue, 30 Oct 2007 10:01:38 GMT В схожих -- да. Только эти условия должны быть_очень_ схожи. К примеру, меняете диск на более медленный -- и все, лидеры совсем другие. Практически же получение схожих результатов реально только на абсолютно одинаковом железе (вывод чисто эмпирический).<br><br>ext2 -- она идеально для небольших, малозаполненных (следовательно не фргментированных) разделов. На активно используемом диске объемом, хотя бы, 100 Gb, заполненном на 70%, она явный аутсайдер по всем параметрам. По чисто математическим причинам.<br> https://opennet.me/openforum/vsluhforumID3/38818.html#32 Tue, 30 Oct 2007 09:36:10 GMT &gt;Объяснял же -- не верьте бенчмаркам! У всех по-разному работает. Вам мои <br>&gt;что ли показать? <br><br>Одни и те же бенчмарки должны давать один и тот же результат в схожих условиях, так что если у вас неподдерживаемая jfs неожиданно стала работать быстрее xfs и reiser (или хоть чего-нибудь), то было бы интересно на это посмотреть.<br><br>Кстати, ext2 наверное самая быстрая из всех существующих систем, для одного потока чтения или записи это абсолютно точно. Другое дело, что fsck в случае сбоя будет вечным, и надежность никакая...<br> https://opennet.me/openforum/vsluhforumID3/38818.html#31 Tue, 30 Oct 2007 09:26:54 GMT Объяснял же -- не верьте бенчмаркам! У всех по-разному работает. Вам мои что ли показать?<br> https://opennet.me/openforum/vsluhforumID3/38818.html#30 Tue, 30 Oct 2007 09:10:32 GMT &gt;Ну, теперь по поводу сравнения ФС. Дальше пойдет чистое ИМХО, флейм прошу <br>&gt;не начинать -- каждыйимеет право на свое мнение, я свое обосновал <br>&gt;в статьях, повторять не буду. <br><br>У автора этого распределенного хранилища в блоге нашел кучу бенчмарков разных FS, включая ext123, jfx, xfs, reiser34...<br><br>Теория не совпадает с практикой: http://tservice.net.ru/~s0mbre/old/?section=projects&item=fs_contest<br>