https://www.opennet.ru/openforum/vsluhforumID13/562.html Была поставлена задача сделать общее файловое хранилище для образов виртуальных машин на XEN. Решил остановится на Lustre, как на самой производительной сетевой кластерной файловой системе. Пересорал ядра на 3-х серверах (Xeon 3.0x2, 4 Gb ОЗУ, SCSI - RAID 5, LAN - 1Gb), сделал 3-и OST и MGS совмещённый с OST.<br><br>Всё запустил по документации, файлы копируются, вроде всё нормально, НО попытка загрузится с раздела с примаунтенной люстрой не увенчалась успехом. Вроде XEN запускает виртуалку, появляется меню с выбором ядра, с которого грузится виртуальной машине, далее он что то пытается делать и всё, далее загрузка не идёт!!!<br><br>Что самое интересное, если загружать виртуалку с NFS раздела, на котором кстати скорость почти в 2-а раза меньше, то виртуальная машина нормально ЗАГРУЖАЕТСЯ и РАБОТАЕТ!!!<br><br>В чём может быть дело? Может Люстра вообще не предназначена для такой работы? Пробовал монтировать раздел люстры с параметрами flock, localflock - не помогло.<br><br>Образы виртуальных машин хранятся в файлах (5 Gb).<br><br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#9 Wed, 08 Apr 2009 07:12:40 GMT &gt;&gt;Пожалуйста, кто нибудь!!! Скажите ПОЧЕМУ с Lustre НЕ возможно запустить образы виртуальных <br>&gt;&gt;машин, а с любой другой файловой системы это сделать можно??? ПОЧЕМУ??? <br>&gt;&gt;<br>&gt;&gt;<br>&gt;&gt;Любые мнения и соображения, что можно сделать??? <br>&gt;<br>&gt;что-нибудь решилось? вы кстати загрузку образа пробовали делать через tap? <br><br>В смысле? У меня образы хранились в файлах и отдавались через tap:aio<br><br>Остановился я в конечном итоге на програмном iSCSI в связке с OCFS2.<br><br><br><br><br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#8 Tue, 31 Mar 2009 10:05:58 GMT &gt;Пожалуйста, кто нибудь!!! Скажите ПОЧЕМУ с Lustre НЕ возможно запустить образы виртуальных <br>&gt;машин, а с любой другой файловой системы это сделать можно??? ПОЧЕМУ??? <br>&gt;<br>&gt;<br>&gt;Любые мнения и соображения, что можно сделать??? <br><br>что-нибудь решилось? вы кстати загрузку образа пробовали делать через tap? <br><br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#7 Wed, 18 Mar 2009 13:40:51 GMT Пожалуйста, кто нибудь!!! Скажите ПОЧЕМУ с Lustre НЕ возможно запустить образы виртуальных машин, а с любой другой файловой системы это сделать можно??? ПОЧЕМУ???<br><br>Любые мнения и соображения, что можно сделать???<br><br><br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#6 Thu, 12 Mar 2009 07:15:42 GMT &gt;Если разделяемого дискового массива нет, то думаю лучше использовать GNBD c GFS. <br>&gt;<br><br>Если можно, какой аргумент, что лучше(хотя бы один)? Читал обзоры, вроде по производительности GFS не особо и отказоустойчивости тоже. Кто нибудь GFS на продакшене использует? <br>Запустятся ли виртуалки с неё?<br>Какие у кого впечатления от OCFS ?<br><br>Где то в предыдущей ветке проскальзывали ответы от разработчика Люстры. Хочется услышать его мнение на странное поведение Люстры, в чем причина такой работы?<br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#5 Thu, 12 Mar 2009 03:08:09 GMT Если разделяемого дискового массива нет, то думаю лучше использовать GNBD c GFS.<br>Вся инфа тут <br>http://www.redhat.com/docs/manuals/enterprise/<br><br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#4 Wed, 11 Mar 2009 20:07:30 GMT &gt;А файловое хранилище и так общее. <br><br>Не понял, что имелось ввиду<br><br>&gt;Т.е. эти два сервера подключены по FC к дисковому массиву на один <br>&gt;и тот же LUN. Но файловая система на данном LUN-е не <br>&gt;создавалась, а поднято LVM. А логические разделы экспортируются в гостевые системы <br>&gt;стандартным образом. <br><br>Если бы у нас был FC и дисковый массив, я бы не стал огород городить с сетевыми файловыми системами! У меня есть вышеуказанные 3-и сервера и всё!<br><br>Можно ли что либо придумать в моём варианте, подскажите, плиз.<br><br>Что за фича у люстры, что нельзя с неё образ виртуалки запустить? Можно ли это как нибудь побороть? Если нет, то какую файловую системы можно использовать под эти цели? Кто нибудь использовал OCFS?<br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#3 Wed, 11 Mar 2009 15:38:56 GMT &gt;В документации по XEN написано, что live мирацию можно сделать, если только <br>&gt;на обоих хостах общее файловое хранилище, а так только с остановкой <br>&gt;виртуалки, т.е НЕ live миграция. Значит там информация не верна? Уже <br>&gt;устарела или я что то не понял? <br><br>А файловое хранилище и так общее. <br>Т.е. эти два сервера подключены по FC к дисковому массиву на один и тот же LUN. Но файловая система на данном LUN-е не создавалась, а поднято LVM. А логические разделы экспортируются в гостевые системы стандартным образом.<br><br>disk=['phy:/dev/volgrp/lv_linux1,xvda,w'] - при эмуляции диска<br><br>Либо при эмуляции разделов<br>disk=['phy:/dev/volgrp/lv_root1,xvda1,w', 'phy:/dev/volgrp/lv_swap1,xvda2,w', 'phy:/dev/volgrp/lv_var1,xvda3,w', 'phy:/dev/volgrp/lv_home1,xvdb1,w' ]<br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#2 Wed, 11 Mar 2009 15:16:48 GMT &gt;Я для таких задач вообще отказался от кластерной файловой системы. <br>&gt;Использую LVM. <br>&gt;Что в итоге имею: <br>&gt;1. Live миграция между машинами проходит без проблем. <br>&gt;2. Простота управления данными разделами, в частности клонирование с помощью снапшотов. <br>&gt;<br>&gt;Гостевые машины как линуксовые в паравиртуальном режиме, так и win2003. <br><br>В документации по XEN написано, что live мирацию можно сделать, если только на обоих хостах общее файловое хранилище, а так только с остановкой виртуалки, т.е НЕ live миграция. Значит там информация не верна? Уже устарела или я что то не понял?<br> https://www.opennet.ru/openforum/vsluhforumID13/562.html#1 Wed, 11 Mar 2009 14:34:13 GMT Я для таких задач вообще отказался от кластерной файловой системы.<br>Использую LVM.<br>Что в итоге имею:<br>1. Live миграция между машинами проходит без проблем.<br>2. Простота управления данными разделами, в частности клонирование с помощью снапшотов.<br><br>Гостевые машины как линуксовые в паравиртуальном режиме, так и win2003.<br>