https://opennet.ru/openforum/vsluhforumID1/89886.html Добрый вечер, все таки я зарегистрировался и первым делом хочу выразить огромное спасибо всем обитателям форума, многие проблемы я решал штудируя форум с утра до ночи :)<br><br>Короче говоря прошу советов, суть проблемы:<br>приобрели EMC систему клариион ax4, корзина под 12 сата\сас винтов + 3 доп корзинки по 12, планируется заставить 4*12*2ТБ сата винтами, аплинки через FC контроллер, очень неприятно было обнаружить что FreeBSD не поддерживает Emulex, по этому пока тесты ставятся на Qlogic 2 гигабита. Одна карзинка с 10 сас винтами по 15к рпм в винде выдает более 200 мегабайт в сек. на тесте hd_speed который по типу #dd if=/dev/da2 of=/dev/null bs=16m count=100<br><br>DD на фре + UFS 120 :( Перекуирив кучу манов, форумов, прочих источников удалось поднять физическое копирования "с себя на себя" до 30 мегабайт в сек в миднайте, тогда как виндовый NTFS дает прокачку 5 гигов "с себя на себя" 30 сек - примерно 170 метров в секунду, поняв что крутить фрю далее не имеет смысла - прошу совет, какая ось, какая файловая систе https://opennet.ru/openforum/vsluhforumID1/89886.html#16 Sun, 26 Sep 2010 10:26:57 GMT CentOS - тот же RedHat Enterprise Linux, с другим логотипом. В ближайшем будующем выйдет 6 версия, на которую будет легко проапгрейдится и в которой, думаю, можно будет использовать ext4<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#15 Sun, 26 Sep 2010 10:19:17 GMT &gt;если хотите все требования выполнить одной файловой системой, тогда ZFS на Solaris <br>&gt;(за деньги), OpenIndiana или FreeBSD, если будет линукс, то нужно использовать <br>&gt;LVM, поверх которого любую ФС, можно и XFS. <br>&gt;<br>&gt;Вы уже решили как будите отдавать больше 80 MB/s по сети? Гигабит <br>&gt;ведь не резиновый. <br>&gt;<br>&gt;ext2 не обеспечивает "устойчивость к вырубанию того же света" она не журналируемая, <br>&gt;ext3 проверена временем и большим количеством инсталяций, конечно имеет вполне достижимые <br>&gt;ограничения, но можно смигрировать на ext4. <br><br>4 и более (по необходимости) гигабитных транка в свич, который по 10G стекируется с основными узлами раздающими 1G в уровень доступа, как то так.. Да и весь массив возможно будет пользоваться несколькими серверами, по принципу 1 сервис - 1 сервер..<br><br>Думаю завтра с утра приступим к тестированию ext3, какой линукс взять посоветуете из бесплатных и какие расценки на солярис? <br> https://opennet.ru/openforum/vsluhforumID1/89886.html#14 Sun, 26 Sep 2010 09:51:25 GMT если хотите все требования выполнить одной файловой системой, тогда ZFS на Solaris (за деньги), OpenIndiana или FreeBSD, если будет линукс, то нужно использовать LVM, поверх которого любую ФС, можно и XFS.<br><br>Вы уже решили как будите отдавать больше 80 MB/s по сети? Гигабит ведь не резиновый.<br><br>ext2 не обеспечивает "устойчивость к вырубанию того же света" она не журналируемая, ext3 проверена временем и большим количеством инсталяций, конечно имеет вполне достижимые ограничения, но можно смигрировать на ext4.<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#13 Sun, 26 Sep 2010 07:03:48 GMT &gt;Для удобства пользования нужно использовать LVM (можно увеличивать на лету разделы, добавлять новые диски, снапшоты и т.д. и т.п.), для того же удобства <br>&gt;и увеличения надёжности не советую создавать один большой раздел (или LV) <br>&gt;лучше несколько (или даже несколько десятков) мелких. <br><br>Основные преследуемые цели - это скорость отдачи фалов (чтение), скорость записи (хотелось бы видеть порядка 50 мегабайт), возможность добавления дисков в массив с последующим шарингом их в рейд, и следом расширение партиции в саму ОС и увеличение объема раздела, задачи сохранности структуры диска расшариного в ОС ложатся полностью на аппаратные возможности ЕМСшной железяки, от ФС нужна устойчивость к вырубанию того же света, просто устойчивость к разного рода глюкам и скорость.<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#12 Sat, 25 Sep 2010 13:11:37 GMT гуглим - ext3 max. fs size = 16TB<br>ext4 - 1EB<br><br>Для удобства пользования нужно использовать LVM (можно увеличивать на лету разделы, добавлять новые диски, снапшоты и т.д. и т.п.), для того же удобства и увеличения надёжности не советую создавать один большой раздел (или LV) лучше несколько (или даже несколько десятков) мелких.<br><br><br>http://xgu.ru/wiki/ext4<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#11 Sat, 25 Sep 2010 11:37:15 GMT &gt;ext2 vs. ext3 - особеного выигрыша от использования ext3 не будет, зато <br>&gt;лишитесь кучи усовершенсвований в ext3, да и миграцию на ext4 будет <br>&gt;проводить опасней. <br><br>Боюсь миграция 100 терабайтного раздела займет ни один день, и если ext4 окажется медленней ext3 - это будет ппц..<br>Да, а ограничение по размеру есть как на UFS,NTFS в 2ТБ?<br>И второй вопросик - существует ли теоретическая возможность "на лету" менять (увиличивать) размер раздела при добавлении винтов в рейд?<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#10 Sat, 25 Sep 2010 11:18:42 GMT &gt;&gt;&gt;&gt;а какого типа файлы будут храниться? БД планируются? <br>&gt;&gt;&gt;<br>&gt;&gt;&gt;файлы - аудио, видео, софт, фото и прочий ширпотреб, БД планируется для <br>&gt;&gt;&gt;индексации и возможно другого функционала, скорее всего mysql <br>&gt;&gt;<br>&gt;&gt;CentOS + ext3, а когда выйдет 6-ая версия проведёте миграцию на ext4 <br>&gt;&gt;<br>&gt;<br>&gt;А с Emulex FC HBA она дружит? И вроде как ext3 тормознее <br>&gt;ext2, надежность конечно ниже, но за надежность отвечать будет ЕМС <br><br>с Emulex, думаю, проблем не будет http://www.emulex.com/partners/strategic-alliances/red-hat.html<br><br>ext2 vs. ext3 - особеного выигрыша от использования ext3 не будет, зато лишитесь кучи усовершенсвований в ext3, да и миграцию на ext4 будет проводить опасней.<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#9 Sat, 25 Sep 2010 10:49:01 GMT &gt;&gt;&gt;а какого типа файлы будут храниться? БД планируются? <br>&gt;&gt;<br>&gt;&gt;файлы - аудио, видео, софт, фото и прочий ширпотреб, БД планируется для <br>&gt;&gt;индексации и возможно другого функционала, скорее всего mysql <br>&gt;<br>&gt;CentOS + ext3, а когда выйдет 6-ая версия проведёте миграцию на ext4 <br>&gt;<br><br>А с Emulex FC HBA она дружит? И вроде как ext3 тормознее ext2, надежность конечно ниже, но за надежность отвечать будет ЕМС<br> https://opennet.ru/openforum/vsluhforumID1/89886.html#8 Sat, 25 Sep 2010 09:00:49 GMT &gt;&gt;а какого типа файлы будут храниться? БД планируются? <br>&gt;<br>&gt;файлы - аудио, видео, софт, фото и прочий ширпотреб, БД планируется для <br>&gt;индексации и возможно другого функционала, скорее всего mysql <br><br>CentOS + ext3, а когда выйдет 6-ая версия проведёте миграцию на ext4<br>