The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Сравнение производительности файловых систем EXT3, EXT4, Btr..., opennews (ok), 11-Мрт-11, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


1. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +1 +/
Сообщение от metallicemail (ok), 11-Мрт-11, 13:01 
Это что получается, XFS слила ext4 и jfs ?
Меня интересует задача - файловый сервер
Ответить | Правка | Наверх | Cообщить модератору

6. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +4 +/
Сообщение от non anon (?), 11-Мрт-11, 13:24 
>Меня интересует задача - файловый сервер

Если вас интересуют _реальные_ задачи - не воспринимайте похороникса всерьез. Он просто клоун (безотносительно какого-либо конкретного теста, просто у него жизненное кредо такое).

Ответить | Правка | Наверх | Cообщить модератору

7. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +2 +/
Сообщение от metallicemail (ok), 11-Мрт-11, 13:27 
> Если вас интересуют _реальные_ задачи - не воспринимайте похороникса всерьез. Он просто
> клоун (безотносительно какого-либо конкретного теста, просто у него жизненное кредо такое).

Я почему задался вопросом, просто сегодня напоролся на неприятность с XFS, после вылета двух винтов из 6-го рейда, после ребилда решил проверить ФС и с удивлением для себя открыл, что XFS требует 2Гб оперативки на каждый террабайт, так вот у меня этих террабайтов 22. Оперативной памяти 4Гб(свапа нет), запускаю xfs_check - падает почти сразу, в аут оф мемори. Сделал свап на 8ГБ, не упал, проверил таки, но у меня пока что занято всего 3,5ТБ, а когда целиком будет занята ФС, что мне, 40Гб свап делать?

Ответить | Правка | Наверх | Cообщить модератору

23. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +2 +/
Сообщение от Nicknnn (ok), 11-Мрт-11, 15:18 
man  xfs_repair

-m maxmem
              Specifies   the   approximate   maximum  amount  of  memory,  in
              megabytes, to use for xfs_repair.  xfs_repair has its own inter‐
              nal  block  cache  which  will scale out up to the lesser of the
              process's virtual address limit or about  75%  of  the  system's
              physical RAM.  This option overrides these limits.

Ответить | Правка | Наверх | Cообщить модератору

25. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от metallicemail (ok), 11-Мрт-11, 15:20 
>[оверквотинг удален]
>   megabytes, to use for xfs_repair.  xfs_repair has its
> own inter‐
>            
>   nal  block  cache  which  will
> scale out up to the lesser of the
>            
>   process's virtual address limit or about  75%  
> of  the  system's
>            
>   physical RAM.  This option overrides these limits.

Я XFS только начал юзать, из доков не пойму, чем отличаются xfs_check от xfs_repair
Если правильно понял, то xfs_check выполняет только поверхностную проверку, а xfs_repair полную и исправляет ошибки?

Ответить | Правка | Наверх | Cообщить модератору

30. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +1 +/
Сообщение от Nicknnn (ok), 11-Мрт-11, 15:44 
Да.
xfs_check - вообще странный, не имеет даже опции "ничего не менять на диске а только проверить". У xfs_repair такая опция есть.
Ответить | Правка | Наверх | Cообщить модератору

15. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +10 +/
Сообщение от Аноним (-), 11-Мрт-11, 14:16 
> Если вас интересуют _реальные_ задачи - не воспринимайте похороникса всерьез. Он просто
> клоун (безотносительно какого-либо конкретного теста, просто у него жизненное кредо такое).

Я все не пойму, из-за чего такой негатив к форониксу. Он использует стандартные тесты, установленный с нуля дистрибутив и дефолтовые настройки, так и нужно тестировать. Если у вас есть какие-то свои идеи - напишите, как по вашему должно протекать тестирование. Сейчас же лучше фороникса и его тестового комплекта ничего нет.

Ответить | Правка | К родителю #6 | Наверх | Cообщить модератору

16. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +4 +/
Сообщение от Аноним (-), 11-Мрт-11, 14:22 
И не говори, стоит человеку что-то сделать, как набегает толпа ничего не сделавших в своей жизни бездельников и начинает без каких-либо аргументов обливать дерьмом.
Ответить | Правка | Наверх | Cообщить модератору

21. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +1 +/
Сообщение от achekalin (ok), 11-Мрт-11, 15:10 
А два анонима сами с собой его спасают! Бетмен и Робин, ага, только не залогинились.
Ответить | Правка | Наверх | Cообщить модератору

67. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +2 +/
Сообщение от User294 (ok), 11-Мрт-11, 23:17 
> А два анонима сами с собой его спасают! Бетмен и Робин, ага,
> только не залогинились.

Ну, блин, сделайте бенчмарки лучше фороникса? Как будто кто-то против. А то почему-то бенчмарки всем делать лень, в отличие от кидания какашками :)

Ответить | Правка | Наверх | Cообщить модератору

69. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +4 +/
Сообщение от User294 (ok), 11-Мрт-11, 23:25 
> просто у него жизненное кредо такое).

У них нормальное кредо: воткнуть все в виде "по дефолту" и проверить в этом состоянии. И 90% систем именно в этом состоянии и будут работать, собственно. Так что вполне себе бенчмарк, хоть и сильно нишевой. Соревнования "а кто круче затюнит?" - отдельная сущность :)


Ответить | Правка | К родителю #6 | Наверх | Cообщить модератору

13. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от iCat (ok), 11-Мрт-11, 14:07 
>...задача - файловый сервер

FS - ZFS.
Ставь NexentaStor Community Edition и не заморачивайся.

Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

14. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +2 +/
Сообщение от metallicemail (ok), 11-Мрт-11, 14:14 
> FS - ZFS.
> Ставь NexentaStor Community Edition и не заморачивайся.

Ну кроме того, что это какая-то экзотическая штука, она еще и ограничение имеет в 12ТБ

Ответить | Правка | Наверх | Cообщить модератору

19. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  –3 +/
Сообщение от iCat (ok), 11-Мрт-11, 14:47 
>...ограничение имеет в 12ТБ

Как-то не видится мне эта "особенность" "существенным ограничением"....
А насчёт "экзотичности" - ну солярка и солярка... Что в ней такого уж "экзотического"?
NFS, iSCSI, smb... что ещё для FileServer нужно?

Ответить | Правка | Наверх | Cообщить модератору

20. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +2 +/
Сообщение от metallicemail (ok), 11-Мрт-11, 15:01 
> Как-то не видится мне эта "особенность" "существенным ограничением"....
> А насчёт "экзотичности" - ну солярка и солярка... Что в ней такого
> уж "экзотического"?
> NFS, iSCSI, smb... что ещё для FileServer нужно?

С объемами моих серверов (два по 22ТБ, а следующий будет 100ТБ) - это существенное ограничение.
И кроме файловых сервисов на файлсервере еще нужен мониторинг, бекапы(bacula) и т.д.

Ответить | Правка | Наверх | Cообщить модератору

22. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от anonymous (??), 11-Мрт-11, 15:17 
ну ставьте openindiana.
мониторинг и bacula в солярке работают..
Ответить | Правка | Наверх | Cообщить модератору

29. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +3 +/
Сообщение от metallicemail (ok), 11-Мрт-11, 15:41 
> ну ставьте openindiana.
> мониторинг и bacula в солярке работают..

Вот скажи честно, сам бы поставил не известно что на 100Тб сервер, на многомиллионный проект? Эта опениндиана только появилась, кто ее и как собрал - не известно, нормальной поддержки не будет, т.к. кол-во пользователей мизерное и т.д. и т.п.


Ответить | Правка | Наверх | Cообщить модератору

31. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от iCat (ok), 11-Мрт-11, 15:49 
Бэкапы - это "снапшотами"... Удобно. Сделал "снапшот", и - "тихой скоростью" отправляем на бэкап-сервер...
Плюс "вкусняшка" - дедупликация - даёт неплохую экономию места на дисках.
Впрочем, при сотне терабайт... Наверное, технологии бэкапа нужны другие...
Ответить | Правка | К родителю #20 | Наверх | Cообщить модератору

32. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от metallicemail (ok), 11-Мрт-11, 15:59 
> Бэкапы - это "снапшотами"... Удобно. Сделал "снапшот", и - "тихой скоростью" отправляем
> на бэкап-сервер...
> Плюс "вкусняшка" - дедупликация - даёт неплохую экономию места на дисках.
> Впрочем, при сотне терабайт... Наверное, технологии бэкапа нужны другие...

Я не делаю снапшот, пишу данные как есть, бекап долго пишется, чтобы новые данные, которые в процессе писания появляются - тоже писались. Например бекап сервера 22Тб занимает полторы недели на ленту.
А какие есть альтернативы по бекапу? Две хранилки и зеркалирование данных? Это слишком дорого.

Ответить | Правка | Наверх | Cообщить модератору

36. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от Grand pianoemail (?), 11-Мрт-11, 16:32 
В случае таких объёмов я начал задумываться о брэндированном решении, брать на себя ответственность за сохранность данных на многомиллионном проекте уже никто не захочет (imho). Да и систему бэкпирования заставил бы продумывать интегратора подсказывая ему вектор направления.
NetUp or Isilon (EMC) легко поставят нужный объём + оплатить сервис по замене винтов по требованию. Будут ждать у входа с винтом - не успеете вы понять, что у вас винт вышел из строя.
Ответить | Правка | К родителю #20 | Наверх | Cообщить модератору

38. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от metallicemail (ok), 11-Мрт-11, 16:35 
> NetUp or Isilon (EMC) легко поставят нужный объём + оплатить сервис по
> замене винтов по требованию. Будут ждать у входа с винтом -
> не успеете вы понять, что у вас винт вышел из строя.

С нетапом у нас не сложилось, да и не готовы мы морально платить такие деньги за САТА винты, а САС стоят бешеных денег у них. Изилон вообще не адекватный ценик под нашу задачу. Остановились на IBM Storwize V7000


Ответить | Правка | Наверх | Cообщить модератору

72. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  –1 +/
Сообщение от ананим (?), 12-Мрт-11, 02:40 
чё за САТА и САС? может sata и sas? или я чё не понял или не знаю?
Зыж
sas - это ещё не дорого. вот fc - это да.
и ничё. берём. :D
Ответить | Правка | Наверх | Cообщить модератору

75. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от Аноним (-), 12-Мрт-11, 08:49 
Ставь NexentaStor Community Edition и не заморачивайся.
- не ставь. У не веб-морда глючная.
попробуй nexentacore + napp-it
Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

17. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +2 +/
Сообщение от crypt (??), 11-Мрт-11, 14:43 
Ну так проведи тесты на своих задачах, опубликуй в блоге.
Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

57. "Сравнение производительности файловых систем EXT3, EXT4, Btr..."  +/
Сообщение от User294 (ok), 11-Мрт-11, 22:11 
> Это что получается, XFS слила ext4 и jfs ?

Более того, можно невооруженным глазом заметить что каждая ФС по своему хороша и плоха под разные нагрузки и их параметры. Ну и кого в этом зоопарке называть однозначным победителем? :)

> Меня интересует задача - файловый сервер

Абстрактный сферический файлсервер в вакууме? Тогда лучше всего забенчмаркать его самому с разными ФС на ваших файлах и нагрузках и сделать выводы :). Потому что выводы фороникса годятся для их конфигурации, их бенчмарков, а насколько все это было похоже на ваши - вам виднее :)

Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру