The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Как организовать огромное хранилище для данных "
Вариант для распечатки  
Пред. тема | След. тема 
Форумы Оптимизация и Промышленные системы (Public)
Изначальное сообщение [Проследить за развитием треда]

"Как организовать огромное хранилище для данных "  
Сообщение от zick (ok) on 01-Мрт-07, 00:17 
В этих вопросах новичок, так что не судите строго :)
Что мы имеем: есть система видеонаблюдения в здании, в среднем там за день записывается по 50 гб видео. Сама система работает под Виндовсом. Надо создать архив за полгода для видео ... Итого получается 18-19 терабайт.
Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID и просто подключить раздел, как сетевой диск и по сети скидывать туда данные в реалтайме. Теперь вопросы:

1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
2) Если возможно, то сколько это будет стоить ?
3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном аптайме ?
4) Если какие-то другие варианты ?

З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

 Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "Как организовать огромное хранилище для данных "  
Сообщение от pavel_simple (ok) on 01-Мрт-07, 07:03 
смотри в сторону внешних накопителей на SATA + iSCSI, но вообщенто это не дёшево, хотя при любых раскладах (покупка сата контроллеров + винтов) это дёшего не будет, сам когда этой темой занимался рассматривал вариант от http://3logic.ru
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

2. "Как организовать огромное хранилище для данных "  
Сообщение от zick (ok) on 01-Мрт-07, 17:24 
Немного опечатался: данных будет 8-10 терабайт
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

3. "Как организовать огромное хранилище для данных "  
Сообщение от Nikolaev D. on 01-Мрт-07, 20:11 
>Немного опечатался: данных будет 8-10 терабайт

SATA диски смотри.

у тебя два варианта - собрать что-нибудь самопальное
или купить SUN
http://www.sun.com/storagetek/disk_systems/workgroup/3511/specs.xml

SUn - 37к баксов за 6 Тб

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

4. "Как организовать огромное хранилище для данных "  
Сообщение от pavel_simple (ok) on 01-Мрт-07, 22:11 
Уверен -- вариантов больше, не прогадай -- определи, какой важности у тебя данные
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

5. "Как организовать огромное хранилище для данных "  
Сообщение от zick (??) on 02-Мрт-07, 11:01 
>Уверен -- вариантов больше, не прогадай -- определи, какой важности у тебя
>данные

Щас начинаю понимать, что вариантов практически нет ... На это дело выделяется всего 5к баксов. Так что, как я понял, надо смотреть в сторону самопальных решений :( Так что вопрос: на эти деньги реально сделать хранилище данных ?  


Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

6. "Как организовать огромное хранилище для данных "  
Сообщение от pavel_simple (ok) on 02-Мрт-07, 15:57 
за петёрку никакими руками не сделаеш то, что надо, даже никакими руками с паяльником
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

7. "Как организовать огромное хранилище для данных "  
Сообщение от NOBODY on 02-Мрт-07, 16:58 
>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>


Lian Li PC-V2000A plus II
Tyan Tempest i5000PW - S5382WAG2NRF (Intel 5000P) - E-ATX
Intel Xeon 5030 (2.67 GHz) - Dual Core ! Socket 771 (dissipateur passif) FSB 667 X 2
Corsair 1 Go DDR2-SDRAM PC5300 ECC X 4
Western Digital Caviar SE16 500 Go 7200 RPM 16 Mo Serial ATA II X 16
Tyan TARO SO-DIMM M9000-10 - Module SAS(Serial Attached SCSI)/SATA /SATA II 8 ports X 2
+/- 5000

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

8. "Как организовать огромное хранилище для данных "  
Сообщение от Quark on 08-Мрт-07, 00:40 
Raid , LVM
Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

9. "Как организовать огромное хранилище для данных "  
Сообщение от iasb (??) on 08-Мрт-07, 20:49 
>Raid , LVM

правильно. Но куда ?

Вопрос 1 - сколько камер - какой поток должен быть
Вопрос 2 - кто пишет ? Винда ? Она какие объемы дисков понимает (по бумажкам, по документации) ?
Вопрос 3 - это один файл - 20 гиг к концу дня на одну камеру ?
Вопрос 4 - кто обслуживать будет ? Кто данные будет копировать, монтировать, уничтожать и т.д. А уйдет админ ..... Все ?

Что можно сделать

Безопасность не может быть дешевой, следовательно, если решение дешевое -  то за 5 КБ писать ни видак. На 3 видака и т.д. Не заморачиваться с компами. И ленточки (дешевые) ложить в шкафчик. Эти решения я думаю есть и заточены на подобные вещи.

Если таки компы - то решение может быть или кучка компов под FreeBSD и iSCSI targetы на фрях и  получается дисками на винде. Но еще раз - вопрос 2 (какие максимальные объемы).

Если что-то делать по-уму - хранилище надо + софт перемещения неиспользуемых данных на ленты или что тебе требуется с архивированием.

Еще вариант - Promice адаптеры - у них есть на 16 каналов + 16 500ГБ дисков - это получается 7.5 ТБ RAID-5 - но смотри вопросы вверху. И нужен этот паровоз ?

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

10. "Как организовать огромное хранилище для данных "  
Сообщение от spare root email on 18-Мрт-07, 21:43 
Рекомендую Sun X4500 (http://www.sun.com/servers/x64/x4500/) - именно то что вам нужно.
Нужна помощь в конфигурации? - mailto:spareroot@gmail.com

>В этих вопросах новичок, так что не судите строго :)
>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>Надо создать архив за полгода для видео ... Итого получается 18-19
>терабайт.
>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>и просто подключить раздел, как сетевой диск и по сети скидывать
>туда данные в реалтайме. Теперь вопросы:
>
>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>
>2) Если возможно, то сколько это будет стоить ?
>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>аптайме ?
>4) Если какие-то другие варианты ?
>
>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>


Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

11. "Как организовать огромное хранилище для данных "  
Сообщение от dm220 email(ok) on 28-Мрт-07, 15:48 
>Рекомендую Sun X4500 (http://www.sun.com/servers/x64/x4500/) - именно то что вам нужно.
>Нужна помощь в конфигурации? - mailto:spareroot@gmail.com
>
>>В этих вопросах новичок, так что не судите строго :)
>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>терабайт.
>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>туда данные в реалтайме. Теперь вопросы:
>>
>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>
>>2) Если возможно, то сколько это будет стоить ?
>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>аптайме ?
>>4) Если какие-то другие варианты ?
>>
>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>

Ленточки, это конечно хорошо, но есть альтернативное решение для хранения инфы на базе оптики - например nsm 6000, основной бонус по сравнению с лентами - можно быстро вытащить нужные данные.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

17. "Как организовать огромное хранилище для данных "  
Сообщение от мелкая пакость on 28-Окт-07, 19:02 
>>Рекомендую Sun X4500 (http://www.sun.com/servers/x64/x4500/) - именно то что вам нужно.
>>Нужна помощь в конфигурации? - mailto:spareroot@gmail.com
>>
>
>Ленточки, это конечно хорошо, но есть альтернативное решение для хранения инфы на
>базе оптики - например nsm 6000, основной бонус по сравнению с
>лентами - можно быстро вытащить нужные данные.

какие ленточки, это 4U сервер с объёмом дисков до 48 Тб.
правда в бюджет всё равно не вписывается.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

12. "Как организовать огромное хранилище для данных "  
Сообщение от serge (??) on 15-Апр-07, 17:40 
>В этих вопросах новичок, так что не судите строго :)
>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>Надо создать архив за полгода для видео ... Итого получается 18-19
>терабайт.
>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>и просто подключить раздел, как сетевой диск и по сети скидывать
>туда данные в реалтайме. Теперь вопросы:
>
>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>
>2) Если возможно, то сколько это будет стоить ?
>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>аптайме ?
>4) Если какие-то другие варианты ?
>
>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>


SAN. Если дорого - можно без свичей, подключить Storage Array по оптике напрямую к серверу. Посмотри на HP EVA 4000  low end array.

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

13. "Как организовать огромное хранилище для данных "  
Сообщение от Nikolaev D. on 17-Апр-07, 01:35 
>>В этих вопросах новичок, так что не судите строго :)
>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>терабайт.
>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>туда данные в реалтайме. Теперь вопросы:
>>
>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>
>>2) Если возможно, то сколько это будет стоить ?
>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>аптайме ?
>>4) Если какие-то другие варианты ?
>>
>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>
>
>
>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>напрямую к серверу. Посмотри на HP EVA 4000  low end
>array.

SAN это система доступа к массиву, а не массив

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

14. "Как организовать огромное хранилище для данных "  
Сообщение от serge (??) on 14-Май-07, 12:39 
>>>В этих вопросах новичок, так что не судите строго :)
>>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>>терабайт.
>>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>>туда данные в реалтайме. Теперь вопросы:
>>>
>>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>>
>>>2) Если возможно, то сколько это будет стоить ?
>>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>>аптайме ?
>>>4) Если какие-то другие варианты ?
>>>
>>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>>
>>
>>
>>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>>напрямую к серверу. Посмотри на HP EVA 4000  low end
>>array.
>
>SAN это система доступа к массиву, а не массив


Yep. I did mention that - Storage Array directly attached to host - you will get DAS. I suggested to have look towards SAN and in case if only one server required don't use switches so attach directly to host HBA. HPA EVA 4000 is storgae array not SAN. Where did I mention that SAN is storage array?

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

15. "Как организовать огромное хранилище для данных "  
Сообщение от Nikolaev D. on 14-Май-07, 15:32 
>>>>В этих вопросах новичок, так что не судите строго :)
>>>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>>>терабайт.
>>>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>>>туда данные в реалтайме. Теперь вопросы:
>>>>
>>>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>>>
>>>>2) Если возможно, то сколько это будет стоить ?
>>>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>>>аптайме ?
>>>>4) Если какие-то другие варианты ?
>>>>
>>>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>>>
>>>
>>>
>>>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>>>напрямую к серверу. Посмотри на HP EVA 4000  low end
>>>array.
>>
>>SAN это система доступа к массиву, а не массив
>
>
>Yep. I did mention that - Storage Array directly attached to host
>- you will get DAS. I suggested to have look towards
>SAN and in case if only one server required don't use
>switches so attach directly to host HBA. HPA EVA 4000 is
>storgae array not SAN. Where did I mention that SAN is
>storage array?


короче самое дешевое - писать на диск (500-1000 гигов) и оттаскивать с него данные ленточную библиотеку.

к примеру  Sun StorageTek C4 Tape Library
38 ленты LTO-3 - как раз искомые 32 Терабайт (с компрессией). в 15к баксов можно уложится

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

16. "Как организовать огромное хранилище для данных "  
Сообщение от dikobraz on 30-Май-07, 01:36 
>>>>>В этих вопросах новичок, так что не судите строго :)
>>>>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>>>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>>>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>>>>терабайт.
>>>>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>>>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>>>>туда данные в реалтайме. Теперь вопросы:
>>>>>
>>>>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>>>>
>>>>>2) Если возможно, то сколько это будет стоить ?
>>>>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>>>>аптайме ?
>>>>>4) Если какие-то другие варианты ?
>>>>>
>>>>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>>>>
>>>>
>>>>
>>>>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>>>>напрямую к серверу. Посмотри на HP EVA 4000  low end
>>>>array.
>>>
>>>SAN это система доступа к массиву, а не массив
>>
>>
>>Yep. I did mention that - Storage Array directly attached to host
>>- you will get DAS. I suggested to have look towards
>>SAN and in case if only one server required don't use
>>switches so attach directly to host HBA. HPA EVA 4000 is
>>storgae array not SAN. Where did I mention that SAN is
>>storage array?
>
>
>короче самое дешевое - писать на диск (500-1000 гигов) и оттаскивать с
>него данные ленточную библиотеку.
>
>к примеру  Sun StorageTek C4 Tape Library
>38 ленты LTO-3 - как раз искомые 32 Терабайт (с компрессией). в
>15к баксов можно уложится


Solaris 10+ZFS, архивы складывать на ленточки

Высказать мнение | Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Индекс форумов | Темы | Пред. тема | След. тема
Оцените тред (1=ужас, 5=супер)? [ 1 | 2 | 3 | 4 | 5 ] [Рекомендовать для помещения в FAQ]




Спонсоры:
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2021 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру