URL: https://www.opennet.ru/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID13
Нить номер: 351
[ Назад ]

Исходное сообщение
"Как организовать огромное хранилище для данных "

Отправлено zick , 01-Мрт-07 00:17 
В этих вопросах новичок, так что не судите строго :)
Что мы имеем: есть система видеонаблюдения в здании, в среднем там за день записывается по 50 гб видео. Сама система работает под Виндовсом. Надо создать архив за полгода для видео ... Итого получается 18-19 терабайт.
Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID и просто подключить раздел, как сетевой диск и по сети скидывать туда данные в реалтайме. Теперь вопросы:

1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
2) Если возможно, то сколько это будет стоить ?
3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном аптайме ?
4) Если какие-то другие варианты ?

З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...


Содержание

Сообщения в этом обсуждении
"Как организовать огромное хранилище для данных "
Отправлено pavel_simple , 01-Мрт-07 07:03 
смотри в сторону внешних накопителей на SATA + iSCSI, но вообщенто это не дёшево, хотя при любых раскладах (покупка сата контроллеров + винтов) это дёшего не будет, сам когда этой темой занимался рассматривал вариант от http://3logic.ru

"Как организовать огромное хранилище для данных "
Отправлено zick , 01-Мрт-07 17:24 
Немного опечатался: данных будет 8-10 терабайт

"Как организовать огромное хранилище для данных "
Отправлено Nikolaev D. , 01-Мрт-07 20:11 
>Немного опечатался: данных будет 8-10 терабайт

SATA диски смотри.

у тебя два варианта - собрать что-нибудь самопальное
или купить SUN
http://www.sun.com/storagetek/disk_systems/workgroup/3511/sp...

SUn - 37к баксов за 6 Тб


"Как организовать огромное хранилище для данных "
Отправлено pavel_simple , 01-Мрт-07 22:11 
Уверен -- вариантов больше, не прогадай -- определи, какой важности у тебя данные

"Как организовать огромное хранилище для данных "
Отправлено zick , 02-Мрт-07 11:01 
>Уверен -- вариантов больше, не прогадай -- определи, какой важности у тебя
>данные

Щас начинаю понимать, что вариантов практически нет ... На это дело выделяется всего 5к баксов. Так что, как я понял, надо смотреть в сторону самопальных решений :( Так что вопрос: на эти деньги реально сделать хранилище данных ?  



"Как организовать огромное хранилище для данных "
Отправлено pavel_simple , 02-Мрт-07 15:57 
за петёрку никакими руками не сделаеш то, что надо, даже никакими руками с паяльником

"Как организовать огромное хранилище для данных "
Отправлено NOBODY , 02-Мрт-07 16:58 
>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>


Lian Li PC-V2000A plus II
Tyan Tempest i5000PW - S5382WAG2NRF (Intel 5000P) - E-ATX
Intel Xeon 5030 (2.67 GHz) - Dual Core ! Socket 771 (dissipateur passif) FSB 667 X 2
Corsair 1 Go DDR2-SDRAM PC5300 ECC X 4
Western Digital Caviar SE16 500 Go 7200 RPM 16 Mo Serial ATA II X 16
Tyan TARO SO-DIMM M9000-10 - Module SAS(Serial Attached SCSI)/SATA /SATA II 8 ports X 2
+/- 5000


"Как организовать огромное хранилище для данных "
Отправлено Quark , 08-Мрт-07 00:40 
Raid , LVM

"Как организовать огромное хранилище для данных "
Отправлено iasb , 08-Мрт-07 20:49 
>Raid , LVM

правильно. Но куда ?

Вопрос 1 - сколько камер - какой поток должен быть
Вопрос 2 - кто пишет ? Винда ? Она какие объемы дисков понимает (по бумажкам, по документации) ?
Вопрос 3 - это один файл - 20 гиг к концу дня на одну камеру ?
Вопрос 4 - кто обслуживать будет ? Кто данные будет копировать, монтировать, уничтожать и т.д. А уйдет админ ..... Все ?

Что можно сделать

Безопасность не может быть дешевой, следовательно, если решение дешевое -  то за 5 КБ писать ни видак. На 3 видака и т.д. Не заморачиваться с компами. И ленточки (дешевые) ложить в шкафчик. Эти решения я думаю есть и заточены на подобные вещи.

Если таки компы - то решение может быть или кучка компов под FreeBSD и iSCSI targetы на фрях и  получается дисками на винде. Но еще раз - вопрос 2 (какие максимальные объемы).

Если что-то делать по-уму - хранилище надо + софт перемещения неиспользуемых данных на ленты или что тебе требуется с архивированием.

Еще вариант - Promice адаптеры - у них есть на 16 каналов + 16 500ГБ дисков - это получается 7.5 ТБ RAID-5 - но смотри вопросы вверху. И нужен этот паровоз ?


"Как организовать огромное хранилище для данных "
Отправлено spare root , 18-Мрт-07 21:43 
Рекомендую Sun X4500 (http://www.sun.com/servers/x64/x4500/) - именно то что вам нужно.
Нужна помощь в конфигурации? - mailto:spareroot@gmail.com

>В этих вопросах новичок, так что не судите строго :)
>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>Надо создать архив за полгода для видео ... Итого получается 18-19
>терабайт.
>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>и просто подключить раздел, как сетевой диск и по сети скидывать
>туда данные в реалтайме. Теперь вопросы:
>
>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>
>2) Если возможно, то сколько это будет стоить ?
>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>аптайме ?
>4) Если какие-то другие варианты ?
>
>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>



"Как организовать огромное хранилище для данных "
Отправлено dm220 , 28-Мрт-07 15:48 
>Рекомендую Sun X4500 (http://www.sun.com/servers/x64/x4500/) - именно то что вам нужно.
>Нужна помощь в конфигурации? - mailto:spareroot@gmail.com
>
>>В этих вопросах новичок, так что не судите строго :)
>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>терабайт.
>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>туда данные в реалтайме. Теперь вопросы:
>>
>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>
>>2) Если возможно, то сколько это будет стоить ?
>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>аптайме ?
>>4) Если какие-то другие варианты ?
>>
>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>

Ленточки, это конечно хорошо, но есть альтернативное решение для хранения инфы на базе оптики - например nsm 6000, основной бонус по сравнению с лентами - можно быстро вытащить нужные данные.


"Как организовать огромное хранилище для данных "
Отправлено мелкая пакость , 28-Окт-07 19:02 
>>Рекомендую Sun X4500 (http://www.sun.com/servers/x64/x4500/) - именно то что вам нужно.
>>Нужна помощь в конфигурации? - mailto:spareroot@gmail.com
>>
>
>Ленточки, это конечно хорошо, но есть альтернативное решение для хранения инфы на
>базе оптики - например nsm 6000, основной бонус по сравнению с
>лентами - можно быстро вытащить нужные данные.

какие ленточки, это 4U сервер с объёмом дисков до 48 Тб.
правда в бюджет всё равно не вписывается.


"Как организовать огромное хранилище для данных "
Отправлено serge , 15-Апр-07 17:40 
>В этих вопросах новичок, так что не судите строго :)
>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>Надо создать архив за полгода для видео ... Итого получается 18-19
>терабайт.
>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>и просто подключить раздел, как сетевой диск и по сети скидывать
>туда данные в реалтайме. Теперь вопросы:
>
>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>
>2) Если возможно, то сколько это будет стоить ?
>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>аптайме ?
>4) Если какие-то другие варианты ?
>
>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>


SAN. Если дорого - можно без свичей, подключить Storage Array по оптике напрямую к серверу. Посмотри на HP EVA 4000  low end array.


"Как организовать огромное хранилище для данных "
Отправлено Nikolaev D. , 17-Апр-07 01:35 
>>В этих вопросах новичок, так что не судите строго :)
>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>терабайт.
>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>туда данные в реалтайме. Теперь вопросы:
>>
>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>
>>2) Если возможно, то сколько это будет стоить ?
>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>аптайме ?
>>4) Если какие-то другие варианты ?
>>
>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>
>
>
>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>напрямую к серверу. Посмотри на HP EVA 4000  low end
>array.

SAN это система доступа к массиву, а не массив


"Как организовать огромное хранилище для данных "
Отправлено serge , 14-Май-07 12:39 
>>>В этих вопросах новичок, так что не судите строго :)
>>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>>терабайт.
>>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>>туда данные в реалтайме. Теперь вопросы:
>>>
>>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>>
>>>2) Если возможно, то сколько это будет стоить ?
>>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>>аптайме ?
>>>4) Если какие-то другие варианты ?
>>>
>>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>>
>>
>>
>>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>>напрямую к серверу. Посмотри на HP EVA 4000  low end
>>array.
>
>SAN это система доступа к массиву, а не массив


Yep. I did mention that - Storage Array directly attached to host - you will get DAS. I suggested to have look towards SAN and in case if only one server required don't use switches so attach directly to host HBA. HPA EVA 4000 is storgae array not SAN. Where did I mention that SAN is storage array?


"Как организовать огромное хранилище для данных "
Отправлено Nikolaev D. , 14-Май-07 15:32 
>>>>В этих вопросах новичок, так что не судите строго :)
>>>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>>>терабайт.
>>>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>>>туда данные в реалтайме. Теперь вопросы:
>>>>
>>>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>>>
>>>>2) Если возможно, то сколько это будет стоить ?
>>>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>>>аптайме ?
>>>>4) Если какие-то другие варианты ?
>>>>
>>>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>>>
>>>
>>>
>>>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>>>напрямую к серверу. Посмотри на HP EVA 4000  low end
>>>array.
>>
>>SAN это система доступа к массиву, а не массив
>
>
>Yep. I did mention that - Storage Array directly attached to host
>- you will get DAS. I suggested to have look towards
>SAN and in case if only one server required don't use
>switches so attach directly to host HBA. HPA EVA 4000 is
>storgae array not SAN. Where did I mention that SAN is
>storage array?


короче самое дешевое - писать на диск (500-1000 гигов) и оттаскивать с него данные ленточную библиотеку.

к примеру  Sun StorageTek C4 Tape Library
38 ленты LTO-3 - как раз искомые 32 Терабайт (с компрессией). в 15к баксов можно уложится


"Как организовать огромное хранилище для данных "
Отправлено dikobraz , 30-Май-07 01:36 
>>>>>В этих вопросах новичок, так что не судите строго :)
>>>>>Что мы имеем: есть система видеонаблюдения в здании, в среднем там за
>>>>>день записывается по 50 гб видео. Сама система работает под Виндовсом.
>>>>>Надо создать архив за полгода для видео ... Итого получается 18-19
>>>>>терабайт.
>>>>>Думал сделать так, собрать сервер с кучой жёстких дисков объеденённых в RAID
>>>>>и просто подключить раздел, как сетевой диск и по сети скидывать
>>>>>туда данные в реалтайме. Теперь вопросы:
>>>>>
>>>>>1) Возможно ли такое сделать и как подключить такое кол-во hdd !?!?
>>>>>
>>>>>2) Если возможно, то сколько это будет стоить ?
>>>>>3) Какую ОС выбрать, так как сервер должен работать полгода в постоянном
>>>>>аптайме ?
>>>>>4) Если какие-то другие варианты ?
>>>>>
>>>>>З.Ы. Больше всего интерасует вопрос по железу - возможно ли такое ...
>>>>>
>>>>
>>>>
>>>>SAN. Если дорого - можно без свичей, подключить Storage Array по оптике
>>>>напрямую к серверу. Посмотри на HP EVA 4000  low end
>>>>array.
>>>
>>>SAN это система доступа к массиву, а не массив
>>
>>
>>Yep. I did mention that - Storage Array directly attached to host
>>- you will get DAS. I suggested to have look towards
>>SAN and in case if only one server required don't use
>>switches so attach directly to host HBA. HPA EVA 4000 is
>>storgae array not SAN. Where did I mention that SAN is
>>storage array?
>
>
>короче самое дешевое - писать на диск (500-1000 гигов) и оттаскивать с
>него данные ленточную библиотеку.
>
>к примеру  Sun StorageTek C4 Tape Library
>38 ленты LTO-3 - как раз искомые 32 Терабайт (с компрессией). в
>15к баксов можно уложится


Solaris 10+ZFS, архивы складывать на ленточки