Показать полную графическую версию : [решено] 50 Терабайт как несколько дисков ?
AzazeLHAck
04-06-2010, 00:39
Доброго времени суток, товарищи! :)
Планируем снимать полнометражный низкобюджетный фильм. Отснятый материал будет занимать кучу места (60 минут = 128 Гигабайт). Всего по подсчётам понадобится около 50-ти терабайт. Не подскажете как лучше соединить 25 жёстких дисков по 2 Терабайта для работы над видео материалом к одному компьютеру? Какие способы лучше использовать и какое оборудование?
Кстати, данные на диски будут записываться не с компьютера, а прямо с камеры на диски по очереди.
Доброго.
Определите бюджет и ищите в поисковиках, ссылок полно...
ключевые слова: системы хранения данных, дисковые массивы, сетевые хранилища
http://www.dscon.ru/products/axus_yotta_b_24.htm
http://storusint.com/solutions/video_solution.htm
от себя: самый дешевый вариант: от 300 руб. - SATA to USB Adapter :)
извините вы снимаете 800-часовой фильм? :clapping:
данные на диски будут записываться не с компьютера, а прямо с камеры на диски по очереди
зачем и почему?
AzazeLHAck
04-06-2010, 11:34
Определите бюджет и ищите в поисковиках, ссылок полно... »
Выбрал вот такое, кажется наиболее подходящим: PROMISE NS4600 (http://www.thg.ru/network/promise_ns4600/index.html) . Думаю, если их соединить по сети через хаб, то будет именно то, что я и хочу.
SATA to USB Adapter »
Но это всё же не вариант :) подключить 50 дисков по USB не очень удобно.. :)
800-часовой фильм? »
Фильм-то будет 1,5 часа, но потратится во время съёмок где-то 300-350 часов. Это нормально.
зачем и почему? »
Камера будет записывать поток 280Mbps на CF карты. На 2 карты по 64 GB помещается 60 минут такого высококачественного видео. Накупать CF карт на 50 терабайт - глупо. Дешевле купить жёстких дисков по 2 ТБайта и такой вот прибор: DARK DS02 (http://pr.hipernex.com/m/darkds02.jpg) при помощи которого будет производиться перенос данных с карт на харды.
DJ Mogarych
04-06-2010, 13:06
Отснятый материал будет занимать кучу места (60 минут = 128 Гигабайт) »
Господи, что ж это за формат-то? Несжатое HD video с несжатым звуком 7.1?
Как-то крутовато для "низкобюджетного" кино. Тут одно дисковое хранилище чего стоит...
AzazeLHAck
04-06-2010, 15:48
Господи, что ж это за формат-то? Несжатое HD video с несжатым звуком 7.1? »
:) Говорю ведь 280 Mbps. Профессиональные HD-камеры снимают и сжимают своё HD-видео записывая на носитель. Оно обычно составляет 50 Mbps. А если принимать видео через выход HDSDI, то видео получается не сжатым.
для "низкобюджетного" кино. »
Бюджет составляет 350 000 $. Считается низкобюджетным :)
такой вот прибор: DARK DS02 при помощи которого будет производиться перенос данных с карт на харды
а что, это "прибор" без ПК работает? По-моему, это обыкновенная док-станция с картридером и USB-хабом
Выбрал вот такое, кажется наиболее подходящим: PROMISE NS4600
У него при непрерывном копировании скорость до 30Мб/с, маловато для видео в 280Мбит/с = 35Мб/с.
У него при непрерывном копировании скорость до 30Мб/с, маловато для видео в 280Мбит/с = 35Мб/с »DARK DS02 при помощи которого будет производиться перенос данных с карт на харды. »- т.е. обыкновенное копирование, не прямая запись с видео-камеры.
По сути, AzazeLHAck, не совсем правильно сформулировал вопрос, не описав исходные данные (например, какие выходы имеет видео-камера) и как видится процесс съёмки и перенос данных. Т.к. данные передаются при помощи HDSDI, то можно просто передавать их на компьютер с предложенным zonderz:Дисковый (RAID) массив AXUS Yotta B SAS (24/128 дисков SAS/SATA II)При съёмках на натуре и/или невозможности использования ПК, использовать или несколько флеш-карт или док-станцию. В общем, есть много решений данного вопроса.
AzazeLHAck, удачных съёмок и проката! Контр-марки на премьеру не забудь выслать! ;)
Выбрал вот такое, кажется наиболее подходящим: PROMISE NS4600 . Думаю, если их соединить по сети через хаб, то будет именно то, что я и хочу. »
Если то, чего вы хотите, это несколько разрозненных сетевых хранилищ объёмом максимум по 8Тб со скоростью сомневаюсь что превышающей искомые 280Mbps, то берите. ;)
Если же вам нужно промышленное хранилище со всеми 50Тб неразрывно, со скоростью от 3Gbps, то рекомендую обратить внимание на продукцию Xyratex. Вот тут (http://www.stss.ru/products/storage/xyratex.html) есть хороший выбор, онлайн-конфигуратор и возможность проконсультироваться.
Денег стоит солидных, обойдётся хозяйство в $10-15 тыс (без дисков), так что рекомендую попытаться арендовать.
AzazeLHAck
06-06-2010, 23:53
а что, это "прибор" без ПК работает? По-моему, это обыкновенная док-станция с картридером и USB-хабом »
Нет, без ПК не работает, будем использовать Ноутбук. :)
По сути, AzazeLHAck, не совсем правильно сформулировал вопрос, не описав исходные данные »
Согласен, спасибо за поправку :) Напишу подробнее: Видео без обработки встроенным кодеком камеры выходит из порта HDSDI на приборчик nanoFlash от Convergent Design (http://www.convergent-design.com/Products/nanoFlash/tabid/1666/Default.aspx), он в свою очередь записывает видео качеством в 280 Мбит/сек на 2 CF карты. Потом данные с карт переносятся на жёсткие диски. Это для удобства при последующем монтаже.
удачных съёмок и проката! Контр-марки на премьеру не забудь выслать! »
Обязательно! Идея фильма потрясающая (как считаем сами :) ) Решили сами снять, потому что не хочется это доверять кому-либо ещё :)
Если же вам нужно промышленное хранилище со всеми 50Тб неразрывно, со скоростью от 3Gbps, то рекомендую обратить внимание на продукцию Xyratex. »
Обратил, буду изучать :)
Денег стоит солидных, обойдётся хозяйство в $10-15 тыс (без дисков), так что рекомендую попытаться арендовать. »
Это первый, но не последний фильм. Поэтому лучше купим, в будущем ещё будем использовать.
А теперь вопрос: Сейчас пока нет времени изучать RAID, поэтому прямо спрошу. Подобные Xyratex массивы объединят много дисков в один, если на них уже записаны данные..? Чтобы не приходилось форматировать. И какой из RAID (0,1,10,5,6,...) подходит для соединения (без всяких бэкапов) дисков с медиа данными..?
Подобные Xyratex массивы объединят много дисков в один, если на них уже записаны данные..? »
Краткий ответ - нет. Если я правильно понял вашу идею вытаскивать диски из массива, вставлять их в камеру/док-станцию, или что там у вас, писать на него и потом возвращать в массив - нет, это невозможно. Придётся пользоваться отдельными носителями и переписывать с них данные на основной массив.
И какой из RAID (0,1,10,5,6,...) подходит для соединения (без всяких бэкапов) дисков с медиа данными..? »
RAID 0, 5, 6. Поскольку, как я понимаю, дисков будет явно больше 20, а инфа на них будет храниться как минимум в течение цикла производства фильма (полгода-год?), то RAID 0 я бы не рискнул - слишком высок риск потерять всё при выходе из строя одного-единственного диска. Дисков много, потому избыточность в 2-4 диска большой роли не играет, а потеря производительности по сравнению с RAID 0 совершенно несущественна. Так что лучший имхо вариант это RAID 6 + 2 hot spare диска. Сохранность данных обеспечивается при выходе из строя 2 любых дисков, на замену погибшим автоматически встанут запасные (hot spare). И всё это при внушительной скорости не менее 400Мбайт/сек.
Сейчас пока нет времени изучать RAID, поэтому прямо спрошу. »
Я думаю, что минут 15 на краткое ознакомление с уровнями RAID в википедийной статье (http://ru.wikipedia.org/wiki/RAID) у вас найдётся ;)
PS Есть и другие производители промышленных СХД, можете и на них посмотреть, но каждый кулик своё болото хвалит, а я пользуюсь Xyratex и полностью им доволен.
какой из RAID (0,1,10,5,6,...) подходит для соединения (без всяких бэкапов) дисков с медиа данными..?
объединение нескольких HDD в один - JBOD (http://ru.wikipedia.org/wiki/JBOD)
Но в данном случае лучше использовать RAID5 или 6.
JBOD в случае использования в промышленной СХД даёт уж очень низкую производительность, не говоря о сравнительно низкой надёжности. А про некритичность избыточности я уже говорил - смысл экономить 1-2 диска, когда их 24 или больше? Особенно в ущерб надёжности и производительности.
DJ Mogarych
08-06-2010, 08:42
Можно пятый рэйд построить. Места будет меньше на объём одного диска, зато и надёжность какая-никакая будет, и производительность, во всяком случае, не хуже.
А можно один огромный динамический диск сделать.
AzazeLHAck
08-06-2010, 13:07
Придётся пользоваться отдельными носителями и переписывать с них данные на основной массив. »
Жаль, что не получится так.. Придётся таскать 50 кг с собой на съёмках. :)
лучший имхо вариант это RAID 6 + 2 hot spare диска »
Да! Сохранность данных действительно нужна. Будет очень не кстати потерять весь материал из-за одной поломки. Учтём.
смысл экономить 1-2 диска, когда их 24 или больше? »
Да, смысла экономить на дисках нет.
Мне на одном из сайтов с такими девайсами посоветовали по моим требованиям (Поддержка дисков на 2 ТБ, 24 диска и т.д.) вот такой набор:
Дисковый массив: Proware EP-2123S-F4S3........5567$
Полка расширения: Proware EP-2123J-S3S3.....3340$
Хост-адаптер: Qlogic QLE2440-CK.......................900$
И цены не очень велики. Что скажете..?
Дисковый массив: Proware EP-2123S-F4S3........5567$
Полка расширения: Proware EP-2123J-S3S3.....3340$ »
Судя по описанию, вроде норм. Поинтересуйтесь только, входит ли в поставку BBU (Battery Backup) - архиполезная вещь, но в стандартную поставку вроде не включена.
Придётся таскать 50 кг с собой на съёмках. »
Зачем? Просто возьмите ещё парочку дисков, можно во внешних боксах, на них и пишите на съёмках, а в студии переносите на основной массив.
Да и таскать придётся поболе 50кг - помимо массива с полкой понадобится ещё машинка, в которую воткнут Хост-адаптер: Qlogic QLE2440-CK » и UPS - вы ж не хотите потерять материал от банального сбоя питания? Да и всё это хозяйство по уму следует запихнуть в этакую тумбочку:
http://www.rackmountmart.com/prodspics/cr1002-new.jpg
1)
Можно решить проблему следующим образом:
- Veritas Storage Foundation for Windows +
+Дисковое хранилище высокой плотности (например http://ru.sun.com/products/storage/expansion/4500/specs.jsp)
2)
Приобретая чисто хардверное решение, обязательно уточняйте максимально возможный размер тома (LUN).
Многие системы хранения данных (например EVA) не выделяют тома больше чем 2 ТБ
=====================
Вобще же для целей которые заявлены у вас обычно применяют специализированные системы
Например такое http://storus.ru/solutions/video_solution.htm
AzazeLHAck
08-06-2010, 17:49
У него при непрерывном копировании скорость до 30Мб/с, маловато для видео в 280Мбит/с = 35Мб/с. »
В технических характеристиках PROMISE NS4600 написано: Сетевой интерфейс: Скорость 10/100/1000 Мбит/с.
Значит можно будет имет доступ по сети через соответствующий коммутатор на скорости 1000 Мбит/с..?
Ещё хотелось бы знать, можно ли там вообще RAID не использовать..? Просто, чтобы как 4 диска он был виден..?
IgNat, А может просто подсоединить 25 хардов методом eSATA через какой-нибудь хаб (если таковой есть) и не возиться с килограммами, RAIDами и лишними затратами?
А может просто подсоединить 25 хардов методом eSATA через какой-нибудь хаб (если таковой есть) и не возиться с килограммами, RAIDами и лишними затратами? »
можно, такой девайс называется port multiplier и работает через интерфейс eSATA. Только есть куча подводных камней - нужно чтобы контроллер поддерживал этот самый PMP, желательно чтобы он работал в режиме FIS-based, а не Command-based, но даже в этом случае цеплять больше 5 устройств на порт не имеет смысла, к тому же у некоторых контроллеров есть ограничение поддержки PMP до 2 портов из скажем 6 наличных. Скорость будет мягко говоря не выдающаяся, а потребление ресурсов огромным, особенно при использовании софт-райда.
Вот (https://ata.wiki.kernel.org/index.php/SATA_hardware_features) табличка возможностей относительно современных "простых" SATA контроллеров, обратите внимание на графы PMP и PMP SM.
© OSzone.net 2001-2012
vBulletin v3.6.4, Copyright ©2000-2025, Jelsoft Enterprises Ltd.