vitus_wagner: My photo 2005 (Default)
vitus_wagner ([personal profile] vitus_wagner) wrote2016-06-02 12:02 pm

Задачка попроще

Тут при обсуждении переносного storage-сервера народ в такие дебри полез.

Сформулирую более простую задачу - нужен стационарный storage-сервер примерно на 20-25Tb, который будет раздавать это огромное море информации по ограниченному числу клиентов (не более 5 локально + bittorrent по узкому каналу).

Требуется минимизировать TCO в течение примерно двух-трех лет (потом все равно морально устареет), при условии, что электричество получается из бензогенератора и стоит сейчас примерно 20руб/квт-ч.

[identity profile] dimez.livejournal.com 2016-06-02 09:23 am (UTC)(link)
Надёжность хранилки примерно какого порядка нужна?

[identity profile] dimez.livejournal.com 2016-06-02 09:49 am (UTC)(link)
Т.е. большая. Ну тогда raidz2/raidz3

(no subject)

[identity profile] dzz.livejournal.com - 2016-06-02 15:09 (UTC) - Expand

(no subject)

[identity profile] dzz.livejournal.com - 2016-06-02 15:24 (UTC) - Expand

[identity profile] dimez.livejournal.com 2016-06-02 09:48 am (UTC)(link)
Любой корпус, вмещающий нужное количество дисков (если хочется эстетики, то какой-нибудь Lian Li PC-Q26). Нужное количество PCIe SATA3 контроллеров на Marvell (их ставит тот же битблейз в свои хранилки) к набортному SATA, матплата с маложручей затычкой для сокета (можно даже впаянным 6.5W J3710), 8-16 гигов памяти.

Ещё такой момент. 20-25Tb обеспечить можно за вменяемые деньги только на HDD. А HDD критичны к питанию (на плохом долго не проживут) т.е. между бензогенератором и сервером надо обязательно будет ставить UPS с AVR (или отдельно UPS и AVR)
Edited 2016-06-02 09:49 (UTC)

[identity profile] http://users.livejournal.com/_slw/ 2016-06-02 09:57 am (UTC)(link)
пять SATA дисков на 8ТБ под FreeBSD в ZFS RAIDZ1, подключенных к подходящей mini-ITX плате.

[identity profile] dimez.livejournal.com 2016-06-02 10:05 am (UTC)(link)
8Tb диск стоят несоразмерно больше, чем 2 диска по 4Tb.

raidz1 и большая надёжность ИМХО вещи не сильно совместимые. Всего один диск для выхода из строя.
Edited 2016-06-02 10:05 (UTC)

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 10:18 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 10:33 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 11:43 (UTC) - Expand

[identity profile] moshkow.livejournal.com 2016-06-02 10:10 am (UTC)(link)
HP MiniProliant (http://moshkow.livejournal.com/39855.html), втыкаем в него пять 6Tb дисков, ставим какой-нибудь Linux, CIFS и т.п.
Диски в софтверный RAID5 (24Т) - если нужна надежность, или просто JBOD (30Т) - если можно обойтись

Edited 2016-06-02 10:14 (UTC)
de_nada: (Default)

...

[personal profile] de_nada 2016-06-02 10:16 am (UTC)(link)

лучше уж R6

С уважением.

P.S. А если по условиям годится и JBOD (в плане организации инфы), то тогда уж набор из "зеркал"(R1). Именно так, не R10.

Edited 2016-06-02 10:18 (UTC)

[identity profile] http://users.livejournal.com/_slw/ 2016-06-02 10:18 am (UTC)(link)
RAID5 -- 21.8TB
JBOD -- 27TB

это так, для точности.

(no subject)

[identity profile] moshkow.livejournal.com - 2016-06-02 10:22 (UTC) - Expand

[identity profile] dimez.livejournal.com 2016-06-02 10:21 am (UTC)(link)
Использовать RAID5 на таком объёме массива - запрещено Женевской конвенцией :)

(no subject)

[identity profile] moshkow.livejournal.com - 2016-06-02 10:23 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 10:46 (UTC) - Expand

(no subject)

[identity profile] avryabov.livejournal.com - 2016-06-02 22:01 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-03 09:16 (UTC) - Expand

(no subject)

[identity profile] moshkow.livejournal.com - 2016-06-05 13:43 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-05 13:48 (UTC) - Expand

(no subject)

[identity profile] moshkow.livejournal.com - 2016-06-02 11:01 (UTC) - Expand

(no subject)

[identity profile] temp1ar.livejournal.com - 2016-06-02 14:04 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 10:25 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 10:35 (UTC) - Expand

(no subject)

[identity profile] moshkow.livejournal.com - 2016-06-02 10:56 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 11:06 (UTC) - Expand

(no subject)

[identity profile] moshkow.livejournal.com - 2016-06-02 13:36 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 14:19 (UTC) - Expand

(no subject)

[identity profile] alexkuklin.livejournal.com - 2016-06-02 12:33 (UTC) - Expand

[identity profile] gunslinger2.livejournal.com 2016-06-02 10:22 am (UTC)(link)
Любая серверная машина на 8-12 хотсвапных винтов (2 юнита, габариты примерно 10х90х120 см, масса в пределах 25-30 кг), с любым линухом на борту. Единственный момент - при питании от генератора желателен стабилизатор напряжения, т.к. винты чувствительны к качеству питания.

(no subject)

[identity profile] gunslinger2.livejournal.com - 2016-06-02 10:31 (UTC) - Expand

(no subject)

[identity profile] gunslinger2.livejournal.com - 2016-06-02 10:43 (UTC) - Expand

(no subject)

[identity profile] edo-rus.livejournal.com - 2016-06-02 14:27 (UTC) - Expand

[identity profile] painstakinglyyz.livejournal.com 2016-06-02 12:25 pm (UTC)(link)
Я наверное уже опоздал к основному обсуждению...

http://www.overlandstorage.com/products/tape-libraries-and-autoloaders/neos-storageloader.aspx#Specifications

1 юнит, 11 кг, 110 ватт.

На сайте цены нет, но погуглив нашлось от $2500 - там много вариантов с сетевым подключением, стандартом лент и так далее...

А еще вот такая штука была бы неплоха, если бы давала доступ к данным как к файлам, а не просто фильмам:

http://www.crutchfield.com/S-bNOi4MfoPMG/p_158BDCX960/Sony-BDP-CX960.html

Там 400 дисков, как раз получается по объемам требуемым...

[identity profile] dzz.livejournal.com 2016-06-02 03:01 pm (UTC)(link)
А сколько людей участвует в заговоре?

Хочешь, предложу совсем экзотический вариант на пару лет?

Mesh-сеть на смартфонах с дублированием нод, на каждой ноде - кусок информации (скажем, 500 гиг на флеш-карте). Полсотни заговорщиков (25 недублированных нод) легко и незаметно выносят через таможню любую библиотеку.

Далее - на каждом смарте каталог и возможность скачать искомое с нужного смарта по Wi-Fi. Главное, далеко не расходиться.
Edited 2016-06-02 15:07 (UTC)

(no subject)

[identity profile] dzz.livejournal.com - 2016-06-02 15:14 (UTC) - Expand

(no subject)

[identity profile] dimez.livejournal.com - 2016-06-02 21:27 (UTC) - Expand

[identity profile] karpion.livejournal.com 2016-06-02 05:13 pm (UTC)(link)
У меня ощущение, что в такой системе основную цену (как покупки, так и электричества) будут жрать диски. Остальное получается несущественно.

(no subject)

[identity profile] karpion.livejournal.com - 2016-06-02 19:23 (UTC) - Expand

[identity profile] boud.livejournal.com 2016-06-02 06:02 pm (UTC)(link)
Перелогиниться забыл, ну да ладно.
В общем, не стоит считьать с бензогенератора киловаттчасы в рублях напрямую.

(no subject)

[identity profile] boud.livejournal.com - 2016-06-02 19:11 (UTC) - Expand

NAS

[identity profile] eugene nalimov (from livejournal.com) 2016-06-03 12:57 am (UTC)(link)
Я бы купил какой-нибудь готовый NAS, по личному опыту хорош Synology DS1515+. Бывают они же на 8 дисков, DS1815+. Первый ~$700, второй $850 без дисков на NewEgg. Диски прикупить WD Red. На том же NewEgg 3Tb стоит $109, 8Tb $339, есть и другие.

Единственное что, надо памяти прикупить, 2Gb по умолчанию маловато. Легко расширяется до 6Gb, а если не боитесь потерять гарантию то до 16Gb (первый слот памяти стоит за пломбой, а с 2Gb в нём во второй ставится только 4Gb; если пломбу снять то в каждый ставится 8Gb). Хотя если только раздавать файлы то м 2Gb должно хватить и электричества съест меньше. Но там внутри нормальный Linux, можно поставить всё на свете.

Через USB подключается WiFi dongle если надо. Так как внутри Atom то поддерживается что угодно по умолчанию.

Я ещё заменил вентиляторы на более тихие, но это на любителя.

Для меня было идеальное решение где всё уже есть и работвет сразу после включения, не надо было плясать с бубном, собирать, компилировать и т.д.

[identity profile] p2004r.livejournal.com 2016-06-03 12:18 pm (UTC)(link)
Ну ещё раз:

Вот это http://www.cooldrives.com/index.php/sataandesata/sata-hub.html (они и на 8 есть по моему)

+ любая материнка + нужное количество блоков питания

дает возможность напихать в самостоятельно сделанную (или изготовленную по любезно предоставленным фирмой имеющей услугу облачного бекапа гнутым чертежам)

отличную коробочку с 16 - 24 - 32 HD.

Софтверный райд для этого всего поставить проблем нет никаких.

В качестве ЗИП просто иметь материнку + пару разветвителей + пару HD

[identity profile] tserv3.livejournal.com 2016-06-05 09:18 am (UTC)(link)
если с точки зрения минимизации потребления, то можно смотреть в сторону плат на атоме (например, Supermicro A1SA7-2750F 8-и ядерный C2750 20W, 16 SATA/SAS, 1 SATA DOM).
а раздаваемое море информации (которая только для чтения) можно положить на 10TB Ultrastar He10 (7W SATA)

(no subject)

[identity profile] tserv3.livejournal.com - 2016-06-05 10:09 (UTC) - Expand

(no subject)

[identity profile] tserv3.livejournal.com - 2016-06-05 11:10 (UTC) - Expand