Как построить быструю локальную сеть

Я работаю в кинопроизводстве и мне нужен очень быстрый доступ к очень большим файлам необработанных кадров. В настоящее время я использую док-станции eSATA 6Gbps для внутренних жестких дисков, которые идут так же быстро, как и диск.

Если бы я использовал сервер и подключался к своим рабочим станциям по сети, какая (относительно доступная) технология позволила бы мне приблизиться или превысить скорость диска?

16
задан hjpotter92
07.04.2023 18:25 Количество просмотров материала 2557
Распечатать страницу

6 ответов

здесь в начале 2017 года, судя по информации, легко доступной в интернете, это выглядит как самый быстрый SATA HDDs max на отметке 220 мегабайт / сек, что составляет 1.760 гигабит/сек.

Итак, если вы просто пытаетесь превзойти скорость одного диска, и вы ограничены жесткими дисками для соображений стоимости за терабайт для огромных видеофайлов, тогда 10 Gigabit Ethernet достаточно.


в стороне, обратите внимание, что сеть Thunderbolt составляет 10 гигабит / с, так что если вы уже есть порты Thunderbolt, вы можете экспериментировать с этим. Возможно, он может превзойти ваши 6-гигабитные порты eSATA 3, хотя я не уверен в этом, потому что eSATA очень специфична для хранения, тогда как хранение через Ethernet имеет больше накладных расходов. Также обратите внимание, что Thunderbolt-это настольная шина; она достигает всего нескольких метров, а не 100 м, которые могут обрабатывать 10 Gigabit Ethernet. Таким образом, хотя Thunderbolt может быть интересен для экспериментов и прототипирования, пока вы взвешиваете свои варианты, это, вероятно, не правое долгосрочное решение для вас если вы не будете хотеть держать все ваши рабочие места и диски соединенный спиной к спине вокруг большой таблицы.


Итак, это один жестких дисков. Но если объединить эти диски в массив RAID, чтобы все операции чтения и записи распределялись по нескольким дискам, можно получить гораздо более высокую производительность, чем производительность одного диска. Кроме того, в зависимости от вашего бюджета, вы можете поместить PCIe/M. 2 NVMe SSD в ПК, чтобы выступать в качестве сервера / NAS, и вы можете получить blazing высокая производительность хранения (около 3,4 гигабайт/сек == 27 гигабит/сек) на диск.

в этом случае вы можете захотеть посмотреть на что-то быстрее, чем 10 Gigabit Ethernet, но, оглядываясь в Интернете, похоже, что цены резко прыгают за пределы 10 Gigabit Ethernet. Таким образом, вы можете посмотреть на выполнение агрегации ссылок по нескольким ссылкам 10Gigabit. Я также видел некоторые анекдоты в интернете, которые использовали сетевое оборудование, например, используемые материалы InfiniBand 40 Гбит / с, можно купить на eBay для грязь дешево, если вы не против неприятностей, которые приходят с покупкой подержанных передач на eBay.

31
отвечен Spiff 2023-04-09 02:13

Если вы придерживаетесь дисков SATA, реализация 10 Гб ethernet и построение RAID10 разумного размера на сервере приведет к заметному увеличению производительности за пределами одного диска SATA. Это будет достойным вложением, потому что вы можете разделить сервер среди стольких рабочих станций, сколько вам нужно, и добавить в будущем, добавив коммутаторы. Вам нужно будет запустить кабель ethernet Cat-6, так как Cat-5E не сократит его - не забудьте добавить этот расход в свои расчеты. Можно также добавить твердотельные накопители как кэш, чтобы ускорить систему еще больше; так как вы работаете с видеоматериалами, я предполагаю, что вам нужно огромное количество дискового пространства, которое было бы чрезвычайно дорогим для создания исключительно с твердотельными накопителями.

вы можете купить готовый сервер у Dell или HP и использовать аппаратную RAID-карту, или, если вы больше аппаратный человек, вы можете купить более дешевое шасси от Supermicro и построить машину хранения самостоятельно, используя программное обеспечение RAID в Windows или Linux. Аппаратный RAID часто быстрее, когда RAID1 вовлечен, так как программное обеспечение должно записать к каждому диску по очереди и ждать записи, чтобы закончить прежде, чем перейти на следующую операцию; карта RAID может обычно писать на оба диска параллельно, и кэшировать операцию записи, возвращая управление К ОС немедленно. Обратите внимание, однако, что хотя RAID0 будет еще быстрее, у вас нет избыточности, и сбой одного диска приведет к полной потере данных; никогда не используйте RAID0, когда у вас есть данные, которые вы хотите сохранить. Я порекомендуйте связаться Dell или HP или другое большое имя для того чтобы увидеть если они могут помочь вам spec вне система для того чтобы отвечать ваши потребностямы.

в верхней части шкалы у вас есть сети хранения данных (SANs), но они предназначены для параллельного выполнения многих операций с большим количеством отдельных клиентов; преимущество этого заключается в том, что пропускная способность очень высока для небольшого числа подключенных машин, но, вероятно, слишком высока для ваших нужд и очень дорога. На нижнем конце, у вас есть сеть Устройство хранения данных (NAS) устройства, которые отметили другие, но хотя намного проще, чем полноценный сервер, я не рекомендую их, так как на НАН часто "черный ящик"; они разработаны, чтобы быть штепсельной вилкой & игрой для большинства пользователей, и в результате у вас мало контроля над ОС - мне пришлось отправить туда небольшой NAS, который я купил для кабинета клиента, как он стал нестабильным после дня использования.

еще одно преимущество создания сервера заключается в том, что вы концентрируете все свои кадры в одном место, что делает его практичным и относительно легко регулярно делать резервные копии. Никогда не пренебрегайте стратегией резервного копирования; однажды вам придется положиться на нее!

5
отвечен Gargravarr 2023-04-09 04:30

ничто не сравнится с гибкостью и простотой настройки 10gbe, но SAS удивительно работает в сети сам по себе:

для небольшого количества рабочих станций (n<8), где Тома не должны быть доступны для записи с нескольких компьютеров одновременно, SAS работает отлично. С Tyan JBOD ($1,500) и LSI HBA ($400), мы получаем 3,400 МБ/с (27 Гбит / с) устойчивые переводы на SSD. JBOD имеет внутренний переключатель с 3 Uplink к HBA, но переключатели SAS имеющиеся для более высоких отсчетов порта.

вот тест скорости одного из наших томов:

CDM5 showing 2,862MB/s sequential read with 32 iops in queue.  4k single threaded random read 29MB/s

внутренне, мы используем это решение с кластерными серверами Windows складских помещений, которые распространяются клиентам с 10gbe.

Clustered Windows Servers

3
отвечен Mitch 2023-04-09 06:47

https://www.newegg.com/Product/Product.aspx?Item=N82E16820147593&cm_re=samsung_m.2--20-147-593--Product

во-первых, M. 2 SSD, который, учитывая правильную материнскую плату, может достигать 2gb-4gb / s и, возможно, выше. Совершите налет на некоторые из них вместе, и ваши скорости еще выше.

объединение нескольких 10 Гб NIC может приблизить вас к родной скорости.

что-нибудь больше, чем 10g намного больше денег.

40 гигабит СЕТЕВОЙ АДАПТЕР https://www.serversupply.com/products/part_search/pid_lookup.asp?pid=263133&gclid=Cj0KEQiA9P7FBRCtoO33_LGUtPQBEiQAU_tBgIU2jZrJKf0kXFy96roOllcRkp7j-VoubG_n7xb0_pgaAnaT8P8HAQ

2
отвечен cybernard 2023-04-09 09:04

используйте карточку локальных сетей волокна с переключателем волокна, идеально мультимодным или одиночным режимом с пусковыми площадками. Если у вас есть бюджет, вы можете сделать все это 10 Гбит / с, если вы используете агрегацию каналов с двухпортовой волоконной картой, вы можете получить 20 Гбит / с. Поскольку термин "относительно доступный" изменяется в зависимости от вашего бюджета, фактические цифры относительно того, что вы готовы потратить, были бы полезны.

0
отвечен Sunny 2023-04-09 11:21

самый дешевый способ - использовать агрегацию каналов (т. е. запускать N кабелей, обычно 2) вместо одного.

таким образом, дешевая ссылка 1Gb станет ссылкой 2Gb.

очевидно, это означает, что вам нужно по крайней мере 4 порта для одного сервера клиента.

0
отвечен Antzi 2023-04-09 13:38

Постоянная ссылка на данную страницу: [ Скопировать ссылку | Сгенерировать QR-код ]

Ваш ответ

Опубликуйте как Гость или авторизуйтесь

Имя
Вверх