万兆NAS存储实现多人共享剪辑

DK黑苹果

虽然已经网友“ETHAN” 放出贴子了，还是想在这里发一稿，因为有些测试并不严谨，还是想给大家看看真实数据。
由于这段时间搞店铺装修，白天干活晚上和设计师对稿，一直没空发贴子。之前的一台8盘NAS存储服务器已经交给客户使用了，测试的数据并不多，也没想要发贴子用。所以各位看官请谅解。。。
下面是8盘的服务器图片

下面是光纤卡不加模块的图


下面这张是加了光纤模块的图
因为客户的服务器与剪辑主机距离比较远，所以必须使用光纤线连接。（如果使用光纤直连线也是可以的，省了模块的费用，但距离只有5米，而且速度要比光纤线快一点，具体快多少我只是个人感觉，应该有80M/s的差别，不是很大）


这里安装的是两张万兆光纤卡，可以直边四台电脑剪辑，当然还有千兆端口的，比如其它的办公或平面处理人员都可以通过千兆网口访问数据。
下面是8盘RAIDZ测试速度

（为什么不叫RAID5，因为系统的原因，这里的RAIDZ就是RAID5的模式）RAID模式有好几种，用好理解的说法是RAID5/RAID6,RAID7,当然还有热备。如果不懂就自己百度吧。RAIDZ相当于RAID5，RAIDZ2相当于RAID6  ……


AJA软件的测试是一个64G的超大文件，这是使用了光纤线的连接测试的，数据比较可靠。

在Mac上想要查看拷贝速度只能通过活动监视器了，我测试的是一个40G的素材文件夹，实际测试与使用中相差不多，不过还是要看文件量的。

在视频存储方面使用RAIDZ可以拥有更大的存储空间，有着比RAID5更好的安全性，不过缺点是对小文件处理比较慢，如果作图片存储还是比较推荐RAIDZ2或RAIDZ3的方式，虽然减少了更多的存储空间，但在小数据量多人读写速度方面有着很大的提升。
下面是通过千兆网卡与交换机连接实际拷备图片的速度，也是非常理想的。


8盘的测式就这些，由于时间原因没有做更多的截图。

这些测试都是在黑苹果上测试的，使用的是万兆网卡加光纤线直连，使用这个方案黑苹果只需要安装一个万兆网卡。但是苹果电脑的话只能去购买雷电转光纤盒子，或者是雷电pcie扩展箱+万兆光纤卡。所以使用苹果连接成本还是比较高的。



************************************************************************************************************
下面是5盘的案例
只安装了一个双口光纤卡，直连两台电脑剪高清，使用直连线。以后也可以再增加一张双口光纤卡，4个人剪，因为我经常制作主机内置阵列，所以几个硬盘组建RAID5的速度是多少都是有记录，理论5盘的速度组建RAIDZ后应该是700M/s左右，4个人共享速度是足够的。这里使用的是5盘酷狼NAS盘（为什么不使用WD红盘，因为它太热了，温度高到可以煎鸡蛋）


下面是系统查看硬盘的温度



上面先拿光纤线测了一下，拍了一张图，后面是使用直连线测试的。
Windows10下测试



非常高兴的是5盘的速度和8盘差不了多少，其实8盘的瓶颈在于万兆光纤卡。


实测看一下
（从桌面拷到NAS）

（从NAS拷到桌面）

测试的是视频素材文件夹，为什么比别人测的慢呢，因为我这里数据比较大也不是单个文件，速度比较真实，其它网友测试的拷一个1G或更小的文件都是由于内存的原因，所以看起来非常快，但实际使用还是比较慢的。因为硬盘的速度是不可能达到那个速度的。

这是在制作5盘阵列时使用的测试平台，Mac的单系统黑苹果主机，增加了无线网卡用来联网，万兆网卡连接服务器。



之前见网友使用二手服务器组建存储服务器的方案，但总感觉并不如一台nas用起来方便，因为 Windows Server 搭建起来比较复杂，而且管理方面也需要通过软件实现，另外就是功耗大，服务器的噪音也大，大部分都是机架的，对于小公司来讲不方便架设。而且小公司一般都没有专门的技术人员负责维护。问题比较多。
万兆nas的好处是适合小公司10人以内的剪辑后期使用，管理容易，组好的主机随便放在桌子下面就可以了，不需要机架。连接比较简单。不懂技术的人员都能操作。
安全性方面更高，不只是RAID的安全机制，还有系统和阵列的独立，系统快照，smb的回收站，真的是操作简单使用方便。
可能很多人使用外置磁盘阵列，但由于硬件阵列卡和RAID5的原因，其实在单盘超过4T的配置上，组建RAID5后有一块盘掉线，想要恢复完整的校验还是存在风险的，据说有50%的可能性是失败的。
而NAS的ZFS机制带有数据完整性校验和自我修复，成功的机率远远大于硬件RAID卡的RAID5。更多的知识就不在这里普及了。
系统截图




给大家说一下我的经验吧
1，系统盘（使用2个盘做系统，两个系统盘镜像，也就是RAID1，有一个系统盘坏了第二个自动顶替。整个过程不影响工作，不用重启）
2，最好是5盘起，RAIDZ或RAIDZ2，选择nas专用盘或是企业级硬盘，上面的8盘就是采用的企业级硬盘。
3，win用户可以选择二手的万兆网卡，马云家最便宜的才80多块钱。
4，mac用户推荐使用intel的网卡，稳定性和成熟性比较高，如果使用模块还需要考虑兼容性。
5，如果不会自己搭建最好找人做，系统使用自己摸索起来也需要点时间。以后出点问题你还有一个技术顾问，不然只能自己google了。
6，如果你是家里有矿的那种，我建议购买成品企业级方案。
7，黑群晖最好不要考虑，个人玩玩可以，如果你是公司用，万一被律师含了就麻烦。

有什么问题大家一起交流，有时间我会回来回复。

阿Q菜鸟

希望能分享一下组建NAS部分知识，分享一下，学习一下，多谢

成都影视制作

刚上了一套群晖的16盘位 NAS RackStation RS4017xs+  把公司的内部网络升级为万兆光纤

zteng

分享一下你用的光纤模块和双模光纤。
我现在是铜轴直连。以后距离远了肯定要换光纤。

DK黑苹果

zteng 发表于 2019-1-9 23:37
分享一下你用的光纤模块和双模光纤。
我现在是铜轴直连。以后距离远了肯定要换光纤。

我现在使用的intel的网卡和intel的模块

minylong01

我现在也找了台旧电脑装了freenas，暂时只开了ftp服务存素材用，后续等公司要是能升级万兆网络再考虑做共享剪辑，各位前辈现在共享是用iscsi还是共享文件夹啊？

tqtv_ls

freenas 必须用ECC的条子，不然数据有可能会出错

flashalang

挺好，可以直接剪片子了

DK黑苹果

flashalang 发表于 2019-2-2 10:01
挺好，可以直接剪片子了

必须的

DK黑苹果

tqtv_ls 发表于 2019-2-1 22:44
freenas 必须用ECC的条子，不然数据有可能会出错

是ECC呀

tqtv_ls

请问读缓存和写缓存用固态硬盘没？

DK黑苹果

tqtv_ls 发表于 2019-2-28 21:38
请问读缓存和写缓存用固态硬盘没？

根据配置决定

tqtv_ls

打算用闲置的惠普服务器加阵列柜模式，sas 4t企业盘24盘位，128g内存，不需要加固态硬盘了吧