之前我发了三篇关于FreeBSD虚拟机安装黑群晖的文章，没有阅读的同学可以看一下：

钱乎：如何拥有一台100T容量的NAS? Let's do it.​zhuanlan.zhihu.com

钱乎：100TB的NAS之后续填坑（虚拟硬件篇）​zhuanlan.zhihu.com

钱乎：虚拟机跑黑裙有哪些坑？我们来填平它！​zhuanlan.zhihu.com

今天我们来挑战一下，让虚拟机的黑群晖支持nvme加速和支持万兆网卡。

SSD性能加速这个东西，十几年前ZFS发明的时候，就已经预见到这个场景了。我一直是ZFS的粉丝。设计ZFS的人真是很伟大，为以后FS的发展指明了道路。后来的各种FS或多或少借鉴了ZFS。大家可以看一下2008年的博文。

http://www.brendangregg.com/blog/2008-07-22/zfs-l2arc.html​www.brendangregg.com

随着SSD的发展，NVMe的SSD速度快，延时低，用来加速机械硬盘，再合适不过了。

首先大家要知道，黑群晖，就是让群晖的DSM跑在自己的硬件上，让DSM觉得是自己支持的设备。所以要想NVMe加速，同样需要找支持NVMe加速的型号才行。而支持NVMe加速，并且被黑的就是群晖的DS918+了。

我在第一篇文章，提到很容易就打造了100T的NAS，就是跑了DS918+。DS3615xs/DS3617xs则不行。因为这个NAS本身不支持NVMe加速。所以黑群晖变不出来。

要想达到今天的目标，我们需要给黑群晖添加一个NVMe SSD和一个10G网卡。拜PCI直通，这两个我们都可以搞定。

本次的物理机是20升的NAS，具体打造文章可以看下面两篇文章

钱乎：22升的超级服务器有多大能量？(装机篇)​zhuanlan.zhihu.com

钱乎：22升的超级服务器有多大能量？(系统篇)​zhuanlan.zhihu.com

硬件上，我将4口网卡换成了Intel 900P 280GB SSD。对，就是下面这个高大上的东西。

所以，硬件上看，有下面的信息：

现在这两个设备还不能直通，我们将这两个设备从宿主系统脱离，并加载上PPT驱动之后就可以直通给虚拟机了。

我最喜欢FreeBSD的一点，就是干什么事情，几乎不需要你重启系统，上述的操作也是！如果你用ESXi，设置一个直通，好嘛，重启一下，如果你用Linux，同样也要重启多次。而FreeBSD，不需要！！！

root@vmhost01:/zones/vm/ds918 # devctl detach pci0:1:0:0
root@vmhost01:/zones/vm/ds918 # devctl set driver pci0:1:0:0 ppt
root@vmhost01:/zones/vm/ds918 # devctl detach pci0:7:0:0
root@vmhost01:/zones/vm/ds918 # devctl set driver pci0:7:0:0 ppt

执行完上面的命令之后，再看一下设备情况：

刚才两个设备已经加载上PPT驱动了。

接下来我们配置虚拟机使用这两个设备：

root@vmhost01:/zones/vm/ds918 # cat ds918.conf
loader="uefi"
cpu=4
memory=4096M
network0_type="e1000"
network0_switch="lan"
disk0_type="ahci-hd"
disk0_name="synoboot.img"
disk1_type="ahci-hd"
disk1_name="disk0.img"
uuid="5a9a00ef-6131-11ea-a125-a0369f871994"
network0_mac="58:9c:fc:04:59:1d"
passthru0="1/0/0"
passthru1="7/0/0"

最后两行就是分配了 pci0:1:0:0和pci0:7:0:0这两个PCI直通设备给虚拟机。

然后我们重启虚拟机。通过控制台的lspci命令可以看出来两个设备都被正常识别并加载了驱动。

我们来看一下群晖控制台。10G网卡已经正常识别并驱动

现在有两个网卡，第一个是虚拟的e1000网卡，第二个是intel 10G网卡。

目标已经完成50%, YEAH!!!

接下来看nvme cache情况。

提示没有有效的SSD cache，另外也没有办法新建。

通过xpenology论坛可以看到，群晖还是用了检测机制的。必须是指定的PCI BUS号才行！高人已经有补丁去掉这个限制，我们试试看！

NVMe cache support​xpenology.com

将这个post的脚本保存到NAS本地执行即可！

我们再重启NAS看一下：

这次可以添加Cache了。至于效果如何，还需时间来验证！

彩蛋：

聪明的可能会说，你之前的文章，提到FreeBSD的bhyve也可以虚拟NVMe磁盘，比如Win7就是安装在虚拟NVMe磁盘上的，假如给黑裙虚拟一个NVMe磁盘，而不是直通，会怎样?

当前bhyve的虚拟NVMe磁盘对一些SMART信息不支持，导致黑裙认为硬盘快坏了，无法初始化当cache。不过这怎么能难得到我这种大牛，看一下NVMe的白皮书，有一个地方是相关的：

这两个地方bhyve没正确设置，都是0，导致黑裙认为坏了。我们将第一个设置成100，后面的阈值设置成10，顺便将温度设置成38度。

这下OK了吧？既然是虚拟的，不怕多，接下来我们虚拟两个，打开读写缓存！

如果你喜欢今后能多看到类似的文章，请看完之后点赞收藏分享，这样子我就可以有动力多写一些啦~~~