想搭建一台 homelab server 跑 ESXi，有一些疑问

[yongw520]

最近内心长草 all in one ，想把路由， nas ，各种 server 全部虚拟化。因为本人硬件小白，又没玩过 ESXi ，有两个问题，不知道各位大神能否解答, 先谢谢各位了:

一, 我看中了 ASRock Rack E3C236D4M-4L 这款板子，板载 4*Lan 和 8*sata3, 这样我可否省掉网卡和 raid 卡，然后用板载接口实现安装 Zfs 和 OpenWrt ？(8sata 目前足够我使用， 4 个 lan 正好让我接入双 Isp+交换机和 AP)

二, 因为家中 Android 盒子 xbox 等设备众多，所以不准备做 HTPC ，就不想上独立显卡了。但是还是希望能跑跑 windows server 什么的，这样我可以正常进入图形化界面么？还是需要上带核显的 cpu(比如 E3 1235l V5)?

[aru]

这块主板板载独立显卡的，虽然这个显卡比核显性能还差太多。不过用来装系统，查看日志什么还是足够了
1 和 2 都没问题

[xenme]

@yongw520 目前自用垃圾 c6100 ， 200 块的垃圾 CPU ，无核显，无独显。跑 windows ， centos ， solaris ， ubuntu 图形界面都没问题，直接 console 放放一般视频都没啥问题，模拟显卡足以

openwrt 专门去广告用。 nas 有单独的没虚拟，不过无非就是磁盘和网络 IO 而已， CPU 家用几乎没啥压力。
内存够大就行。

你这配置比我好上天了。

[mhycy]

@yongw520
CPU 不带核显即可
服务器主板自带的显卡也就仅仅够让你用来看个日志，那玩意大多是 ATI 的 32M 闪存走 PCI 总线的亮机卡
另外 楼上有人提到了小马的 V5 ，其实还有一个选择是带外壳的 3215U ，性能不咋地，但是做软路由很合适。
（小马的 CPU 是 ES ，务必注意）

我说 ESXI 不适合折腾也和软路由有关，因为折腾的过程中必然会频繁的重装系统 /修改配置。
如果是 ESXI+显卡直通的结构，配置会增加不少复杂度，略显麻烦与复杂
倒不如设备分区那么在折腾的时候不会导致全屋网络中断

我现在比较倾向于一个高可用的结构 EdgeRouter X + 3215U （需要地址我去淘宝找 699 标价）组合成双路由
（路由架构： ERX 提供 NAT ， 3215u 配置 ESXI ，上层虚拟机使用 VyOS 做软路由，两个路由使用 VRRP 保持可用）
（ ERX 提供多线 NAT ，毕竟支持硬件 offload ， VyOS 提供基于 IP 的策略路由与负载均衡）
这时候，如果需要额外的虚拟化可以在 PC 平台上完成(毕竟新平台都有 VT-D ，而且内存便宜不少)
NAS 需求看情况直接使用阵列卡 /独立组建存储柜，避开性能瓶颈并提高可靠性（耗电应该差不多）

另：如果能接受老平台，淘宝有个 1150 平台的万兆神板可供考虑

[CupTools]

1 x http://www.u-nas.com/xcart/product.php?productid=17617

1 x http://www.superbiiz.com/detail.php?name=MB-X10D6C

2 x https://www.superbiiz.com/detail.php?name=D42116G4S

1 x https://www.newegg.com/Product/Product.aspx?Item=9SIA67S46V3429

1 x https://www.newegg.com/Product/Product.aspx?Item=N82E16817338059

Then 8 x HDD of your choice.

This configuration should last for a least 4 years. If you want to future-proof it even further, get a Xeon-D 154x board and 64 GB of RAM.

[CupTools]

s/a least/at least/g

[gamexg]

1 、没问题，我这里是 u 盘安装 esxi ， esxi 上面运行 freenas ，磁盘控制器直通 freenas 。然后双网卡做的汇聚，配合 vlan 交换机通过 vlan 划分的网络。

2 、如果 windows 是远程访问无所谓，我这里虚拟显卡播放视频没问题。如果需要 esxi 接显示器，那么建议上个独立显卡做直通，集成显卡可能不能直通。

[prondtoo]

要想阵列必须上阵列卡。现在所有板载的半软阵列卡完全不能认。显卡直通只能用 A 卡， N 卡除非你硬改电路成专业卡，否则不认。
除非买 UNraid ，不装 esxi 可解决以上问题，不贵。

[mandymak]

@yongw520 esxi 不支持 ZFS 。

[mhycy]

@mandymak
估计他想折腾的是 ESXI+磁盘直通跑 ZFS

[gamexg]

@gamexg 另外 esxi6.5 不支持 u 盘放虚拟机了，需要用 6.0 。
除了 freenas 其他的全部通过 nfs 放到 freenas 虚拟机。

[Showfom]

@yongw520 不需要 rdp 直接远程管理

[yongw520]

@aru 🙏那就妥妥省下显卡钱了

[yongw520]

@xenme 那就放心把这部分预算省下了 谢谢回复～

[yongw520]

@xenme 我也在考虑是否配置过剩了，考虑下减减配

[yongw520]

@mhycy 非常感谢仔细的回复！这么多选择我需要消化一下。。

[yongw520]

@gamexg 那网络问题就放心了，那如果我不用 u 盘，上 ssd 放系统没问题吧应该？

[yongw520]

@prondtoo @mhycy @mandymak
感谢各位回复。是的，我是想 ESXi 直通跑 ZFS 。板载 sata 无法实现直通吗？那就必须上阵列卡了。。预算啊

[yongw520]

@CupTools 感谢回复，慢慢筛选这几个板子

[gamexg]

@yongw520 我就没上阵列卡，但是缺陷是只能用 esxi6.0 的版本， freenas 安装在 u 盘，把板载 sata 控制器直通给了 freenas 。
ssd 需要 sata 控制器，如果 sata 控制器直通给了 freenas ， esxi 就无法访问 ssd 了，直接挂。解决办法就是上阵列卡再提供一个 sata 控制器，两个控制器一个给 esxi 一个给 freenas 。

[kennylam777]

家中有 ESXi 的握個爪。

ESXi 內打算作 NAS 的話, 我是比較建議 HBA 卡的, 因為可以用 VT-d 丟進 VM Guest 內, 讓 VM Guest 可以直接看到每個 HDD 的狀態, 也不用每次換 HDD 就非得要改 RAW Disk Mapping, 我想你的 ZFS 不是跑在 VMFS 的 Virtual Disk image 吧?

我是用 OpenMediaVault + mdadm (軟 RAID) + HBA 卡的配罝。

VM 軟路由我直接用 pfSense 的, VMXNet3 在 FreeBSD 還好, 就是沒有 VirtIO 在 Linux 快, 但 4Gbps 吞吐量夠用了。而且 ESXi 帶 VLAN Trunk support, VM 做的 VLAN 直接穿出實體網絡。

另外還有一堆 Linux VM 及一個 Windows Server, 但沒有把顯示卡穿透進去, 我的板子也只有 BMC VGA 。