这几天折腾 PVE AIO 有点上头了

2025 年 4 月 29 日
 0x663
从周六开始一直到昨天晚上,基本每天都折腾到凌晨
主板 MSI B660M 迫击炮
CPU i5 12500
sata ssd *2
sata hhd *2
m2 nvme *2

前两天是折腾核显,主板开启了 VT-D 和 Intel SRIOV
通过 i915-sriov-dkms 虚拟出来 7 个
完成了以后尝试直通硬盘

因为主板有两个 sata 控制器,我想着是两块 sata ssd 组 zfs(raid1)做系统盘,然后另一个 sata 控制器直通给 Truenas 虚拟机。然后我就直接去根据 iommu 的编号去找到这俩 sata 控制器,尝试把 b660 芯片组的 sata 控制器直通给 Truenas 虚拟机,然后就直接死机了,第二次安装发现是因为 iommu 分组没拆开

然后就一通检索去看相关问题,后来发现一个强制拆分 iommu 分组,但是要改源码并且评论区说这是掩耳盗铃遂弃,然后就去折腾 BIOS 看到有一个“集成外围设备”的选项,关闭这个之后可以正常拆分 iommu 了。

我原本以为会很顺利美滋滋的去直通 sata 控制器并开启虚拟机,又有问题了
这里我的系统盘最初插到的是 sata7 和 sata8 ,因为这两个口离其他的比较远所以我认为是另一个单独的 sata 控制器控制的。这就是不认真阅读文档的代价吧。

开主机重新插 sata 接口调整好以后再去尝试 SRIOV ,又不行了。
9600 次点击
所在节点    NAS
54 条回复
0x663
2025 年 4 月 30 日
@spike1123 银欣 CS382
vczyh
2025 年 4 月 30 日
@0x663 这个机箱做工太烂了
laminux29
2025 年 4 月 30 日
@0x663 K 佬的群,你加他微信,让他拉你进 PVE 群,KernerX
esile
2025 年 4 月 30 日
搞直通和 aio 推荐用 z 系列或者 x 系列的平台,之前我用 b 系列搞了好几次都每成功,用 z 和 x 的轻轻松松直通显卡和硬盘。
ExplodingDragon
2025 年 4 月 30 日
@X_Del #33 @xbin #38

nfs / smb / webdav 是由 lxc 提供 , 这样可以利用到页面的快照功能 (虽然 cli 也可以)

只不过我我只用到了 minio ,其他的用不上, 代码备份靠 gitea , 照片视频备份用 immich
findex
2025 年 4 月 30 日
应该是第一次玩 PVE 。

折腾完之后感觉应该不会 7/24 开机,最后还是会一个品牌机做 NAS 或者纯服务器。然后留着这个 PVE 继续折腾。

PVE 还有不宕机集群玩法,节点崩溃其他节点无缝替换。然后 PVE 还有备份服务器、还有 API 编程玩法,等等。
bytesfold
2025 年 4 月 30 日
前几天又把树莓派 5 三节点的 PVE 集群搭起来,但是如果用 zfs 的话内存不够用;还是想要塔式的
anonymity
2025 年 5 月 1 日
12500 核显拆 vgpu 之后给 jellyfin 转码性能如何?
另外它支持黑群晖 SA6400 吗
msg7086
2025 年 5 月 2 日
其实我不懂为什么一定要直连控制器而不是直连块设备。
sky96111
2025 年 5 月 3 日
@msg7086 直连控制器可以让 nas 的虚拟机获取到所有磁盘信息,温度、转速、健康度等。直通块设备就只能看到一个虚拟的 qemu hdd disk
guiys
2025 年 5 月 3 日
18 楼的办法就是我现在用的,从来不搞啥直通。甚至我在安装 pve 时候硬盘只给 8g(再小安装不给过),进系统之后就把这块硬盘里剩下的空间 fdisk 几个 sda4,5,6 ,然后再 qm set 给虚拟机。这样做好处就是虚拟机空间不会越用越小,也不用重新删除添加存储释放空间。当然也是要挂全挂,反正就存点热门电视剧
0x663
2025 年 5 月 6 日
@gunner168 备份也做了
0x663
2025 年 5 月 6 日
@findex 确实首次玩 PVE
0x663
2025 年 5 月 6 日
@anonymity 没拆,直接用 pve 的虚拟核显了。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.ih06.com/t/1128824

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX