最近在跑实验,supervisor 建议我关闭超线程。找了半天 BIOS 没找到 HyperThreading 选项,最后发现 AMD 的超线程不叫 HT, 而是 SMT[笑哭]遗憾的是SMT的关闭与 performance tuning 的关闭是绑定的,所以 NUMA per socket 就得手动设置,最大一个 CPU 插槽 4 个 NUMA,对应两个 ZEN3 CCD. 毕竟 EPYC 7003 内部就是四组内存控制器,这很合理。 有意思的来了。 我看到核心连线的拓扑图,发现设置了 NPS 之后,CPU 与 NVMe 的关系变得更具体了,说人话就是 NVMe 与 CPU 的亲和性更高了。于是我顺手给这个 ZFS 跑了个分。 服务器:h3c r4950g5 with dual epyc 7763 zfs 布局: 两个 vdev, 第一个是四盘 intel 750 1.2TB MLC raid-z1; 另一个是单盘 WD黑盘 SN750 1TB zfs 参数:lz4 压缩,1MB recordsize,开启 direct-io, 其余默认 (由此也可以看出,raidz vdev 的扩容并非是要添加一组一模一样的硬盘。只要是个盘就能以一个单独的 vdev 形式添加到 zfs 中) 结论:这个奇怪的 zfs 阵列,搭配 openzfs 2.3.2, NAND:
NAND 直读速度超过 10GB/s,
NAND 写入速度超过 5GB/s

读取速度

numa 数量

关闭超线程 SMT