ESXi 8直通NVIDIA显卡至Linux系统-HQY 一个和谐有爱的空间

23

2024
07
17:29:59

ESXi 8直通NVIDIA显卡至Linux系统

VMWare ESXi（也称为VMware vSphere Hypervisor、以下简称ESXi）是一个常用的服务器虚拟化平台。在ESXi中使用显卡有两种方式，一种方法是通过显卡虚拟化（例如NVIDIA vGPU）在ESXi中管理并分配显卡资源，另一种方法是将显卡直通到一台虚拟机中使用。前者可以让多个虚拟机共享显卡、需要购买额外的许可证且仅限专业卡，后者只能一个虚拟机独占显卡、无需额外付费、游戏卡也可以用。后者更加贴近普通用户的场景，本文将介绍后者的方法。

版本参考

不同版本的操作方法差异较大。作为参考，笔者使用的软硬件版本如下：

ESXi：8.0 Update 1
显卡：NVIDIA GeForce RTX 4080
Ubuntu Server：22.04.2
NVIDIA驱动：530.30.02

配置PCI设备直通

进入ESXi Host Client中
在左侧菜单选择主机-管理
右侧选择硬件-PCI设备
在右上角搜索中输入NVIDIA
在表格中选中所有名字中带有NVIDIA的设备
点击切换直通按钮。

完成后，表格中的直通将变为活动。

配置虚拟机

关闭虚拟机后，进入虚拟机设置，进行如下操作：

进入虚拟硬件选项卡
内存-预留中选择预留所有客户机内存 (全部锁定)
点击添加其他设备按钮，选择PCI设备
在新PCI设备中选择需要使用的显卡
如果有多个PCI设备请重复第3、4步
进入虚拟机选项选项卡
关闭引导选项-启动UEFI安全引导中的是否为此虚拟机启用 UEFI 安全引导

完成后，可以开机并进入虚拟机。

禁用nouveau显卡驱动

nouveau是第三方开发的开源显卡驱动，安装NVIDIA官方的显卡驱动之前，需要先禁用它。执行命令：

sudo nano /etc/modprobe.d/blacklist.conf

在文件末尾另起一行，写入：

blacklist nouveau
options nouveau modeset=0

执行命令：

sudo update-initramfs -u

重启后，可以通过以下命令验证：

lsmod | grep nouveau

如果没有输出就是禁用成功。

安装NVIDIA显卡驱动

安装显卡驱动的方法很多，比如ubuntu-drivers autoinstall、apt install等。无论使用哪种方法，请注意需要安装开源Linux内核（Open Linux Kernel）版本。

笔者使用的是run文件安装法，最新版的下载链接可以在官方网站找到，以530.30.02为例。执行命令：

# 下载run文件
wget http://download.nvidia.com/XFree86/Linux-x86_64/530.30.02/NVIDIA-Linux-x86_64-530.30.02.run
# 删除原有驱动
# 视安装方法不同，卸载方法也不同，以下3个命令可以都试试
sudo nvidia-uninstall
sudo apt remove --purge '^nvidia-.*'
sudo sh ./NVIDIA-Linux-x86_64-530.30.02.run --uninstall
# 安装过程的必要依赖
sudo apt install gcc make
# 运行run文件
# 参数m是kernel-module-build-directory的缩写，用于选择内核
sudo sh ./NVIDIA-Linux-x86_64-530.30.02.run -m=kernel-open

安装完成后，还需要进行一个额外步骤，执行命令：

sudo nano /etc/modprobe.d/nvidia.conf

写入以下内容：

options nvidia NVreg_OpenRmEnableUnsupportedGpus=1

重启后，执行以下命令验证驱动：

nvidia-smi

这个命令会输出显卡信息，笔者显示的内容为：

+---------------------------------------------------------------------------------------+
| NVIDIA-SMI 530.30.02              Driver Version: 530.30.02    CUDA Version: 12.1     |
|-----------------------------------------+----------------------+----------------------+
| GPU  Name                  Persistence-M| Bus-Id        Disp.A | Volatile Uncorr. ECC |
| Fan  Temp  Perf            Pwr:Usage/Cap|         Memory-Usage | GPU-Util  Compute M. |
|                                         |                      |               MIG M. |
|=========================================+======================+======================|
|   0  NVIDIA GeForce RTX 4080         Off| 00000000:03:00.0 Off |                  N/A |
| 33%   37C    P0               34W / 320W|      0MiB / 16376MiB |      0%      Default |
|                                         |                      |                  N/A |
+-----------------------------------------+----------------------+----------------------+

+---------------------------------------------------------------------------------------+
| Processes:                                                                            |
|  GPU   GI   CI        PID   Type   Process name                            GPU Memory |
|        ID   ID                                                             Usage      |
|=======================================================================================|
|  No running processes found                                                           |
+---------------------------------------------------------------------------------------+