Linux下NVIDIA GPU驱动持久化配置教程
在Linux系统中，NVIDIA GPU驱动持久化（Persistence Mode）是一种机制，用于保持GPU的初始化状态，即使没有活动的客户端连接到GPU。这可以显著减少每次启动CUDA程序时的驱动加载延迟，并避免因驱动频繁加载和卸载导致的问题。
一、驱动持久化模式（Legacy Persistence Mode）
1. 临时开启持久化模式
通过nvidia-smi命令可以临时开启GPU驱动持久化模式：
sudo nvidia-smi -pm 1
执行后，可以通过nvidia-smi命令查看Persistence-M属性是否变为On，以确认配置生效。
2. 设置为系统启动时自动开启
为了在系统启动时自动启用GPU驱动持久化模式，可以将相关命令添加到系统的启动脚本中。例如：
- 编辑
/etc/rc.local文件：sudo vim /etc/rc.local - 在文件中添加以下命令：
sudo nvidia-smi -pm 1 - 保存文件并确保
/etc/rc.local脚本具有可执行权限：sudo chmod +x /etc/rc.local - 重启系统以验证配置是否生效。
二、使用NVIDIA持久化守护进程（nvidia-persistenced）
NVIDIA建议使用nvidia-persistenced守护进程来替代传统的持久化模式，因为这种方式更加优雅且健壮。
1. 安装守护进程
nvidia-persistenced工具包含在NVIDIA Linux GPU驱动中，安装驱动后即可使用。
2. 手动启动守护进程
以超级用户权限运行以下命令启动守护进程：
sudo nvidia-persistenced --user <username>
其中
3. 设置为系统启动时自动运行
NVIDIA提供了示例启动脚本，支持SystemV、systemd和Upstart等常见的初始化系统。这些脚本位于：
/usr/share/doc/NVIDIA_GLX-1.0/sample/nvidia-persistenced-init.tar.bz2
可以通过解压并安装到系统的初始化目录中来实现自动启动。
三、验证持久化模式是否生效
无论使用哪种方式，都可以通过以下命令验证持久化模式是否生效：
nvidia-smi -q
在输出中，Persistence Mode属性应显示为Enabled。
四、常见问题及解决方案
1. GPU指令执行缓慢
如果GPU驱动持久化模式未开启，可能会导致GPU指令执行缓慢。开启持久化模式后，可以显著减少驱动加载延迟。
2. GPU利用率异常显示100%
在某些情况下，未开启持久化模式可能导致GPU利用率异常显示为100%。开启持久化模式后，该问题通常会得到解决。
3. 守护进程无法启动
如果nvidia-persistenced无法启动，可以使用--verbose选项运行守护进程，查看详细的日志信息：
sudo nvidia-persistenced --verbose
日志信息会输出到syslog中，具体位置取决于系统配置。
五、总结
通过以上方法，您可以在Linux系统中启用NVIDIA GPU驱动持久化模式，以优化GPU的使用效率和稳定性。NVIDIA建议优先使用nvidia-persistenced守护进程，因为它更加健壮且易于维护。
