tencent cloud

文档GPU 云服务器故障处理GPU 使用率显示 100%

GPU 使用率显示 100%

PDF
聚焦模式
字号
最后更新时间: 2024-01-11 17:11:13

现象描述

使用 GPU 计算型实例的过程中,在系统内部使用 nvidia-smi 查看 GPU 状态时,可能遇到没有运行任何使用 GPU 的应用,但 GPU 使用率显示100%的情况。如下图所示:




可能原因

实例加载 NVIDIA 驱动时,ECC Memory Scrubbing 机制造成。

解决思路

在实例系统内执行 nvidia-smi -pm 1 命令,让 GPU Driver 进入 Persistence 模式。

处理步骤

1. 登录 GPU 计算型实例,执行以下命令:
nvidia-smi -pm 1



2. 执行以下命令,检查 GPU 使用率:
nvidia-smi
GPU 使用率正常,如下图所示:



帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈