python 查看程序的GPU显存占用

引言

主要针对显卡:nvidia
初衷:想要看某个python程序的GPU显存占用量

一、nvidia-smi

在linux下使用nvidia-smi 可以直接显示GPU使用情况1:
但是在windows下有的时候显示N/A (如下图所示):
在这里插入图片描述

未解之谜2:Windows下NVIDIA-SMI中为什么看不到GPU Memory

二、windows下的任务管理器

任务管理器也可以查看程序GPU占用信息, 点击详细信息, 看专用GPU
在这里插入图片描述

小知识3:专用GPU内存 vs 共享GPU内存

三、pynvml库

比较全4:python 输出 GPU内存 最大使用率
简洁仅显存5:python查看显卡gpu信息

只有输出总GPU的显存占用,并没有找到获取单个程序GPU显存占用的函数
计算单个程序占用会有误差(桌面等程序也会占用GPU,占用量是动态变化的)

四、显存不够用又没钱怎么办

减小batch、减小网络、多用pooling降低数据分辨率 – 可能会降低性能

小知识6:Pytorch节省显存小技巧

希望可以做一个不费内存速度快精度还高的实用模型 在这里插入图片描述


  1. Linux查看GPU信息和使用情况 ↩︎

  2. Windows下NVIDIA-SMI中为什么看不到GPU Memory ↩︎

  3. 专用GPU内存 vs 共享GPU内存 ↩︎

  4. python 输出 GPU内存 最大使用率 ↩︎

  5. python查看显卡gpu信息 ↩︎

  6. Pytorch节省显存小技巧 ↩︎

文章出处登录后可见!

已经登录?立即刷新

共计人评分,平均

到目前为止还没有投票!成为第一位评论此文章。

(0)
青葱年少的头像青葱年少普通用户
上一篇 2023年2月26日 上午9:07
下一篇 2023年2月26日

相关推荐