容器中明明没有程序在跑，可gpu的显存状态是被占用这么多。
解决办法：
fuser -v /dev/nvidia*查看哪些进程在占用。
然后进kill命令，杀死对应的进程就行了。
其中如果 fuser命令不可用，则
apt-get install psmisc如果安装不了，则：
apt-get update然后再安装就行。
相关文章
RuntimeError: CUDA out of memory. Tried to allocate 14.00 MiB linux跑深度学习爆显存问题
出现这条信息就说明当前环境中可分配给跑训练的显存不够了，有两种可能原因： 1、显卡的显存确实太小，训练网络的要求高于这张显卡。解决办法只有换大显存显卡。 2、系统的进程太多，有可能跑之前调试的代码进程没有结束，…
pytorch 模型训练时多卡负载不均衡（GPU的0卡显存过高）解决办法（简单有效）
本文主要解决pytorch在进行模型训练时出现GPU的0卡占用显存比其他卡要多的问题。 如下图所示：本机GPU卡为TITAN RTX，显存24220M，batch_size 9，用了三张卡。第0卡显存占用24207M，这时仅仅是刚开始运行，数据…
nvidia-smi参数说明及显存高gpu低的原因
一、nvidia-smi Driver Version和CUDA Version不是一回事 CUDA Version实际是环境变量中Path配置的，如果一台机器同时装了多个CUDA，那么这里的CUDA Version显示的是Path中靠前的CUDA版本（和nvcc -V的显示是一样的）下方的GPU使用信…
Pytorch模型测试时显存一直上升导致爆显存
问题描述
首先说明: 由于我的测试集很大, 因此需要对测试集进行分批次推理.
在写代码的时候发现进行训练的时候大概显存只占用了2GB左右, 而且训练过程中显存占用量也基本上是不变的. 而在测试的时候, 发现显存在每个batch数据推理后逐渐增加, 直至最后导致爆显存, 程序fail.…
dataloader合理设置num_works和batchsize 避免爆内存
dataloader合理设置num_works和batchsize，避免爆内存 1.关乎内存2.关乎显存3.总结 个人总结，禁止以任何形式的转载！！
1.关乎内存
1)dataloader会开启num_works个进程，如图所示：（这里设置的是6…
理清ROS通信的一些细节
目标：掌握ros的python编程 基本教程：https://www.bilibili.com/video/BV1sU4y1z7mw/?spm_id_from333.788&vd_source32148098d54c83926572ec0bab6a3b1d
terminator
快捷键需要自己去重新启用 ctrlshifte 横向分屏 ctrlshifto 纵向分屏 ctrlshiftw …
TensorFlow 显存占用率高 GPU利用率低
文章目录 nvidia-smi指令动态刷新GPU信息显存占用高，但是CPU使用率低回头再看 nvidia-smi指令
命令位置： 所以Path中添加环境变量： C:\Program Files\NVIDIA Corporation\NVSMI 试验一哈： 要注意的点：
Driver Vers…