ubuntu释放显卡内存

news/2024/10/17 22:25:54/

在服务器上跑深度学习代码时,构造了一个(256,100,100)的张量,但显示

Resource exhausted: OOM when allocating tensor with shape[600] and type float on /job:localhost/replica:0/task:0/device:GPU:0 by allocator GPU_0_bfc

一开始以为是因为batch_size设置为128太大,但减小到32后还是不行,用nvidia-smi -l 实时显示显卡信息:

明明没有程序在跑,但memory-usage快满了,用fuser -v /dev/nvidia*查看进程,用 kill -9 PID 释放进程,最后memory usage终于为0了,在原来batch size为128的情况下也是可以跑的

nvidia-smi表格中显示的信息:

 


http://www.ppmy.cn/news/714189.html

相关文章

C# 获取显卡信息和内存信息

获取内存信息 public static class PerformanceInfo{[DllImport("psapi.dll", SetLastError true)][return: MarshalAs(UnmanagedType.Bool)]public static extern bool GetPerformanceInfo([Out] out PerformanceInformation PerformanceInformation, [In] int Si…

linux服务器显卡的占用量,命令查看Linux服务器内存、CPU、显卡使用情况

查看内存使用情况 使用命令:free -m 大致结果类似下图: 参数解释: Mem行(单位均为M): * total:内存总数 * used:已使用内存数 * free:空闲内存数 * shared:当前废弃不用 * buffers&a…

关于深度学习神经网络模型训练,参数过大,导致显卡内存溢出问题的总结

实验是利用CIFAR10模型,计算将图片分成10个分类的误差。一开始采用cpu模型来训练,迭代一个epoch需要50分钟,所以换成GPU模型,GPU有4G内存,结果刚加载模型显卡内存就溢出。 报错如下: 先用keras来计算网络的大小,参数的个数。 (50000, 32, 32, 3) (50000,) (10000, 32, …

显卡 内存分配 linux,【原创】Linux环境下的图形系统和AMD R600显卡编程(4)——AMD显卡显存管理机制...

显卡使用的内存分为两部分,一部分是显卡自带的显存称为VRAM内存,另外一部分是系统主存称为GTT内存(graphics translation table和后面的GART含义相同,都是指显卡的页表,GTT 内存可以就理解为需要建立GPU页表的显存)。在嵌入式系统或者集成显卡上,显卡通常是不自带显存的,…

win10弹出计算机的内存不足,win10提示计算机显卡内存不足情况的解决办法介绍...

近日,有网友反映,windows10系统在内存充足的情况下,出现提示计算机的内存不足的对话框现象,那么,提示win10计算机内存不足是什么原因?如何解决?针对此问题,本文就为大家进行解答。有…

计算机运行内存和显卡内存不足,电脑内存不足的解决办法 win10提示计算机显卡内存不足情况的解决办法介绍 我这个...

延伸:win10提示计算机显卡内存不足情况的解决办法介绍 我这个配置玩坦克世界提示内存 描述:近日,有网友反映,windows10系统在内存充足的情况下,出现提示计算机的内存不足的对话框现象,那么,提示win10计算机内存不足是什么原因?如何解决?针对此问题,本文就为大家进行解…

显卡内存一直被占用解决方式

lsof /dev/nvidia* kill相应pid http://stackoverflow.com/questions/4354257/stop-all-cuda-processes-in-linux-without-restarting-the-computer

显卡(N卡)内存被占用如何处理?

输入Nvidia-smi 比如这里面PID:20779占了很大的内存,但程序又没有被停掉,我允许其他程序的时候,就会爆内存(out of memory)。 然后 kill - 9 PID 就可以了,很好用。 参考资料: NVIDIA-SMI详解…