pytorch训练的时候 shm共享内存不足，导致训练停止

1.查看shm情况

df -h /dev/shm

在这里插入图片描述
内存已经满了，因为之前训练多次训练意外停止到shm中的缓存不能及时被清理
2、手动清理shm

依然没被释放

3、查看关联的进程，一个一个kill

lsof |grep deleted

kill -9 46619 44618 44617 。。。。。

在这里插入图片描述

4、搞定
在这里插入图片描述

道可道，非常道；名可名，非常名。无名，天地之始，有名，万物之母。故常无欲，以观其妙，常有欲，以观其徼。此两者，同出而异名，同谓之玄，玄之又玄，众妙之门。