使用双卡训练遇到的问题1：

Error: mkl-service + Intel(R) MKL: MKL_THREADING_LAYER=INTEL is incompatible with libgomp.so.1 library.
        Try to import numpy first or set the threading layer accordingly. Set MKL_SERVICE_FORCE_INTEL to force it.

解决方法：

export MKL_SERVICE_FORCE_INTEL=1

使用双卡训练遇到的问题2：

停止训练后GPU的现存无法释放

解决方法：强制关闭指定进程

kill -9 <PID>