使用python的plot绘制loss、acc曲线,并存储成图片

news/2024/12/1 23:02:51/

使用 python的plot 绘制网络训练过程中的的 loss 曲线以及准确率变化曲线,这里的主要思想就时先把想要的损失值以及准确率值保存下来,保存到 .txt 文件中,待网络训练结束,我们再拿这存储的数据绘制各种曲线。

其大致步骤为:数据读取与存储 - > loss曲线绘制 - > 准确率曲线绘制

一、数据读取与存储部分

我们首先要得到训练时的数据,以损失值为例,网络每迭代一次都会产生相应的 loss,那么我们就把每一次的损失值都存储下来,存储到列表,保存到 .txt 文件中。

1.3817585706710815, 
1.8422836065292358, 
1.1619832515716553, 
0.5217241644859314, 
0.5221078991889954, 
1.3544578552246094, 
1.3334463834762573, 
1.3866571187973022, 
0.7603049278259277

上图为部分损失值,根据迭代次数而异,要是迭代了1万次,这里就会有1万个损失值。
而准确率值是每一个 epoch 产生一个值,要是训练100个epoch,就有100个准确率值。

这里的损失值是怎么保存到文件中的呢?首先,找到网络训练代码,就是项目中的 main.py,或者 train.py ,在文件里先找到训练部分,里面经常会有这样一行代码:

for epoch in range(resume_epoch, num_epochs):   # 就是这一行####...loss = criterion(outputs, labels.long())              # 损失样例...epoch_acc = running_corrects.double() / trainval_sizes[phase]    # 准确率样例...###

从这一行开始就是训练部分了,往下会找到类似的这两句代码,就是损失值和准确率值了。

这时候将以下代码加入源代码就可以了:

train_loss = []
train_acc = []
for epoch in range(resume_epoch, num_epochs):          # 就是这一行###...loss = criterion(outputs, labels.long())           # 损失样例train_loss.append(loss.item())                     # 损失加入到列表中...epoch_acc = running_corrects.double() / trainval_sizes[phase]    # 准确率样例train_acc.append(epoch_acc.item())                 # 准确率加入到列表中... 
with open("./train_loss.txt", 'w') as train_los:train_los.write(str(train_loss))with open("./train_acc.txt", 'w') as train_ac:train_ac.write(str(train_acc))

这样就算完成了损失值和准确率值的数据存储了!

二、绘制 loss 曲线

主要需要 numpy 库和 matplotlib 库。

pip install numpy malplotlib

首先,将 .txt 文件中的存储的数据读取进来,以下是读取函数:

import numpy as np# 读取存储为txt文件的数据
def data_read(dir_path):with open(dir_path, "r") as f:raw_data = f.read()data = raw_data[1:-1].split(", ")   # [-1:1]是为了去除文件中的前后中括号"[]"return np.asfarray(data, float)

然后,就是绘制 loss 曲线部分:

if __name__ == "__main__":train_loss_path = r"/train_loss.txt"   # 存储文件路径y_train_loss = data_read(train_loss_path)        # loss值,即y轴x_train_loss = range(len(y_train_loss))			 # loss的数量,即x轴plt.figure()# 去除顶部和右边框框ax = plt.axes()ax.spines['top'].set_visible(False)ax.spines['right'].set_visible(False)plt.xlabel('iters')    # x轴标签plt.ylabel('loss')     # y轴标签# 以x_train_loss为横坐标,y_train_loss为纵坐标,曲线宽度为1,实线,增加标签,训练损失,# 默认颜色,如果想更改颜色,可以增加参数color='red',这是红色。plt.plot(x_train_loss, y_train_loss, linewidth=1, linestyle="solid", label="train loss")plt.legend()plt.title('Loss curve')plt.show()pit.savefig("loss.png")

这样就算把损失图像画出来了!如下:
在这里插入图片描述

三、绘制准确率曲线
有了上面的基础,这就简单很多了。
只是有一点要记住,上面的x轴是迭代次数,这里的是训练轮次 epoch。

if __name__ == "__main__":train_acc_path = r"/train_acc.txt"   # 存储文件路径y_train_acc = data_read(train_acc_path)       # 训练准确率值,即y轴x_train_acc = range(len(y_train_acc))			 # 训练阶段准确率的数量,即x轴plt.figure()# 去除顶部和右边框框ax = plt.axes()ax.spines['top'].set_visible(False)ax.spines['right'].set_visible(False)plt.xlabel('epochs')    # x轴标签plt.ylabel('accuracy')     # y轴标签# 以x_train_acc为横坐标,y_train_acc为纵坐标,曲线宽度为1,实线,增加标签,训练损失,# 增加参数color='red',这是红色。plt.plot(x_train_acc, y_train_acc, color='red',linewidth=1, linestyle="solid", label="train acc")plt.legend()plt.title('Accuracy curve')plt.show()pit.savefig("acc.png")

这样就把准确率变化曲线画出来了!如下:
在这里插入图片描述

以下是完整代码,以绘制准确率曲线为例,并且将x轴换成了iters,和损失曲线保持一致,供参考:

import numpy as np
import matplotlib.pyplot as plt# 读取存储为txt文件的数据
def data_read(dir_path):with open(dir_path, "r") as f:raw_data = f.read()data = raw_data[1:-1].split(", ")return np.asfarray(data, float)# 不同长度数据,统一为一个标准,倍乘x轴
def multiple_equal(x, y):x_len = len(x)y_len = len(y)times = x_len/y_leny_times = [i * times for i in y]return y_timesif __name__ == "__main__":train_loss_path = r"/train_loss.txt"train_acc_path = r"/train_acc.txt"y_train_loss = data_read(train_loss_path)y_train_acc = data_read(train_acc_path)x_train_loss = range(len(y_train_loss))x_train_acc = multiple_equal(x_train_loss, range(len(y_train_acc)))plt.figure()# 去除顶部和右边框框ax = plt.axes()ax.spines['top'].set_visible(False)ax.spines['right'].set_visible(False)plt.xlabel('iters')plt.ylabel('accuracy')# plt.plot(x_train_loss, y_train_loss, linewidth=1, linestyle="solid", label="train loss")plt.plot(x_train_acc, y_train_acc,  color='red', linestyle="solid", label="train accuracy")plt.legend()plt.title('Accuracy curve')plt.show()pit.savefig("acc.png")

http://www.ppmy.cn/news/186611.html

相关文章

干货|接口测试必备技能-常见接口协议解析

【摘要】 服务与服务之间传递数据包,往往会因为不同的应用场景,使用不同的通讯协议进行传递。比如网站的访问,常常会使用 HTTP 协议进行传递,文件传输使用 FTP,邮件传递使用 SMTP。上述的三种类型的协议都处于网络模型…

英语单词:independence,free

这两个单词作为独立,与自由的象征,经常与其他名词进行联合表示,去这个”名词“化的含义。 比如C的模板定义就是一个 type-independence,去类型化的抽象方法,不依赖于类型的模板定义。 比如多线程里锁的使用&#xff0c…

在Thinkpad x250上面安装Ubuntu 18.04 桌面版本

装的时候老坑了。现在截图给大家分享一下,BIOS的具体设置: 参考刻录ISO到U盘的过程: https://jingyan.baidu.com/article/154b46312f033e28ca8f41c2.html 接下来按F12到U盘启动,一步一步安装即可搞定

Thinkpad x250安装Windows10后指纹识别的问题

1.清除BIOSz中的指纹数据信息。 1)在Thinkpad启动时,出现黑底白字的lenovo标识,并且下方有"To interrupt normal startup, press Enter"时,按F1键进入BIOS。 如果开机时没有出现这个界面就直接进入了Windows10&#xf…

ThinkPad X250上USB3.0硬盘盒读写速度慢

我买过好几个*睿科的移动硬盘盒,在我的ThinkPad X250上,读取速度都只能在30MB每秒左右,怀疑我遇到了假货。后来想想,都来自官方店购买,也不可能造假,否则网上早就吵翻天了。 下面是我的硬盘盒:…

Linux Shell_cut命令(按列提取文本字符)

linux cut命令(按列提取文本字符) cut是一个选取命令,就是将一段数据经过分析,取出我们想要的。一般来说,选取信息通常是针对“行”来进行分析的,并不是整篇信息分析的 语法格式 cut [-bn] [file] 或 cu…

Thinkpad-X250-Hackintosh-OpenCore-BigSur11.6

thinkpad x250 99% 完美黑苹果 bigsur11.6 用了黑果小兵推荐的OC 和Bigsur11.6 装在thinkpad x250 再换了博通 DW1820A网卡完美支持, 摄像头,蓝牙,wifi, 话筒,耳机,触摸板,小红点都完美支持,还…