虚拟环境配置
见yolov5/yolov3 pytorch环境配置gpu+windows11+anaconda+pycharm+RTX3050 笔记。环境配置完成后yolov3和yolov5都可以使用,数据集和yaml文件通用,训练步骤相同,本人已经在验证。
原始图像文件和xml
我已经有jpg图像文件(JPEGImages)和对应的xml标注文件(Annotations)和数据集文件分布,制作方法见Labelimg图像标注
转换为yolo格式代码如下
参考yolov5训练—VOC数据集划分(训练集、验证集、测试集)和转换YOLO格式
3.1划分数据集的split_train_val.py代码
import os
import random
import argparseparser = argparse.ArgumentParser()
# ***为该数据集的绝对路径
parser.add_argument('--xml_path', default='***/Annotations', type=str, help='input xml label path')
parser.add_argument('--txt_path', default='***/ImageSets/Main', type=str, help='output txt label path')
opt = parser.parse_args()trainval_percent = 0.9 # 训练集和验证集所占比例。
train_percent = 0.7 # 训练集所占比例,可自己进行调整
xmlfilepath = opt.xml_path
txtsavepath = opt.txt_path
total_xml = os.listdir(xmlfilepath)
if not os.path.exists(txtsavepath):os.makedirs(txtsavepath)num = len(total_xml)
list_index = range(num)
tv = int(num * trainval_percent)
tr = int(tv * train_percent)
trainval = random.sample(list_index, tv)
train = random.sample(trainval, tr)file_trainval = open(txtsavepath + '/trainval.txt', 'w')
file_test = open(txtsavepath + '/test.txt', 'w')
file_train = open(txtsavepath + '/train.txt', 'w')
file_val = open(txtsavepath + '/val.txt', 'w')for i in list_index:name = total_xml[i][:-4] + '\n'if i in trainval:file_trainval.write(name)if i in train:file_train.write(name)else:file_val.write(name)else:file_test.write(name)file_trainval.close()
file_train.close()
file_val.close()
file_test.close()
运行结果如下
3.2 xml转txt文件的xml2txt代码
import xml.etree.ElementTree as ET
import os
sets = ['train', 'val', 'test'] # 如果你的Main文件夹没有test.txt,就删掉'test'
# classes = ["a", "b"] # 改成自己的类别,VOC数据集有以下20类别
classes = ["Person", "Elephant", "Lion", "Giraffe"] # class names
abs_path = '***' # ***该数据集的绝对路径def convert(size, box):dw = 1. / (size[0])dh = 1. / (size[1])x = (box[0] + box[1]) / 2.0 - 1y = (box[2] + box[3]) / 2.0 - 1w = box[1] - box[0]h = box[3] - box[2]x = x * dww = w * dwy = y * dhh = h * dhreturn x, y, w, hdef convert_annotation(image_id):in_file = open(abs_path + '/Annotations/%s.xml' % (image_id), encoding='UTF-8')out_file = open(abs_path + '/labels/%s.txt' % (image_id), 'w')tree = ET.parse(in_file)root = tree.getroot()size = root.find('size')w = int(size.find('width').text)h = int(size.find('height').text)for obj in root.iter('object'):# difficult = obj.find('difficult').text# difficult = obj.find('Difficult').textcls = obj.find('name').text#if cls not in classes or int(difficult) == 1:# continuecls_id = classes.index(cls)xmlbox = obj.find('bndbox')b = (float(xmlbox.find('xmin').text), float(xmlbox.find('xmax').text), float(xmlbox.find('ymin').text),float(xmlbox.find('ymax').text))b1, b2, b3, b4 = b# 标注越界修正if b2 > w:b2 = wif b4 > h:b4 = hb = (b1, b2, b3, b4)bb = convert((w, h), b)out_file.write(str(cls_id) + " " + " ".join([str(a) for a in bb]) + '\n')for image_set in sets:if not os.path.exists(abs_path + '/labels/'):os.makedirs(abs_path + '/labels/')image_ids = open(abs_path + '/ImageSets/Main/%s.txt' % (image_set)).read().strip().split()list_file = open(abs_path + '/%s.txt' % (image_set), 'w')for image_id in image_ids:list_file.write(abs_path + '/JPEGImages/%s.jpg\n' % (image_id)) # 要么自己补全路径,只写一半可能会报错convert_annotation(image_id)list_file.close()
最后运行结果
yolo.yaml文件配置(该文件写好后放在yolov3或yolov3的data文件下)
# YOLOv5 yolov3
# 该文件存放在YOLOv5 3的/models中
# 文件夹的相对位置如下
# parent
# ├── yolo (yolov3 v5算法文件夹)
# └── datasets
# └──DATA (数据集的名称)
# **为数据集绝对路径,注意冒号 : 和路径之间必须有一个空格
train: **/train.txt
val: **/val.txt
test: **/test.txt# Classes
nc: 5 # number of classes ##class数目
names: ['A', 'B', 'C', 'D', 'E'] # class names名称
yolov5/yolov3训练过程
下载算法文件及相应模型
yolov5链接https://github.com/ultralytics/yolov5 ,下载后解压缩
yolov3链接https://github.com/ultralytics/yolov3 ,下载后解压缩
yolov3.pt yolov5s.pt下载Releases · ultralytics/yolov5 (github.com),找到所示点击,选择相应的模型下载
将相应的pt模型移入对应的算法文件中
用pycharm打开yolov3或yolov5文件,并配置相应的虚拟环境
见yolov5/yolov3 pytorch环境配置gpu+windows11+anaconda+pycharm
修改train.py
打开根目录下的train.py
Ctrl+f搜索--data
将coco128.yaml改为你自己配置文件的文件名**.yaml
修改yolov5s.yaml yolov3.yaml
model/yolov5s.yaml 或yolov3.yaml的nc值为自己数据集的class数目 nc
修改dataloaders.py(如果你的图片文件夹名是images可以略过)
打开utils/dataloaders.py
Ctrl+f搜索Define label ,找到下面的一行内容:
sa, sb =f'{os.sep}images{os.sep}',f'{os.sep}labels{os.sep}' # /images/,/labels/ substrings
把JPEGImages替换掉images
运行
pycharm打开终端,如果你选择了相应的虚拟环境,()内就会显示你的虚拟环境名称
在终端粘贴指令
yolov5选择指令(有gpu):
python train.py --img 640 --batch 32 --epochs 100 --data data/***.yaml--weights yolov5s.pt --device 0
yolov3选择指令(有gpu):
python train.py --img 640 --batch 32 --epochs 100 --data data/***.yaml--weights yolov3.pt --device 0
Enter运行即可
关于Linux上yolov3/v5环境配置及训练过程,可以参考:
(linux)yolov5/v3-pytorch目标检测1:环境配置gpu+anaconda+pycham+ RTX2080ti 笔记_chao_xy的博客-CSDN博客
(linux)yolov5/v3-pytorch目标检测2:训练自己的数据集,gpu,pycharm, RTX2080ti,单/多显卡训练,笔记_chao_xy的博客-CSDN博客