深度学习预预训练与MMPretrain

news/2025/1/11 10:20:44/

MMPretrain算法库

在这里插入图片描述
优势:

  • 含有各种主干网络模型
  • 自监督学习功能
  • 多模态学习功能
  • 丰富的数据集
  • 含有训练技巧和策略
  • 易用,例如可解释性分析、推理api

包含多种丰富任务的开箱即用推理api

  • 图像分类
  • 图像语义描述
  • 视觉问答
  • 视觉定位
  • 检索

在这里插入图片描述
安装步骤
在这里插入图片描述

配置文件中含有模型训练中的设置,影响精度和速度,主要涉及以下几个方面:

  • 模型结构
  • 数据
  • 训练策略
  • 运行时gpu、分布式环境配置
  • 辅助功能 日志、定时保存权重

代码框架以及各个目录的含义用法:
在这里插入图片描述
数据流
在这里插入图片描述
配置文件的运行方式:
在这里插入图片描述

经典主干网络

在这里插入图片描述

在这里插入图片描述
vision transformer
将图像切成若干16*16的小块,排列成“词向量”
在这里插入图片描述
注意力机制:为了实现层次化特征

后层特征是空间邻域内的前层特征的加权求和
在这里插入图片描述

自监督学习

不依赖人工标注,利用互联网上的海量数据
在这里插入图片描述

在这里插入图片描述

多模态算法

在这里插入图片描述
在这里插入图片描述


http://www.ppmy.cn/news/228947.html

相关文章

Qcom_hexagon编译自动获取目录和特定文件的方法

一,简介 本文主要介绍,如何在高通hexagon ide中的hexagon.min中添加获取目录和.c文件的方法,供参考。 二,具体命令 OBJ_PATH : ./awinic_sp_module/algo_libINCLUDE_PATH : $(shell find $(OBJ_PATH ) -type d) SRC_C_FILE : …

ABIDE Preprocessed 结构态MRI数据集介绍及下载

ABIDE数据集介绍及下载 ABIDE Prerocessed项目是在ABIDE I 项目的基础上发展而来,主要是对ABIDE I中采集到的原始数据进行了一定的预处理和初步的特征提取。针对于fMRI和sMRI数据有着不同的处理方式,本次主要对其中提供的sMRI预处理结果进行介绍&#xf…

C++的“友元”是否会破坏类的封装?

1. 简述 C中的友元,即“友元类”或“友元函数”,历来有两种说法。有人认为它是“开后门”,破坏了类的封装设计,但也有人,包括C之父在内,他们的观点是“友元增强了类的封装”。 C之父原文 Does “friend” …

扫描二维码实现后台管理系统登录

二维码实现后台登录简单版的过程: 1.前端页面实时生成带有唯一标识uid的二维码,二维码内容为系统内的接口。(后端也可以生成) 2.当扫描二维码时访问后台接口,后台的接口获取uid,组装数据访问微信端接口获取…

扫描二维码报修公司电脑

北京扬子快讯(记者:王一洋)以往遇到电脑出现故障,职场人员只能拨打技术电话进行反映,一旦故障描述有误,问题很难第一时间得到解决。但今后这种情况将得到改善,扬子快讯记者昨天了解到&#xff0…

最新在线客服系统php代码微信软件公众号小程序app二维码聊天网站源码

最新在线客服系统php代码微信软件公众号小程序app二维码聊天网站源码 管理界面 独家长期更新日志(欢迎反馈BUG) 1、添加手机端前后台声音提示 2、添加后台客户管理显示在线离线 3、添加清空当前对话列表功能 4、优化手机端图标为高清 5、 修复用户端截图发送客服后台收…

CSDN帐号管理规范

第一章、概述 1、目的 为保障北京创新乐知网络技术有限公司及其关联公司(以下简称“CSDN”)业务健康可持续发展,维护CSDN正常运营秩序,规范CSDN帐号的使用者(以下简称“用户”)行为,保障产品用…

医院设备管理系统方案/案列/软件/APP/小程序/网站

近年来,随着社会经济的发展,科学技术的进步,促使现代化医疗资源也逐渐增多,医院规模越来越大,对医疗设备进行有效管理则成为了医院管理的重要内容之一。我爱物联网通过分析医疗设备的应用效益,能够在一定程…