清华青年AI自强作业hw3_1:用线性回归模型拟合MNIST手写数字分类

news/2025/1/16 4:47:19/

清华青年AI自强作业hw3_1:用线性回归模型拟合MNIST手写数字分类

    • 实现过程
      • 思路分析
      • 逻辑回归二分类模型
      • 训练结果分析
    • 相关链接

在这里插入图片描述

一起学AI系列博客:目录索引

hw3_1:用线性回归模型拟合MNIST手写数字分类

  • 初步体验Tensorflow编程环境
  • 体会用回归模型网络拟合效果

实现过程


尝试后发现hw3_1/hw3_3的参考代码为TF1.x框架代码,升级到TF2.x框架多为不便(升级踩坑记录),于是采用TF2.x中的keras框架重新写了一遍。

思路分析

  1. 先学习参考代码的框架思路
  2. 研究MNIST的Keras训练流程
  3. 进行改造和适配完成本次任务

逻辑回归二分类模型

  1. 核心思路
    1. 用逻辑回归的二分类模型分别训练十个模型,分别处理0-9的分类
  2. MNIST数据预处理(load)
    1. 读取MNIST数据,调整处理成网络能接受的batch切分,训练集、测试集划分,标签匹配
  3. 模型训练过程(train)
    1. 模型搭建
      1. 模型为WX+B,第一层为输入层(784个神经元),第二层为输出层(1个神经元),二分类逻辑回归
      2. 单个类别神经网络层数设置、学习率、梯度下降方法、loss设置
      3. 保存每个batch的model参数,并获取测试集上的最新识别率,此时不开启反向传播更新参数
    2. 模型训练
      1. 前向推理与模型参数更新
      2. 按规律预测测试集的精度
  4. 模型推理过程(predict)
    1. 在测试集上验证预测精度
  5. 关键点
    1. 涉及到数据标签的one-hot编码理解

训练结果分析

从训练结果来看,用60000张图片训练图片得到的模型,再用10000张测试图片来评估,该模型预测正确率仅:18.97%,可见此模型设计是不合理的,太过简单,不能很好地表征该复杂任务。下一篇博客将对此模型进行改进,加深网络,便会得到很好的效果。

相应实现源码见代码仓:https://github.com/ioMayday/Tsinghua_Youth_AI/tree/master/homework。

参考资料

  1. https://github.com/AnkushMalaker/TF2-MNIST

  2. MNIST classification with TF2.0 Keras,link

  3. TF2.0的安装与MNIST手写识别的实现,link

  4. 手把手教程:深度学习入门项目MNIST手写数字分类任务,Pytorch实现

相关链接


  1. 文科生都能零基础学AI?清华这门免费课程让我信了,link
  2. 清华青年AI自强作业2:线性回归预测,link
  3. 清华青年AI自强作业hw3_2:前向传播和反向传播实战,link

http://www.ppmy.cn/news/462577.html

相关文章

MySQL数据库的高级操作

数据表高级操作 一、克隆表,将数据表的数据记录生成到新的表中方法一方法二 二、清空表,删除表内的所有数据方法一方法二 三、创建临时表四、创建外键约束,保证数据的完整性和一致性。1、外键的定义2、主键表和外键表的理解3、MySQL中6种常见…

北京银河吉星创业投资有限责任公司优势有哪些

北京银河吉星创业投资有限责任公司 http://www.souqian.com/infor/82950.html 优势 广泛的投资领域 公司作为财政部独资的投资企业,比照金融机构管理,不受分业经营的监管限制,能够进行跨行业投资。公司可根据市场状况、国家政策、行业…

吉星高照,大数据周刊给您拜年啦!

又是一年除夕日,大数据周刊拜大年!

vue高拍仪拍照后上传服务器回显到Upload(记录)

1.子组件&#xff08;高拍仪的拍照和上传服务器&#xff09; <template><div class"photoClass"><div class"upPhotoClass" click"upPhotoFn" /><el-dialog :visible.sync"dialogVisible" :modal"false&qu…

祝牛年吉祥,前程似锦,吉星高照,财运亨通,合家欢乐,飞黄腾达,福如东海,寿比南山,幸福美满,官运亨通,美梦连连。

新年伊始&#xff0c;岁岁余乐&#xff0c;愿国泰民安&#xff0c;岁岁常欢愉&#xff0c;万事皆胜意&#xff01; 俗话说&#xff1a;无志之人常立志&#xff0c;有志之人立长志&#xff0c;常立志不如立长志&#xff0c;但总好过不立志。 春节期间&#xff0c;基本没动过电脑…

恒空吉星携手海宇勇创签署战略合作协议

2018年12月29日&#xff0c;海宇勇创获恒空吉星百万投资&#xff0c;双方建立战略合作伙伴关系&#xff01; 海宇勇创科技秉承为企业信息化赋能的理念&#xff0c;对传统企业进行“产业路由器”升级和IT赋能。 未来将与恒空吉星携手并进、共创双赢&#xff0c;成为传统企业升级…

正大国际期货招商低预留4美金/手

公司留存双边4美元/单&#xff0c;大恒指26港币/单&#xff0c;小恒指12港币/单 需开通API接口&#xff0c;正大独家交易软件金智慧&#xff0c;流畅不卡盘不掉单 首先说结论&#xff1a;新产品的价值旧产品价值替换成本。 如果一个产品想要让他的价值非常大&#xff0c;让其他…

给10年后的一封信

今天是2023.9.15日&#xff0c;是我在瑞阳吉星实习的第三个月。 我只是想单纯发给2033年9月15日的我&#xff0c;这是一封跨越时空的信。 10年后的我&#xff0c;你现在是什么职业呢&#xff1f; 爸妈&#xff0c;他们还好吗&#xff1f; 奶奶&#xff0c;怎么样啦&#xff1f;…