news 2026/3/25 7:04:22

结构化机器学习项目 第一周:机器学习策略(二)数据集设置

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
结构化机器学习项目 第一周:机器学习策略(二)数据集设置

本周为第三课的第一周内容,本周的内容关于在实际项目进行中的一些基本策略,并不涉及技术性的知识。

经过整个第一课和第二课后, 我们已经了解了足够支持我们构建一个完整的基础神经网络项目的知识和技术,本周便是在这些基础上的一个指导策略,可以帮助实现更好确定项目方向,优化和评估模型性能。

只要对前面两课涉及的技术原理足够了解,可以说,本周的内容不存在理解上的难度。

本篇的内容关于数据集设置,有很大一部分内容在之前已经提到过,所以篇幅会较短一些,并且我会在重复的部分进行标注。

1. 数据集划分经验(重复)

实际上,在之前的偏差与方差部分我们已经了解过这方面的内容,只是在本周的范畴里,课程中再次强调了这一段,为了每一篇的逻辑完整一些,我们也简单重复一下,就不占用太多篇幅了。

image.png

2.确保测试集和训练集来自同一分布(重复)

20251125193554859

3.何时更改验证集和指标?

这部分是这几节课程里新补充的内容,课程里把验证集,测试集和指标的设置比作画靶子,也就是任务的目标。

简单举个例子,就像上面说的,如果我们使用类似用户上传的模糊照作为验证集,以此不断调优拟合,那说明我们的目标就是实现用户上传的模糊图像的正确分类。

再比如,如果是某种要求分辨可疑人员的模型,在上一篇提及的评估指标中,如果使用单一评估指标,那么我们其实更倾向于使用召回率,因为这个任务的性质更偏向于”宁杀错,不放过”。

现在,转换一下这个标题:何时更改验证集和指标?其实是在说:什么现象让我们发现自己的设置和目标不匹配?

这才是课程里讲述的内容,我们来展开课程里的一个例子(这部分弹幕骤增):

image.png

因此,在这个例子中,真实应用发现指标的设置不能正确反应任务要求,因此,我们需要修改指标。

还有就是我们一直说的”高清猫“和”模糊猫”的问题,在那种情景下,真实应用发现验证集,测试集不能正确实现任务目标,因此,我们需要修改验证集和测试集。

这就是本篇的内容,几乎没有理解上的难度。下一篇就是本周内容的最后一篇,通过比较模型性能和人的表现讨论模型优化的方向和空间,也有一些新的概念。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/3/15 12:58:16

终曲:NOIP2025游记

手 ymx,ID:docxjun。退役了。以下是他在 Team:HLOI 服役期间所有的成就:CSP-J2022 1CSP-J2023 1CSP-S2023 2CSP-S2024 1CSP-S2025 1NOIP2025 ?兜兜转转,还是到这个时候了。再见OI。2022.4-2025.11.29。Day -1「自主复习」带给我的…

作者头像 李华
网站建设 2026/3/15 17:03:18

防腐涂料企业

海洋涂料:防腐涂料企业的技术创新与市场前景分析引言在当今工业领域,防腐涂料企业扮演着至关重要的角色。随着海洋经济的快速发展,海洋涂料作为防腐涂料的重要组成部分,其技术和市场正经历着深刻的变革。防腐涂料企业如何把握机遇…

作者头像 李华
网站建设 2026/3/22 21:59:48

TestDisk数据恢复实战:从分区丢失到文件找回的完整指南

TestDisk数据恢复实战:从分区丢失到文件找回的完整指南 【免费下载链接】testdisk TestDisk & PhotoRec 项目地址: https://gitcode.com/gh_mirrors/te/testdisk 当硬盘分区突然消失,重要文件不翼而飞,那种焦虑感足以让人崩溃。但…

作者头像 李华
网站建设 2026/3/15 17:03:14

磁链观测器的探索之旅:从仿真到闭环代码实现

磁链观测器(仿真+闭环代码参考文档) 1.仿真采用simulink搭建,2018b版本 2.代码采用Keil软件编译,思路参考vesc中使用的方法,自己编写的代码能够实现0速闭环启动,并且标注有大量注释,方便学习。 …

作者头像 李华
网站建设 2026/3/25 0:20:02

Java毕设项目推荐-基于JAVA/Springboot的学院校内订餐系统设计与实现基于JAVA的高校校园点餐系统基于JAVA的学院校内订餐系统的实现【附源码+文档,调试定制服务】

博主介绍:✌️码农一枚 ,专注于大学生项目实战开发、讲解和毕业🚢文撰写修改等。全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围:&am…

作者头像 李华