/cn-tutor-prep-s2-ict-ai-machine-learning-intro/
/cn-tutor-prep-s2-ict-ai-machine-learning-intro/
简体版
2
一般查询: info@TutorZone.com.hk
办公时间: 星期一至六 - 上午 9 时至下午 6 时
WhatsApp 星期一至日 - 24 小时
人手接听: +852 6828 1809
实时客服: +852 9061 3106

中二 ICT|人工智能与机器学习入门 备课指引(导师用)|训练与测试集、准确率、偏误

中二 ICT|人工智能与机器学习入门 备课指引(导师用)|训练与测试集、准确率、偏误

  • 2026-11-13

学生个个听过人工智能,但问他一个“九成准”的模型值不值得信,多数只答“九成就好啦”。这一堂教他用三个数字判断:训练集几多、测试集几多、错的是哪一类。

本堂目标 学生能够:① 讲出为何要把 200 张图分成训练集 160 张(八成)与测试集 40 张(两成),并讲出测试集不可用来调参;② 算出准确率:40 张测试答对 36 张即 90%,并算出“全部答猫”的基准线只有 60%,证明九成不是白撞;③ 用训练 95%(152/160)与测试 90%(36/40)相差 5 个百分点解释过度拟合,并讲出偏误的一个具体来源。

01 先备知识(开课前 3 分钟快检)

以下任何一项未过关,本堂就会卡住,先补该项:

技能 快检题 过关标准
百分比 40 分之 36 化成百分比是多少? 90%,因为 36 除 40 等于 0.9
比例 200 张按八成二成分两份,各几张? 训练 160 张、测试 40 张
百分点比较 95% 与 90% 相差几多个百分点? 5 个百分点,不是 5%

02 课堂流程(45 分钟)

时间 环节 导师做什么 学生做什么
0-5 分钟 先估一估 板书“有个模型答对九成,你信不信”,再问“如果全部答同一类呢” 先举手话信,再开始怀疑
5-13 分钟 资料分两份 用 200 张图示范 160 与 40,讲明测试集要锁起 能讲出 80 对 20,并讲出测试集不可调参
13-22 分钟 准确率与基准线 由 36 除 40 算出 90%,再算全部答猫的 24 除 40 等于 60% 两个百分比都算对,并讲出差 30 个百分点
22-32 分钟 过度拟合与偏误 对比 152 除 160 等于 95%,问为何同测试差 5 个百分点 能讲出“背了训练集”与“资料不够杂”
32-40 分钟 题型四类 划分资料、算准确率、比基准线、讲偏误各一题 四题都写出步骤
40-45 分钟 离场检查 收三题即场批改,指出下堂补哪一幕 交三题

03 讲解脚本(照着说就可以)

第一幕:第一幕:训练集用来学,测试集用来验

“我们有 200 张动物图片,120 张猫、80 张狗。先拿八成即 160 张做训练集,剩下两成即 40 张做测试集。为什么要分开?因为你要知道自己有没有背答案。训练集就系课本,测试集就系考试卷;考试卷的答案,你调参数时是不可以看的。最常见的错系用测试集成绩去调模型,调到好为止,然后再报那个成绩,等于先看答案再考试,成绩没有意义。口诀:训练集用来学,测试集用来验,测试集只准用一次。”

训练集用来学,测试集用来验,测试集调参就等于偷看答案。

第二幕:第二幕:准确率系答对除总数,仲要有一条基准线

“测试集 40 张,24 张系猫,16 张系狗。模型答对 36 张,所以准确率系 36 除 40 等于 0.9,即 90%。错的 4 张,2 张猫当成狗,2 张狗当成猫。但 90% 算不算好?要有一条基准线:如果模型懒到全部答‘猫’,它答对 24 张,即 24 除 40 等于 60%。所以 90% 比 60% 高出 30 个百分点,才算真本事。最常见的误解系只看准确率不看分布:如果测试集 40 张里面 39 张系猫,全部答猫就有 97.5%,仲高过我们的模型。所以报准确率,一定要同时报类别比例。”

准确率系答对除总数,一定要同全部答同一类的基准线比。

第三幕:第三幕:训练 95%、测试 90%,差距讲的是背书

“训练集 160 张,模型答对 152 张,即 95%;测试集 90%。相差 5 个百分点。如果模型真系学会‘猫有尖耳、圆脸’,两边应该差不多;差距越大,越似背了训练集,这叫过度拟合。偏误从哪里来?假设训练集 120 张猫全部系白猫,模型就可能学成‘白色就系猫’,测试一出现黑猫就错。所以偏误不是模型坏,系资料不够杂。三个补救方向:一,加不同颜色的图;二,检查标签有没有贴错;三,划分训练与测试之前先打乱次序。最常见的误解系以为加多几层就解决,其实资料偏,加几多层都学不到。”

训练同测试差距大就系背书;偏误来自资料不够杂。

04 必教题型与步骤

题型 例子 步骤 答案
划分资料集 300 张图按八成二成分两份,各几张? (1)总数乘 0.8(2)总数乘 0.2(3)两数相加核对(4)写单位“张” 训练 240 张、测试 60 张
准确率 测试 50 张答对 43 张,准确率几多? (1)答对除总数(2)写成小数(3)化成百分比(4)核对在 0 与 100% 之间 43 ÷ 50 = 0.86,即 86%
基准线比较 测试集 40 张中 24 张是猫,全部答猫的准确率几多? (1)找最大类别(2)该类别数除总数(3)化成百分比(4)与模型比较 24 ÷ 40 = 60%,模型 90% 高出 30 个百分点
偏误分析 训练集的猫全部是白猫,测试时黑猫多数答错,原因是什么? (1)指出资料偏(2)讲出模型学了颜色(3)提出补救(4)不要答“模型坏” 资料偏误:模型学成白色等于猫;要加入不同颜色的样本并检查标签
合理性检查(一定要教):合理性检查:训练集加测试集一定等于总数(160 加 40 等于 200);准确率一定在 0 与 1 之间,写成 90 就一定忘了化成百分比;基准线不可大过 100%,若算出 97.5% 表示测试集类别极不平衡,要指出来;训练准确率通常高过测试准确率,若测试反而高出很多,多数是测试集太细(例如只有 5 张,错 1 张就掉 20 个百分点)。

05 独立练习三题

题目 答案 想观察什么
200 张图按八成二成分两份,各几张? 训练 160 张、测试 40 张 要讲出“八成”是训练集而非测试集
测试 40 张答对 36 张,准确率几多? 36 ÷ 40 = 0.9,即 90% 要写百分号,不可只写 0.9
训练 95%、测试 90%,相差 5 个百分点说明什么? 模型可能背了训练集(过度拟合),要加多样本或加强验证 答“模型好准”就系未掌握

06 学生常见错误与纠正句

错误 学生通常这样写 导师这样说
用测试集调参数 “我调到测试有 95% 先停手。” “测试集一调就报废。你应该在训练集里面再切一份验证集来调,测试集留到最后只看一次。”
只报准确率不报类别比例 “九成准,好劲。” “九成要同基准线比。如果测试集大部分系同一类,全部答那一类都有九成半,你这个九成其实差过乱答。”
把百分比写成整数 “准确率系 90。” “90 系数目,不系百分比。36 除 40 等于 0.9,写成 90% 或者 90 percent。”
以为加多几层解决偏误 “模型不够深,加多几层就得。” “资料偏,加深都系学错。全部白猫的训练集只会训练出更自信的错误答案,先加不同颜色的图。”

07 家课建议(直接指到练习卷题号)

08 离场检查(最后 5 分钟)

题目 答案 判定
为什么测试集不可以调参? 等于先看答案再考试,成绩会偏高而无意义 答不出就重讲第一幕
测试 40 张答对 36 张,准确率几多? 90%(36 ÷ 40) 答 36 表示未除总数,重讲第二幕
训练 95%、测试 90% 的差距说明什么? 可能过度拟合,即背了训练集 答“模型好准”就重讲第三幕

09 导师常问

要教神经网络结构吗?

中二不需要。用“资料、训练、测试、准确率、偏误”五个词讲完整堂,网络结构留到高中。学生能用三个数字判断一个模型可不可信,比画出神经元更有用。

需要电脑才能教吗?

不需要。200 张图可以用 200 张卡纸代替,或者用班房点名做例子:八成同学做训练、两成做测试,手算百分比一样达到目标。

要不要讲聊天机器人?

可以讲一句,但不要花时间示范。重点是“它也会错,错的方式同资料有关”;讲太多产品会令学生以为人工智能等于聊天机器人。

立即免费找导师导师登记 →

本页为 TutorZone 导师备课指引,内容由 TutorZone 团队编写;题目与流程为原创,并非任何学校或出版社的教材。

招募导师及兴趣班教练|学术、乐器、体育、艺术、STEM,免费登记,招生与配对交给平台。 了解详情 →