换一组标签,原来的表示还够用吗?哪些参数值得更新?
带走的结果:一张比较表:标签预算、更新参数、测试条件、结果,以及你愿意选择的适配方案。
68 页主讲串起学习信号、空间输出和视觉语言三条线。课后按自己的问题选择一条学习路径;需要一句解释、一个算例或一项证据时,可以直接打开独立问题块。
本页说明保留课堂讲述和关键推理,学习材料连接对应实验。段落、图表和代码旁的链接按钮可以引用原文中的具体位置。需要 AI 一起阅读时,打开右上角“给 AI”,复制正文或区块索引地址。
什么变化应该忽略,训练目标怎样让表示保留我们需要的信息?
CLS 01 · 学习信号、表示与迁移 提供本部分的连续背景。选择下方一条路径,就能找到相应讲解、主实验与按需回查的材料。
换一组标签,原来的表示还够用吗?哪些参数值得更新?
带走的结果:一张比较表:标签预算、更新参数、测试条件、结果,以及你愿意选择的适配方案。
什么变化应当忽略?候选来自当前批次还是过去批次,会改变什么?
带走的结果:用一组对照说明:目标减少了什么差异,又保留了哪种任务信息。
看见少量图块,学会补图之后得到的表示是否可用?
带走的结果:并列报告重建误差与一个下游读出结果,解释二者回答的问题为何不同。
从一个类别变成框、像素与实例,需要改变哪些计算与监督?
空间主线:从候选区域到实例掩码(CLS02) 提供本部分的连续背景。选择下方一条路径,就能找到相应讲解、主实验与按需回查的材料。
类别、位置、重复框和漏检分别从哪个环节出现?
带走的结果:标出一幅预测中的三类错误,并解释改变 NMS 阈值为何可能同时增加召回与重复。
输出格子变多之后,模型怎样知道每个位置属于什么?
带走的结果:采样热身报告前景、背景 IoU 与两类 mIoU;图像模型报告背景、红矩形、蓝椭圆的逐类 IoU 与三类 mIoU,再用一处边界错误解释数字的含义。
语言怎样成为输出、监督和任务条件?
CLS 03 · 视觉与语言:任务、训练与接口 提供本部分的连续背景。选择下方一条路径,就能找到相应讲解、主实验与按需回查的材料。
同一个图像向量,怎样支持换候选、换提示和搜索图片?
带走的结果:记录同一图像在两组候选中的原始相似度与归一化分数,解释哪些量应改变。
生成了一句话或一个答案,怎样检查图像实际起了作用?
带走的结果:给出一对输入与输出,指出视觉条件改变后答案应怎样变化,并解释实测是否支持。
目标、参照物和关系各是什么,怎样把答案落回区域?
带走的结果:标出目标框与参照框,并给出一个能击败关键词基线的最小对照。
第三讲使用视觉编码器与文字预测器的输入输出接口。条件生成由第四讲展开,RNN 与完整 attention 留到第五讲,分布式训练与显存放在第六讲相应背景下继续学习;这些材料不增加本讲必读要求。
写出输入、希望输出的答案和一个竞争解释,再选择能区分解释的最小对照。已有实验结果带有日期与条件;自己运行后,对照数据、参数和划分解释差异。实验均为可选学习活动,不改变正式问卷和课程计分。