Lecture 03一句话指向哪个对象
一句话指向哪个对象
目标、参照物和关系各是什么,怎样把答案落回区域?
Lecture 03一句话指向哪个对象
阅读与动手顺序
先看一个可解释的失败
“蓝杯左边的杯子”中,蓝杯是参照物。关键词规则找到蓝杯,不能据此声称找到了目标。
用受控变化检验关系
在 LAB15 的 RGB 规则提框与关系检查中改变对象位置或属性,区分目标、参照物和关系。
回到可学习模型的接口
CLS11 再比较短语到区域、提示到 mask、视觉向量到语言模型的接口与训练范围;规则练习不冒称 GLIP/LLaVA 推理。
Lecture 03一句话指向哪个对象
带走的结果
标出目标框与参照框,并给出一个能击败关键词基线的最小对照。
Lecture 03一句话指向哪个对象
优先实践
可先阅读已有结果,再按问题选择是否重算。并列实验提供不同起点,不要求全部运行。
- LAB 15 · 语言指代小练习:目标、参照与关系在 Deepnote 打开 ↗
RGB规则提框、错误关键词基线、目标/参照/关系与干预
Lecture 03一句话指向哪个对象
配套讲解
- CLS 11 · 语言定位与视觉模型接口在 Deepnote 打开 ↗
目标/参照/关系、受控图像干预、短语区域学习、分割提示及连接器
Lecture 03一句话指向哪个对象
遇到相应问题时再展开(1 项)
- LAB 16 · 点、框与负提示:分割规则基线在 Deepnote 打开 ↗
像素连通域、正负点/框提示、局部/整体多义性
Lecture 03一句话指向哪个对象