Lecture 03正式问题保留两句候选:
正式问题保留两句候选:
主线阅读与优先实验
caption历史、VQA、CLIP候选、关系控制、GLIP/LLaVA与生成桥梁
正式问题保留两句候选:
- A.
A person in red holds a ball beside a person in blue. - B.
A person in blue holds a ball beside a person in red.
条件1:左红持球

条件2:左蓝持球

条件3:右蓝持球

条件4:右红持球

两个人、一个球;左右均按观看者位置。每个条件的持球人及另一人是否接触球应从图中确认。
原来两幅图的持球人都站在左侧:左红持球时 A 合适,左蓝持球时 B 合适。两个观察同时符合两条规则:读取持球者衣色,或者仅仅读取左侧人物衣色。因此原两图不足以区分两种解释。
新增右侧人物持球的两种条件,保持 A/B 候选不变。现在两条规则会给出不同预测,实验才有机会区分它们。图中独立生成的姿态、背景、光照也可能变化,所以它是针对竞争解释的条件设计,不声称所有图像只变了一个像素因素。