同一只杯子换了 RoI,局部标签也要跟着换
课堂上下文:从哪个问题来
同一个对象在两个 RoI 中的局部位置不同,因此训练 target 必须与区域坐标同步。这里连接实际 mask 对应与原论文的 RoIAlign 实证;接下来固定 F 的问卷反例改变了实验条件,不否定这个正面结果。
原图位置 在框 内,可写成相对位置 。杯子本身不动,框变宽后,杯子占局部窗口的比例会变小;框向右偏,杯子在局部窗口中会向左移动。
因此局部 mask 不只取决于对象轮廓,还取决于当前 RoI。训练时须将匹配实例的真值 mask 按同一框裁取并映射到目标网格;推理时再把局部预测映回该框的原图位置。若错把杯一的局部标签贴到杯二框上,网络收到的监督关系已经错了,增加参数不能补救这个对应错误。
本页显示同一杯子的两个区域,帮助区分“图像里的对象坐标”与“区域里的归一化坐标”。LAB03 的局部窗口是教学裁剪,可检查框的身份;它没有对预训练特征真正调用二维 RoIAlign。
这也是原论文需要对齐消融的理由:实例 mask 对空间对应提出更严格要求。正面实验说明正确读取有实用收益;它与 P44 的均值碰撞不矛盾,因为两个实验固定的条件不同。
对象不变,局部框变化,归一化 mask 的位置和比例随之变化。 查看对应图解状态
- 同一只杯子,两份 RoI
- RoI A:更紧
- 局部目标占比更大
- RoI B:更宽
- 轮廓更小,位置也改变
- 同一可见轮廓映射到不同局部坐标;区域范围、采样与 mask 目标必须一致。