Lecture 03 学习讲义
正文
工具
按问题查找
区域、像素与实例区域采样怎样保住几何对应?

同一只杯子换了 RoI,局部标签也要跟着换

独立阅读
课堂上下文:从哪个问题来

同一个对象在两个 RoI 中的局部位置不同,因此训练 target 必须与区域坐标同步。这里连接实际 mask 对应与原论文的 RoIAlign 实证;接下来固定 F 的问卷反例改变了实验条件,不否定这个正面结果。

原图位置 (x,y)(x,y) 在框 b=(x0,y0,w,h)b=(x_0,y_0,w,h) 内,可写成相对位置 ((x−x0)/w,(y−y0)/h)((x-x_0)/w,(y-y_0)/h)。杯子本身不动,框变宽后,杯子占局部窗口的比例会变小;框向右偏,杯子在局部窗口中会向左移动。

因此局部 mask 不只取决于对象轮廓,还取决于当前 RoI。训练时须将匹配实例的真值 mask 按同一框裁取并映射到目标网格;推理时再把局部预测映回该框的原图位置。若错把杯一的局部标签贴到杯二框上,网络收到的监督关系已经错了,增加参数不能补救这个对应错误。

本页显示同一杯子的两个区域,帮助区分“图像里的对象坐标”与“区域里的归一化坐标”。LAB03 的局部窗口是教学裁剪,可检查框的身份;它没有对预训练特征真正调用二维 RoIAlign。

这也是原论文需要对齐消融的理由:实例 mask 对空间对应提出更严格要求。正面实验说明正确读取有实用收益;它与 P44 的均值碰撞不矛盾,因为两个实验固定的条件不同。

Lecture 03 课堂图解 P43同一只杯子,两份 RoIRoI A:更紧局部目标占比更大RoI B:更宽轮廓更小,位置也改变同一可见轮廓映射到不同局部坐标;区域范围、采样与 mask 目标必须一致。

对象不变,局部框变化,归一化 mask 的位置和比例随之变化。 查看对应图解状态

  • 同一只杯子,两份 RoI
  • RoI A:更紧
  • 局部目标占比更大
  • RoI B:更宽
  • 轮廓更小,位置也改变
  • 同一可见轮廓映射到不同局部坐标;区域范围、采样与 mask 目标必须一致。
对象不变,局部框变化,归一化 mask 的位置和比例随之变化。 查看对应图解状态
查看完整图解

继续阅读与实验