比较更多候选,代价在哪里?

P14 同一视图列表的 6×6 对比矩阵:自身排除、同源正例与其他候选两轴同列 A1、A2、B1、B2、C1、C2,共 6 个视图。每行查询自身所在的灰色斜线格排除;同源另一个视图为绿色正例。A1 行排除 A1,正例为 A2,其余 4 项为 B1、B2、C1、C2;每行共 5 个候选。完整矩阵为 6×6。右侧历史键字典是下一方法 MoCo 的资源取舍,不是直接给本批 SimCLR 添加旧键。全部来自当前批次能否复用历史特征?3 张原图 → 6 个视图原图 AA1A2原图 BB1B2原图 CC1C2两轴使用同一个视图列表;行表示查询A1+A2+B1+B2+C1+C2+A1A2B1B2C1C2固定查询 A1A1:自身,排除A2:同源正例B1、B2、C1、C2:其余候选每行:1 + 4 = 5 项自身排除同源正例2N−2 个其余候选当前编码 6 个视图;完整比较矩阵 6 × 6(随 2N 平方增长)。下一方法:MoCo 的取舍先问能否保存已算的 key复用旧向量,减少本轮编码候选数与当前批次能否解耦?旧键还足够可比吗?
复用旧向量省去重算,也引出跨步一致性问题。 · 在课堂播放器中查看

当前批次从原图 A、B 的 A1/A2/B1/B2 四视图(4×4)扩为 A、B、C 的六视图(6×6)。矩阵两轴使用同一视图列表,灰色斜线主对角为自身并排除;每行只有同源的另一个视图为绿色正例,其余 2N−2 个为其他候选。A1 行显示全部候选身份。右侧将复用历史 key 作为下一方法 MoCo 的资源取舍。

返回同一状态