课堂主讲
导读
连续讲稿
补充阅读
问卷作业 ↗
图文数据不是一堆没有来历的图片
“两个人站在室内。”
收集与筛选
保留哪些配对?
图文训练
配对关系提供目标
筛选模型影响材料范围
CLIP
模型与训练方法
原始数据由原工作收集
LAION
公开图文数据资源
不是原始 CLIP 训练集
OpenCLIP
开源实现与模型
不同权重有不同数据配方
人工内容、数据处理与筛选都参与信号形成;无额外逐图类别标签并不等于无人类知识。
CLIP、LAION、OpenCLIP 分别指向模型方法、数据资源与实现,不能混为一体。 ·
在课堂播放器中查看
原图与描述经过收集筛选进入训练;下方分别说明CLIP模型方法、LAION公开数据和OpenCLIP开源实现。
返回同一状态