任务片段是训练真正用到的数据。每个片段就是一次完整的任务尝试:有起点、终点、任务描述,以及在它上面跑过的质量检查。这一页介绍片段从哪里来、怎样审核 AI 给出的建议,以及怎样批量标注。
任务片段从哪里来
一条机器人录制只会生成一个任务片段,覆盖整条录制,平台不会自动切分。所以如果你希望一次尝试对应一个片段,录制时就一次只录一次尝试。
人类第一人称录制通常很长,工作流会让视觉语言模型提议每个片段的起止位置,并为它写一句任务描述。这些只是建议,不是结论。在有人审核之前,它们都标着 AI 建议:录制上显示「AI 提出,未审阅」,片段的历史里显示「AI 建议 · 未审阅」。AI 给出的边界和措辞有参考价值,但并不精确,建议安排一轮快速审核。
审核 AI 建议
审核最快的地方是录制本身。在「录制」中打开一条录制,下拉到它的任务片段列表:可以按时间或置信度排序,逐个播放,然后点击「接受」或「拒绝」。边界不准时,把播放头移到正确位置,点击「起点设为播放头」或「终点设为播放头」,也可以直接在时间线上拖动片段的两端。切错了的地方用「在播放头处拆分」「与下一个合并」或「添加任务片段」修正,任务描述不对就点「编辑文字」。
接受一个片段,就表示它已经审核过;之前被手动排除的片段也会重新纳入。如果数据集版本只使用审核通过的标签,是否审核过就很关键。
任务片段列表
在侧栏的项目下点击「任务片段」。每张卡片显示缩略图、时长、任务、来源录制、质检结论和相机数。点击「预览」,不用离开列表就能播放。
用列表上方的筛选栏缩小范围。「搜索任务」按任务文字查找;「质检结论」「任务结果」「划分」「标注状态」分别按质检结果、成败、训练/验证/测试划分和审核状态筛选;「更多筛选」还能按时长、帧率、相机数、空闲占比、录制、标签和上传日期筛选。常用的筛选可以存进「已保存视图」,右侧的两个按钮用来在卡片和表格之间切换。
批量处理
勾选卡片即可选中片段,按住 Shift 可以连续选择,点「选择全部匹配」则一次选中所有符合筛选的片段。选中后,选择栏里有「接受」「设置任务」「设置结果」和「创建作业」。点击右上角的「创建版本」,就能用选中的片段生成数据集版本。
片段工作区
在卡片上点击「标注」,打开片段工作区。中间是同步播放的各路相机,下面是片段时间线和播放控制。右侧可以设置「任务」和「结果」,点击或按数字键套用「技能」,写「备注」,或者用「在播放头添加备注」把备注钉在当前时刻。
修改会自动保存,保存后控制栏旁显示「已保存」。底部的「历史」列出每一次修订和它的来源,比如 AI 建议或人工修改,哪些内容已经有人看过一目了然。「复制时间」会复制一个链接,打开就定位到当前时刻,方便请同事帮忙看某个瞬间。
标注作业
一批片段需要多人分工标注时,就把它们做成一个作业。选中片段后点击「创建作业」,填写「名称」,选择「分配方式」,再勾选「标注员」。「均分」把条目平均分给每位标注员;「队列」则让标注员用「领取下一项」逐个领取。分割作业的流程相同,只是从「录制」里选择录制开始。
作业列在项目的「标注」下。标注员在「我的工作」里找到分给自己的条目,用「上一项」「下一项」切换,完成后点「完成」。审核员再点「通过」,或填写说明后「退回」,作业会显示已通过的条目数。
跨项目搜索
想在团队里快速找到某样东西,用侧栏顶部的「搜索」(⌘K)。它可以按名称找到项目、录制、任务片段、版本、工作流等。
如果要跨项目检索数据,还有一个检索页。它不在侧栏里:打开「训练」,点击「更多操作」菜单,再选「打开检索」。在这里可以按数据来源、质检状态、信号类型和来源类型筛选,选中一条结果查看详情,并把匹配的结果保存为视图。如果有些录制是在检索索引上线之前处理的,团队所有者或管理员可以点击「建立检索索引」把它们补进来。语义搜索(用一句话描述想要的数据)取决于你的部署环境;不可用时页面会直接说明,筛选功能照常可用。