提交处理任务
管线处理是治理项目里的一个加工步骤:用一组算子把数据加工为结构化产物。它不是左侧导航的一级模块,也不是所有数据的必选项。
| 数据 | 是否需要管线 |
|---|---|
| RAW(无本体Ego、无本体UMI) | 必须。RAW 不含本体状态,必须经管线产出结构化数据后才能治理 |
| HDF5(Station Lite、MOS) | 可选。HDF5 自带本体状态,可直接治理;也可以选择走管线做增强 |
入口:数据工作台页面头部的 管线处理 按钮,点击后打开整页弹窗。
弹窗布局
| 区域 | 内容 |
|---|---|
| 上部:算子管理 | 上传算子、选择导出算子类型 |
| 中部:管线链路 | 前置依赖 → 算子执行 → 后置处理,三段可视化展示 |
| 右下角 | 开始处理 按钮 |
导出算子类型
| 类型 | 典型产物 |
|---|---|
| SLAM | 相机 / 设备轨迹与位姿序列 |
| 视觉 | 目标检测、分割或手部关键点等视觉结构化结果 |
| 深度 | 由双目或单目估计的深度图 |
| 触觉 | 触觉传感器信号的对齐与特征 |
| 多算子组合 | 以上类型的组合链路 |
类型可多选;未选择的类型不产出对应产物。
操作步骤
- 在工作台中确认当前项目,点击 管线处理。
- 在 算子管理 中选择本次要使用的导出算子类型。
- 检查 管线链路:前置依赖是否满足,算子顺序与参数是否正确。
- 点击右下角 开始处理,管线进入「处理中」。
- 可以离开页面。工作台顶部保留处理中状态条,显示进度与日志条数,随时可回到弹窗查看。
- 处理完成后,结构化产物自动写入资产池,原始 RAW 仍保留;工作台出现 导出 HDF5 / 导出 LeRobot 按钮。
权限
| 动作 | 研发工程师 | FAE | 采集员 |
|---|---|---|---|
| 上传算子 | ✓ | — | — |
| 配置算子参数 | ✓ | 只读 | — |
| 启动管线处理 | ✓ | ✓ | 入口不可见 |
非研发工程师打开弹窗时,可以看到链路与已选算子,参数为只读,并提示「需要研发工程师权限」。
上传算子
- 研发工程师在 算子管理 中点击 上传算子,选择算子包。
- 平台校验算子包结构与描述文件,通过后进入项目的算子库。
- 同名算子会提示「覆盖」或「改名」。
算子库按项目隔离。算子包结构与接口约定见算子开发规范。
执行规则
| 规则 | 说明 |
|---|---|
| 异步执行 | 提交后即进入处理中,不阻塞页面,可以离开 |
| 整批判定 | 本批全部必需算子成功才算完成(门禁 G2) |
| 失败整批异常 | 任一必需算子失败,整批标为异常,给出失败步骤、日志与重试入口,不按部分成功处理 |
| 保留运行记录 | 重试只针对失败步骤,原运行记录保留 |
| 源数据保留 | 原始 RAW 不被替换,产物独立存储 |
处理需要多久
处理时长取决于批次规模与算子数量。页面提供进度与日志,以页面显示为准。
管线成功不等于数据验收通过
管线成功只代表产物已生成。产物的质量仍需在工作台中经过质量标记与人工核验。
管线状态
| 状态 | 含义 |
|---|---|
| 未处理 | 尚未提交管线 |
| 处理中 | 已提交,正在执行 |
| 已完成 | 全部必需算子成功,产物已入池 |
| 异常 | 有必需算子失败,可查看日志并重试 |

