LeRobot CloudTwin | Qualcomm 机器人学习与发布控制面

01 · Problem

机器人团队可以训练一个策略，但很难把它变成可交付技能。

真实机器人学习的瓶颈不是“找一个模型名词”或“租一张 GPU”，而是从现场 episode 到云训练、评测、边缘部署、回滚、失败回流的每一步都断裂。客户要的不是 notebook，而是一份能解释、能审计、能回滚的 policy release。

数据散

视频、状态、动作、任务文本、操作者、接管、失败和安全事件散在脚本与文件夹里。

训练碎

HF Jobs、RunPod、Modal、AutoDL、阿里、腾讯、华为都能跑，但镜像、预算、checkpoint、日志互不统一。

权利不清

客户现场数据、工厂视频、个人信息、跨境传输、商业训练授权和删除权没有写进训练 contract。

评测不可比

不同 split、seed、现场、云 GPU 和 policy 版本下的成功率不能直接比较，也难给采购和工程共同解释。

边缘部署断裂

LeRobot 主要是 PyTorch/训练工作流；通用 ONNX/QNN 一键导出仍是缺口，权重不是可交付产品。

失败不增值

低置信、人工接管、任务超时、安全触发和客户拒收如果没有回流，就只是事故。

02 · Current Alternatives Fail

模型、GPU 云、数据平台和 fleet 工具都强，但没有连成 policy release factory。

CloudTwin 不做另一家 foundation model，也不卖“最便宜 GPU”。它把机器人失败变成下一版可部署、可审计、可回滚的 Qualcomm edge 技能。

LeRobot

给了 Dataset v3、teleop、rollout、HIL/DAgger 和训练入口，但不是企业数据权利、双云和 edge release 系统。

GPU Providers

RunPod、Modal、Lambda、AutoDL、阿里、腾讯、华为卖算力，不理解 robot episode、policy gate 和 Qualcomm target。

RobOps Tools

Foxglove、Formant、Viam 强在数据、fleet、teleop 和运维；CloudTwin 聚焦训练、评测、发布和失败回流。

NVIDIA Data Factory

GPU-first physical AI 路线很强；CloudTwin 的位置是 Qualcomm-first、LeRobot-compatible、双云可采购闭环。

Foundation Startups

PI、Skild、Figure、Google 证明方向正确，但中小团队仍缺窄任务的可复现、可回滚交付路径。

China Data Ecosystem

AgiBot、Unitree 等说明国内数据供给在形成；CloudTwin 需要支持中国 lane、数据驻留和本地化。

03 · Solution

CloudTwin 像机器人技能的 GitHub Actions + TestFlight。

Dataset Ledger + Dual-Cloud TrainRouter + Eval Gate + Data Rights Passport + LeRobot-to-Qualcomm Export Bridge + Edge Policy Packager + Failure Mining。

云端训练和持续改进，机器人本体端侧推理。
先从 ACT / SO-100 / SO-101 / 桌面机械臂窄任务做可演示闭环。
明确承认 LeRobot 到 ONNX/QNN 的通用导出仍是缺口，CloudTwin 补这个工程桥。
RobotCoreOS / SkillCertKit / SafetyOps 在本体侧做 admission、runtime gate 和 rollback。

04 · Why Now

机器人学习正在从 notebook 进入产品发布时代。

LeRobot v0.6.0、Dataset v3、HIL/DAgger、HF Jobs、开源 policy、双云 GPU 市场、企业数据治理和 Qualcomm Dragonwing 工具链同时成熟。真正的新瓶颈变成：如何把策略安全、可复现、可审计地部署到现场。

LeRobot 闭环成形

真实机器人采集、Dataset v3、rollout、eval、HIL/DAgger 和云训练开始能被产品化。

Policy 族谱够用

ACT 做比赛保底，Diffusion、SmolVLA、Pi0、GR00T 和 Multitask DiT 形成可插拔升级路径。

双云训练现实可行

海外 RunPod/Modal/Lambda，国内 AutoDL/阿里/腾讯/华为，让训练、评测和批处理有多条可执行 lane。

Qualcomm 需要出口

AI Hub、QNN/QAIRT、Device Cloud、Profiler、Qualcomm Linux/QIR SDK 需要一个 LeRobot-to-edge 样板。

05 · Product

第一版 wedge：30-50 条真实 episode 到一个可测试、可回滚的 edge policy。

CloudTwin 的早期产品不是“机器人 AGI”，而是固定任务、固定数据、固定评测、固定目标硬件的一条可复制发布流水线。

Record

采集 camera、state、action、timestamps、task text、success/failure、operator role、takeover 和 safety events。

Ledger

生成 LeRobotDataset v3、dataset card、episode hash、robot profile、rights passport 和 region policy。

Route

按数据区域、预算、GPU class、抢占容忍度、客户账号和 availability 选择 China / Overseas / Private lane。

Train

以 ACT 为保底，保存 config、seed、container digest、cost、logs、checkpoint 和 resume state。

Evaluate

锁定 split，输出 success rate、failure class、action smoothness、intervention rate、replay clips 和 release gate。

Export

转成 ONNX/TorchScript/QNN candidate，记录 operator coverage、fallback、数值误差和 device constraints。

Package

生成 edge package：policy hash、target board、QNN/QAIRT/ONNX path、input shapes、rollback 和 manifest。

Deploy

进入 RobotCoreOS / SkillCertKit，在本体本地执行，不依赖云端实时控制。

Mine

低置信、人工接管、任务超时、安全触发和客户反馈进入下一轮 regression test。

Audit

导出 Data Rights Pack、Release Gate Pack、Rollback Drill Pack 和评委版 evidence table。

06 · Product API/Evidence

CloudTwin 的产品 API 是 policy release contract，不是 notebook 链接。

每个 release 都绑定 dataset revision、data rights、split hashes、provider/GPU/cost cap、checkpoint、export path、target board、eval gate、human approval 和 rollback target。

Data Rights & Lineage Pack：dataset/model card、授权、驻留区域、保留期、PII/redaction、split hash 和版本链接。
Robot Release Gate Pack：固定 eval split、仿真/回放/实机矩阵、失败分类、人工接管率、审批人和生产 alias。
Rollback Drill Pack：红线指标触发后从新 policy 回退到稳定 policy 的审计日志、影响范围和恢复时间。
Metric Labels：所有数字标注 simulated、replay-eval 或 measured-on-device，避免把指标混成一个成功率。

07 · Market & Business Model

第一批客户买的是可交付训练闭环，不是便宜 GPU。

CloudTwin 赚的是机器人软件基础设施、训练编排、数据治理、release evidence、edge packaging 和 failure mining 的钱；GPU 成本只是 pass-through。

LeRobot 开发者

需要 dataset conversion、ACT/SmolVLA templates、HF Jobs/RunPod/AutoDL orchestration、eval report 和 edge export。

机器人创业公司

有 prototype，但没有可靠 data/train/deploy loop，需要 ledger、regression eval、model export 和 rollback package。

系统集成商

把“采集示教、训练 policy、交付 edge package、失败回流”写进 4-8 周固定范围合同。

企业工厂 / 仓库

关心数据不外流、上线可审计、事故可追责、版本可回滚、预算 guardrail 和 ROI evidence。

中国本土团队

需要中文支持、国内账号、付款/发票、数据本地训练、AutoDL/阿里/腾讯/华为 adapter 和私有化。

商业模式

Starter 包、Platform SaaS、managed compute margin、Enterprise lane、private registry 和 skill marketplace 抽成。

08 · Competition & Moat

护城河不是 GPU 价格，而是 episode ledger、eval gate 和 Qualcomm edge profile。

每一次成功、失败、接管、恢复、评测、发布和回滚都会增加下一次技能训练的确定性。

Ledger 真实示教、失败、接管、恢复、场景标签、site metadata 和任务结果长期积累。

Eval Gate 同一 split、同一指标、同一 replay harness，让不同云、模型和版本可比较。

Edge Profile QCS6490、QCS8550、IQ 系列、camera、runtime、thermal、power、latency 和 QNN coverage。

Rights Graph 数据来源、授权、驻留区域、保留期、商业训练权限、删除/freeze 状态和共享改进 policy。

09 · Why Qualcomm

云负责训练，Qualcomm edge 负责执行。

CloudTwin 让 Qualcomm 拥有 post-training deployment standard：每个机器人技能都把 AI Hub/QNN/QAIRT、Device Cloud、Profiler、Qualcomm Linux/QIR SDK 和 Dragonwing board profile 写进 release evidence。

开发者入口

LeRobot/Hugging Face 是开源机器人学习入口；CloudTwin 把开发者从 GPU 云训练导向 RB3、QCS6490、QCS8550 和 IQ 系列。

Edge 标准出口

AI Hub/QNN/QAIRT 不只是 profile 模型，而是成为每个 policy release 的端侧证据。

本体侧软件栈

Qualcomm Linux/QIR SDK/ROS 2 节点承接 camera ingest、NN inference、仿真、交叉编译和部署。

具体请求

AI Hub 额度、Device Cloud、QNN office hours、ACT exporter 对接、板卡 profile、QIR 示例节点和 Robotics Hub 发布机会。

10 · Demo & Ask

三分钟证明：Cloud-trained. Qualcomm edge-deployed. Evidence-backed.

比赛 demo 用 SO-100/SO-101、桌面机械臂或小车固定任务展示数据、训练、评测、边缘部署和失败回流。重点不是一次动作，而是一次可复制的 policy release。

Record

采集 30-50 条 episode，记录 camera、state、action、task text、success/failure 和 takeover。

Ledger

生成 LeRobotDataset v3、dataset card、rights passport、split hashes 和 region policy。

Train

提交 China/Overseas training job，展示 provider、GPU、cost cap、container digest、logs 和 checkpoint。

Export

输出 ONNX/TorchScript/QNN candidate，展示 fallback、action error、target board、latency/memory label。

Improve

本体执行后触发失败或人工接管，片段进入下一轮 training queue，并生成 rollback drill。

Claim Boundaries

可信边界：CloudTwin 是训练与发布控制面，不是认证机构或实时安全控制器。

可以说 LeRobot-compatible、Qualcomm-first、dual-cloud training architecture、edge evidence workflow、auditable policy release workflow。不能说已获 Qualcomm/Hugging Face 官方认证、自动合规、功能安全认证、任意模型自动跑 QNN、性能优于 Jetson/x86。云端不进入 safety-critical control loop；所有延迟、功耗、温度、FPS、成功率都必须标注 simulated、replay-eval 或 measured-on-device。

CloudTwin 不卖“便宜 GPU”，它卖把真实机器人经验变成可部署、可回滚、可持续改进的 Qualcomm edge 技能。

LeRobot releases LeRobot v0.6.0 LeRobot Docs LeRobot robot workflow LeRobotDataset v3 LeRobot rollout LeRobot HIL LeRobot ONNX issue RunPod Modal Lambda CoreWeave Alibaba PAI Tencent GPU Huawei ModelArts AutoDL GPU NVIDIA Data Factory NVIDIA GR00T N1 Physical Intelligence openpi Skild Series C Figure BMW Gemini Robotics AgiBot World Unitree open source Viam Foxglove Formant HF Dataset Cards HF Model Cards MLflow Dataset Tracking EU Data Act EU AI Act NIST AI RMF Qualcomm AI Hub Qualcomm ACT ONNX QNN EP Qualcomm RB3 Gen 2 QCS6490 Dragonwing IQ10 RRD Qualcomm Linux QIR SDK Robotics Hub