华为云开源CloudRobo-WM1.2:昇腾训练,两评测居首
华为云为此设计了跨具身运动建模能力,可以将其理解为“动作翻译器”,支持不同形态的机器人共同学习。 部署时,开发者还能根据算力资源和响应速度需求,选择不同的推理模式,兼顾模型能力与运行成本。华为云宣布将开放模型…
11月16日,
华为云发布昇腾原生具身世界模型CloudRobo-WM1.2,同时宣布开源。
按华为云披露的信息,该模型在RoboTwin 2.0与LiberoPro 2.0两个评测基准上都排在第一。它的核心能力,是让机器人在理解环境、预判变化和生成动作之间建立联系。说白了,机器人伸手去拿东西之前,得先看清周围有什么、动作做完又会发生什么,然后才定下一步。
CloudRobo-WM1.2用国产昇腾算力完成训练,骨干网络为共享世界模型结构,动作由原生DualAct架构生成。发布会上给出的数字显示,它在这两项评测里的平均成功率分别是88.98%和81.7%。
落地开发时,训练数据不完整是常事:有缺动作标注的,有缺深度信息的,还有相机视角不全的。针对这些情况,模型的预训练框架做了兼容设计,尽可能把手上已有的数据用起来。
机器人之间也没法照搬动作。单臂、双臂、轮式机器人的结构和运动方式差别不小,华为云为此做了跨具身运动建模,可以把它看成“动作翻译器”,让不同形态的机器人一起学。
部署环节,开发者可依据算力资源和响应速度的要求挑选推理模式,在模型能力与运行成本之间做取舍。
开源范围包括模型权重、推理和代码,训练框架与昇腾算力的最佳实践也会一并放开,合作伙伴可在此基础上继续开发模型和应用。
CloudRobo平台眼下已聚集16500名以上开发者。华为云称,明年第一季度还会陆续推出新模型,并对立项成功的项目给出最高100万元的昇腾云算力支持,推动机器人在工业、零售等实际场景中落地。