双机位无标记捕捉
用两颗 1080p 30fps、视场角 90°-120° 的同型号摄像头做双机位三维重建,无需穿戴设备。两机水平间距 2 米(最大 2.5 米)、垂直间距 1 米,主机位高 1 米、副机位 0.9 米。
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
Cyanpuppets 是 CYAN.AI 推出的无标记实时动作捕捉方案,用两颗普通 1080p 摄像头代替穿戴式动捕服,实现 30-60 FPS、延迟低至 0.1s 的全身驱动。它自研骨骼系统可映射 Metahuman、Daz、CC4、Unity avatar、VRM、MMD、Mixamo 等十余种主流模型,全身 33 个肢体点、单手 21 点、面部 140 个表情点。短板在于对场地与光线要求苛刻,摄像头间距、机位高度不达标会直接损失精度。
Cyanpuppets 由 CYAN.AI 开发,定位是无标记实时动作捕捉,面向虚拟主播、3D 动画师、游戏开发者以及需要驱动虚拟形象的内容创作者。它不依赖穿戴设备,用两颗普通摄像头做双机位三维重建,把真人动作实时映射到虚拟角色上。
技术方案上,CYAN.AI 自研了一套骨骼系统,通过合成数据算法把动捕数据匹配映射到 Metahuman、Unreal Skeleton Asset、Daz、CC4、iClone、Unity avatar、VRM、MMD、Mixamo、MayaAdv、MayaHumanIK、3DmaxBiped 等主流模型骨骼上。采集能力为单手 21 点、全身肢体 33 点、面部表情 140 点,采集帧率 30-60 FPS,延迟不超过 0.1s,骨骼点 208 个。误差方面,最小肢体误差 1 cm,最大 5 cm,平均小于 3 cm。
不同角色的用法不一样。虚拟主播可以把它当成实时面捕加身捕,配合 Unity 引擎做 XR/VR 互动;动画和游戏团队可以上传本地视频批量生成 FBX 数据,数据包含身体、面部和手指,还支持 2D 屏幕还原。个人用户则用自带摄像头做轻量驱动,企业用户走双 4K60FPS 摄像头的整机方案。
用两颗 1080p 30fps、视场角 90°-120° 的同型号摄像头做双机位三维重建,无需穿戴设备。两机水平间距 2 米(最大 2.5 米)、垂直间距 1 米,主机位高 1 米、副机位 0.9 米。
自研骨骼系统用合成数据算法,把动捕数据映射到 Metahuman、Unreal Skeleton Asset、Daz、CC4、iClone、Unity avatar、VRM、MMD、Mixamo、MayaAdv、MayaHumanIK、3DmaxBiped 等主流模型上,避免每个模型单独适配。
免费使用视频生成 FBX 功能,不需要上传服务器,直接用本地显卡计算。支持最长 2.5 分钟视频,MP4/3GPP/MOV/AVI 四种格式,视频数量不限,生成的 FBX 数据包含身体、面部、手指,并支持 2D 屏幕还原。
采集帧率 30-60 FPS,延迟不超过 0.1s。单手 21 个捕捉点,全身 33 个肢体点,面部 140 个表情点,骨骼点总计 208 个,3D MAP 超过 80 个。
作为 NVIDIA Inception 计划成员,GeForce RTX 3060 显卡即可稳定跑到 30 FPS 以上。与 Intel 合作实现更低延迟的数据吞吐和帧合成,视觉动捕延迟可低至 0.1s。
通过 Unity 引擎快速实现 XR/VR 的交互能力,可用于虚拟主播或游戏制作。Cyanpuppets 是 Unity 生态合作伙伴计划成员,加入了 Unity 黑马计划。
当你要用普通摄像头做实时虚拟形象驱动时,Cyanpuppets 值得考虑:双机位加 0.1s 延迟的组合,加上对 Metahuman、Daz、CC4 等十余种骨骼的预适配,省掉了自研重定向管线的工作。当你的场地不到 2 米宽、或者无法控制光线时,要谨慎,因为机位间距和背光会直接影响腿部和整体精度。纯做视频离线转 FBX 的话,免费的 2.5 分钟单条限制和 3 分钟永久权限的 $50 档都够试水,但批量生产前建议先确认本地显卡是否达标,官方只给出了 RTX 3060 的参考。
用 Unity 引擎加双摄像头做实时驱动,30-60 FPS 和 0.1s 延迟能满足直播互动需求。对场地和光照敏感,开播前要把机位固定好。
骨骼系统预适配 Metahuman、Daz、CC4 等模型,省去重定向环节。平均肢体误差小于 3 cm,适合风格化或非特写镜头的动画生产。
通过 Unity 引擎快速实现 XR/VR 交互,Unity 黑马计划成员,可用于游戏动作生成。企业版年授权 1361 美元起,团队采购需评估人数。
拍摄空间不足 2 米宽时无法布置双机位,腿部质量会明显下降。官方要求两机水平间距 2 米(最大 2.5 米),空间不达标不建议入手。
最小肢体误差 1 cm、最大 5 cm、平均小于 3 cm,对电影级或科学级动捕来说精度有限,这类项目更适合光学或惯性动捕方案。
| 方案 | 价格 | 包含内容 | 说明 |
|---|---|---|---|
| 企业版一年授权 | $1,361.00 USD(原价 $1,499.00 USD) | 一年软件授权 | Sale |
| 企业版一年授权含两颗 4K60FPS 摄像头 | $1,599.00 USD(原价 $4,400.00 USD) | 一年软件授权 + 两颗 4K60FPS 摄像头 | Sale |
| 永久 3 分钟视频转 FBX 权限 | $50.00 USD(原价 $100.00 USD) | 永久 3 分钟上传视频生成 FBX 权限 | Sale |
| METAVANCE Studio 版 30 天访问 | $199.00 USD(原价 $298.00 USD) | 30 天访问 | Sale |
| METAVANCE Studio 版 30 天访问 | $149.00 USD(原价 $199.00 USD) | 30 天访问 | Sale |
| 个人版一年授权 | $599.00 USD(原价 $899.00 USD) | 一年软件授权 | Sale |
| 个人 webcam 版 30 天试用 | $50.00 USD(原价 $100.00 USD) | 30 天软件试用 | Sale |
以上为公开费率整理,厂商保留调价权利,实际以官方页面为准。
| 指标 | 数值 | 数据来源 |
|---|---|---|
| 单手指捕捉点 | 21 | Cyanpuppets 官网产品参数 |
| 全身肢体捕捉点 | 33 | Cyanpuppets 官网产品参数 |
| 面部表情捕捉点 | 140 | Cyanpuppets 官网产品参数 |
| 采集帧率 | 30-60 FPS | Cyanpuppets 官网产品参数 |
| 延迟 | ≤ 0.1s | Cyanpuppets 官网产品参数 |
| 骨骼点 | 208 | Cyanpuppets 官网产品参数 |
| 3D MAP | 80+ | Cyanpuppets 官网产品参数 |
| 最小肢体误差 | 1 cm | Cyanpuppets 官网产品参数 |
| 最大肢体误差 | 5 cm | Cyanpuppets 官网产品参数 |
| 平均肢体误差 | <3 cm | Cyanpuppets 官网产品参数 |
| 免费视频转 FBX 单条上限 | 2.5 分钟 | Cyanpuppets 官网免费功能说明 |
付费档位分为多个:企业版一年软件授权折后 $1,361(原价 $1,499);企业版含两颗 4K60FPS 摄像头的年授权折后 $1,599(原价 $4,400);个人版一年授权折后 $599(原价 $899);个人 webcam 版 30 天试用折后 $50(原价 $100);METAVANCE Studio 版 30 天访问折后 $199(原价 $298)和 $149(原价 $199)两档。另有永久性权限:3 分钟视频转 FBX 权限 $50(原价 $100)。视频生成 FBX 功能免费使用。
Cyanpuppets 走无标记路线,不需要穿动捕服或贴标记点,用两颗普通 1080p 摄像头做双机位重建。支持 1080p 30fps、视场角 90°-120° 的 webcam,两颗同型号即可,官方推荐 emeetC960。代价是精度受场地和光照影响较大,最小肢体误差 1 cm、最大 5 cm。
自研骨骼系统通过合成数据算法映射到 Metahuman、Unreal Skeleton Asset、Daz、CC4、iClone、Unity avatar、VRM、MMD、Mixamo、MayaAdv、MayaHumanIK、3DmaxBiped 等主流模型。官方称这一设计是为了让全身驱动不再被割裂成孤立的数字岛屿。
两个摄像头水平距离 2 米,最大不超过 2.5 米;垂直距离 1 米。面向演员的主机位高度 1 米,副机位 0.9 米,摄像头保持水平,不能仰拍或俯拍,否则拍不到腿、腿部质量下降并出现抖动。
免费版支持最长 2.5 分钟视频,格式为 MP4/3GPP/MOV/AVI,视频数量不限,不需要上传服务器,直接用本地显卡计算。生成的 FBX 数据包含身体、面部、手指,并支持 2D 屏幕还原功能。软件在 DISCORD 下载。
官方给出的参考是 NVIDIA GeForce RTX 3060 显卡可以稳定跑到 30 FPS 以上。Cyanpuppets 是 NVIDIA Inception 计划成员,与 Intel 合作实现更低延迟的数据吞吐和帧合成。低于该档位的显卡官方未说明。
避免宽松飘逸的衣物,比如裙子、宽松中裤。不要遮住手腕,需要把袖子拉起来。戴面罩会完全丢失面部捕捉,戴眼镜有概率影响眼部捕捉。摄像头不能正对灯光或阳光,逆光会导致画面模糊。
CYANPUPPETS 受 Epic Games 邀请参加 UEFEST,在官方 MetaHuman 展位展示最新的 AI 动作捕捉技术。
作为 NVIDIA Inception 成员参加 BEYOND EXPO 澳门,并获得年度创新奖。
与香港理工大学、伊利诺伊大学、北京师范大学合作,论文 Cyankitten(论文编号 4407)被 CHI 2025 接受。
CYANPUPPETS 成为 Unity 生态系统合作伙伴计划成员。
与香港理工大学、哈尔滨工业大学合作,在 Creativity & Cognition 发表论文。