DeepMotion 是什么
DeepMotion 是 DeepMotion, Inc. 开发的 AI 人体动作捕捉与 3D 动画平台,主要产品包括视频转动作的 Animate 3D 和文字转动作的 SayMotion。它让用户用普通摄像机视频或自然语言生成可导入游戏引擎、三维软件和影视流程的角色动画。
平台重点处理人体和类人角色运动,不是代码生成工具,也不是从图片直接建立完整 3D 模型的建模软件。动作质量仍受拍摄角度、遮挡、服装、光照、人物比例和后续重定向影响。
核心产品对比
| 产品 | 主要输入 | 主要输出 | 核心用途 | 使用方式 |
|---|---|---|---|---|
| Animate 3D | MP4、MOV、AVI 人体视频 | FBX、BVH、GLB、视频和图片预览 | 无标记全身、手、脸及多人动作捕捉 | 网页、REST API |
| SayMotion | 文字提示或已有动作片段 | FBX、BVH、GLB、MP4 动画 | 文字生成、延长、插入、合并和混合动作 | 网页、REST API |
| Real-Time SDK | 实时摄像头或应用数据 | 实时人体追踪结果 | 互动应用、游戏和虚拟角色驱动 | 联系销售开通 |
Animate 3D 主要功能
单摄像机无标记动捕
用户上传普通人体视频,系统识别关节轨迹并生成骨骼动画,不需要动捕服、传感器或专用摄影棚。它适合把手机拍摄、档案素材、舞蹈、体育和表演视频转为可编辑动作。
全身、手部与面部跟踪
Animate 3D 可以跟踪全身动作,并按任务开启手部和面部跟踪。每秒全身动画通常消耗 1 积分,手部和面部跟踪各额外消耗 0.5 积分,因此同时开启会提高用量。
多人动作捕捉
同一段视频可选择多个人物并分别绑定角色,人数上限随套餐从 2 人增加到 8 人。人物互相遮挡、重叠或离开画面会降低跟踪稳定性,多人任务应预留更清晰的站位和背景。
物理与动作修正
平台提供脚部锁定、物理过滤、动作平滑、慢动作处理、根骨骼设置和速度调整。Rotoscope Pose Editor 允许逐帧修正关节,用户可通过 rerun 比较不同参数,但平滑过强也可能损失原始动作细节。
自定义角色与重定向
用户可以选用默认角色、创建头像,或上传 FBX、GLB 自定义类人角色,系统把捕捉动作重定向到目标骨架。角色骨架、比例和命名不符合要求时仍需在 Blender、Maya、Unity 或 Unreal Engine 中继续整理。
多格式导出
常见输出包括 FBX、BVH、GLB、MP4、JPG、PNG 和 GIF,Professional 与 Studio 另提供 DMPE。FBX 和 BVH 适合动画管线,GLB 便于网页与实时应用,视频和图片主要用于预览与沟通。
SayMotion 主要功能
文字生成 3D 动作
用户用文字描述人物动作、速度、情绪、肢体方向和表演风格,SayMotion 生成多个 3D 动作变体。它适合快速寻找库存动作库中没有的表演,也能为剧本、游戏原型和虚拟角色建立初稿。
动作插入与延长
Inpainting 可在动作开头、中间或结尾插入文字描述的新片段,并用于延长或局部修改现有动画。用户还能合并不同动作,再通过剪辑长度、脚部锁定、物理过滤和平滑控制过渡。
提示辅助与故事编排
Prompt Enhancer 帮助补充动作描述,Story Mode 用连续指令组织较长表演。生成模型仍可能误解复杂空间关系、双人交互或精确节奏,关键镜头需要逐段生成、选择和手工调整。
视频拍摄要求
- 使用真人或清晰类人动作视频,卡通和抽象人物不适合作为捕捉对象。
- 相机距人物约 2 至 6 米并保持固定,常规动作尽量正对拍摄。
- 确保需要追踪的全身、半身或面部持续可见,避免道具、家具和其他人物遮挡关节。
- 地面动作可采用四分之三角度,减少身体部位相互遮挡。
- 使用中性且均匀的光照,避免过亮、过暗、运动模糊和强烈背光。
- 让人物与背景形成明显对比,服装不要宽松遮住膝、肘等关键关节。
- 选择符合套餐片长、文件大小、分辨率和帧率限制的视频,当前数值以价格页为准。
Animate 3D 使用教程
- 注册并验证 DeepMotion 账号,在门户中选择 Animate 3D 和当前套餐。
- 准备符合捕捉指南的视频,先裁掉无关片段并确认人物、关节和地面清晰可见。
- 创建动画任务,上传视频,选择单人或多人、全身、手部、面部和目标角色。
- 设置脚部锁定、物理过滤、根骨骼、平滑和输出参数,然后提交处理。
- 在预览器中对照原视频检查脚滑、穿插、关节跳动和人物错配。
- 必要时使用 Rotoscope Pose Editor 逐帧修正,或用 rerun 调整设置重新生成。
- 下载 FBX、BVH、GLB 或预览媒体,再导入目标三维软件或游戏引擎完成重定向和清理。
SayMotion 使用流程
- 选择角色并输入动作、方向、速度、情绪和持续时间,避免一次要求过多互相冲突的细节。
- 选择变体数量并生成,比较节奏、姿态、脚步和空间方向。
- 使用剪辑、合并或 Inpainting 插入新动作,逐段建立较长表演。
- 启用平滑、物理过滤和脚部锁定,检查过渡是否自然。
- 导出目标格式,进入动画软件或引擎进行角色重定向、镜头和最终润色。
适合用户与场景
- 独立游戏开发者:把演员视频快速转为原型动作并导入 Unity、Unreal Engine 或 Roblox 流程。
- 三维动画师:为 Blender、Maya、3ds Max 或其他工具准备基础骨骼动画。
- 影视与虚拟制作团队:从现场或档案视频提取动作,减少基础关键帧工作。
- 舞蹈、体育和教育创作者:把真人示范转换为数字人动作或可视化素材。
- VR、AR 和虚拟人产品团队:通过 API 或实时 SDK 将人体追踪集成到应用。
- 内容创作者:用文字生成短动作,再结合视频捕捉建立更丰富的角色表演。
Animate 3D 价格
以下为当前页面显示的年付折算月价,月付价格可能不同。价格、税费、地区结算与促销应以实际结算页面和账户后台为准。
| 套餐或版本 | 价格 | 计费周期 | 核心权益或额度 | 适合用户 |
|---|---|---|---|---|
| Freemium | 免费 | 每月重置 | 25积分;20秒每片;2人;1次重跑;3角色;1080p;无商业许可 | 个人非商用测试 |
| Starter | 9美元/月 | 按年支付 | 180积分;20秒;3人;3次重跑;5角色;1080p | 轻量付费创作者 |
| Innovator | 17美元/月 | 按年支付 | 480积分;30秒;4人;5次重跑;10角色;1080p与60帧 | 持续制作的个人或小团队 |
| Professional | 39美元/月 | 按年支付 | 1500积分;120秒;6人;25次重跑;20角色;4K与120帧 | 专业动画制作 |
| Studio | 83美元/月 | 按年支付 | 不限积分;前7200积分最高优先级;360秒;8人;50角色;8K | 高用量工作室 |
积分按月重置且不结转,1 积分通常对应 1 秒全身动画或 1 个 3D 姿势。帮助中心仍有免费每月 60 秒的旧表述,与当前价格页的 25 积分不一致,应以登录后的实际额度为准。
SayMotion 价格
| 套餐或版本 | 价格 | 计费周期 | 核心权益或额度 | 适合用户 |
|---|---|---|---|---|
| Freemium | 免费 | 每月重置 | 3积分;1次下载;2个变体;10秒剪辑;3角色 | 文字动作试用 |
| Starter | 9美元/月 | 按年支付 | 15积分;不限下载;4个变体;20秒;5角色 | 低频创作者 |
| Professional | 39美元/月 | 按年支付 | 400积分;6个变体;120秒;20角色;高优先级 | 专业内容制作 |
| Studio | 83美元/月 | 按年支付 | 1000积分;8个变体;360秒;50角色;最高优先级 | 工作室与高用量团队 |
Animate 3D 与 SayMotion 是分开的订阅与额度体系,不应混用积分或权益。付费计划的商业许可和 API 方案也应在购买前分别确认。
免费积分计划
Animate 3D 用户可通过为新上传动作撰写英文动作标签,以及在姿势编辑器中修正关节来赚回积分。标签和修正会用于改进 Animate 3D 与 SayMotion,参与者应理解这是带有模型改进用途的贡献机制。
- 标签质量按动作类型、风格和描述完整度评分,目前评估模型以英语为主。
- 姿势修正按骨长和关节角度接近人体机械模型的程度评分。
- 用户可能赚回任务消耗的部分或全部积分,但不是所有动画自动免费。
- 获得方式不改变许可证,商业授权仍由生成时所用套餐决定。
- 赚取的积分随套餐月度周期重置,不结转到下月。
商业许可与退款
Freemium 仅用于个人非商业用途;付费计划对订阅期间创建的产品授予永久、非独占、全额付费、免版税和全球商业许可。动画可以嵌入游戏、软件、应用、视频或电影等完整作品中发行。
- 不得把动画文件作为独立数字资产出售、再许可或提供下载。
- 不得仅换角色后把几乎相同的动作作为资产包销售。
- 终端用户不应能在无需逆向工程的情况下从成品中提取动画资产。
- 所有购买为最终交易且不退款;用户可以取消续订,套餐持续到当前结算周期结束。
- 升级会按比例收取差价并立即补充新套餐对应额度。
API、SDK 与 GitHub
DeepMotion 提供 Animate 3D 和 SayMotion REST API,用于批量上传、生成、查询状态、接收 Webhook、管理角色及下载动画。Animate 3D API 使用 Client ID 与 Client Secret 获取访问令牌,API 访问和用量价格需要申请。
- 注册门户账号并在 API 区提交访问申请,等待获得客户端凭据和套餐。
- 在服务端安全保存密钥,按认证流程换取令牌,不要把密钥写入前端或公开仓库。
- 上传视频或提交文字任务,保存返回的任务标识。
- 通过轮询或 Webhook 获取完成状态,再下载 FBX、BVH 等结果。
- 在生产环境增加重试、超时、额度、内容验证和文件清理策略。
官方提供 Python 和 JavaScript/TypeScript SDK 包,并公开两个 API 文档与示例仓库。仓库未检测到标准开源许可证元数据,核心云平台、模型和 Real-Time SDK 也未公开源码,因此不能把 DeepMotion 产品本身称为开源。
平台与集成
| 渠道 | 支持情况 | 说明 |
|---|---|---|
| 桌面浏览器 | 支持 | 完整门户、生成、编辑和下载流程 |
| 移动浏览器 | 支持 | 单人捕捉可用;部分多人标注功能仍受限制 |
| 原生 iOS 与 Android 应用 | 暂未发现 | 移动网页支持不等于原生应用 |
| Chrome 扩展 | 暂未发现 | 未核实到官方浏览器扩展 |
| REST API | 支持 | Animate 3D 与 SayMotion 分别提供,需申请访问 |
| Real-Time SDK | 提供 | 面向实时追踪与应用集成,联系销售 |
隐私与数据安全
DeepMotion 会处理账号与联系信息、设备与日志、Cookie、使用元数据,以及上传的视频和 3D 模型。上传内容默认不会向其他 Animate 3D 用户公开,但仍会在云端处理并可能与服务提供商的数据基础设施交互。
- 基础设施与服务商包括 Google Cloud、SendGrid、Okta 和 Citrix Podio 等。
- 信息可能在美国或服务商设施所在的其他国家处理,涉及跨境传输。
- 终止账号后,私人档案可因备份、归档或审计保留商业合理时间,未给出固定天数。
- 自愿公开的内容可能无法完全移除,上传前应确认肖像权、表演权和素材许可。
- 免费积分计划的标签与动作修正用于改进产品,不适合提交受保密协议约束的描述。
- 企业和敏感项目应进一步确认内容保存、删除、训练排除、子处理方和安全合同。
优势
- 只需普通视频即可完成基础人体动捕,降低硬件和场地门槛。
- 同时覆盖视频捕捉与文字生成,并能合并和编辑两类动作。
- 支持全身、手、脸、多人、自定义角色和多种动画输出格式。
- 提供逐帧姿势修正、脚部锁定、物理过滤和动作平滑等实用后处理。
- 网页、REST API 与实时 SDK 覆盖个人制作、批处理和应用内集成。
限制与注意事项
- 遮挡、移动相机、低对比、宽松服装和复杂地面动作会造成关节抖动、脚滑或穿插。
- 生成动作仍需动画师检查骨架、重定向、接触点、节奏和角色比例。
- 文字生成不保证精确复现复杂编舞、多人互动或专业体育技术。
- 免费计划没有商业许可,付费许可也禁止独立转售和再分发动画资产。
- 积分每月清零,手部和面部追踪会额外消耗积分。
- 部分帮助文档的旧额度与当前价格页冲突,购买前需查看登录后台和结算页。
- 核心模型与云平台不开源,API 仓库公开不代表可以自托管服务。
常见问题
DeepMotion 需要动捕服吗
不需要。Animate 3D 从普通单摄像机人体视频提取动作,但清晰的拍摄、无遮挡关节和稳定相机仍会显著影响结果。
免费版可以商用吗
不可以。Freemium 面向个人非商业使用,商业项目需要在生成动画时使用付费计划。
1 个积分能生成多少动画
通常 1 积分对应 1 秒全身动画或 1 个 3D 姿势。手部和面部跟踪各额外消耗每秒 0.5 积分。
积分会结转吗
不会。月付和年付套餐的积分都按订阅月重置,未使用积分不会带到下一个周期。
支持哪些输入输出格式
Animate 3D 接收 MP4、MOV 和 AVI 视频,常见导出为 FBX、BVH、GLB、MP4、JPG、PNG 和 GIF。具体格式、片长和大小上限随套餐变化。
可以把生成动作做成资产包出售吗
不能把动画作为独立数字资产转售或再许可。可以把动作嵌入游戏、应用、视频和电影等完整作品,并按条款发行成品。
DeepMotion 是开源的吗
核心产品不是已核实的开源软件。官方公开了 API 文档、示例和 SDK 接入信息,但没有为核心云平台、模型或实时 SDK 提供开源许可证。
取消订阅会退款吗
条款写明购买最终且不退款。取消后不会再续费,已付套餐通常持续到当前结算周期结束。
总结
DeepMotion 适合用普通视频或文字快速建立角色动作,再导入游戏、影视与三维制作流程。选择套餐时应同时评估积分、片长、多人数量、导出规格和商业许可,并为动作清理与工程集成预留人工环节。
桂公网安备45132202000164号