DeepMotion
免费增值
AI工具大全 AI编程工具

DeepMotion

DeepMotion,让AI编程工作更高效、更简单

标签:

DeepMotion 是什么

DeepMotion 是 DeepMotion, Inc. 开发的 AI 人体动作捕捉与 3D 动画平台,主要产品包括视频转动作的 Animate 3D 和文字转动作的 SayMotion。它让用户用普通摄像机视频或自然语言生成可导入游戏引擎、三维软件和影视流程的角色动画。

平台重点处理人体和类人角色运动,不是代码生成工具,也不是从图片直接建立完整 3D 模型的建模软件。动作质量仍受拍摄角度、遮挡、服装、光照、人物比例和后续重定向影响。

核心产品对比

产品主要输入主要输出核心用途使用方式
Animate 3DMP4、MOV、AVI 人体视频FBX、BVH、GLB、视频和图片预览无标记全身、手、脸及多人动作捕捉网页、REST API
SayMotion文字提示或已有动作片段FBX、BVH、GLB、MP4 动画文字生成、延长、插入、合并和混合动作网页、REST API
Real-Time SDK实时摄像头或应用数据实时人体追踪结果互动应用、游戏和虚拟角色驱动联系销售开通

Animate 3D 主要功能

单摄像机无标记动捕

用户上传普通人体视频,系统识别关节轨迹并生成骨骼动画,不需要动捕服、传感器或专用摄影棚。它适合把手机拍摄、档案素材、舞蹈、体育和表演视频转为可编辑动作。

全身、手部与面部跟踪

Animate 3D 可以跟踪全身动作,并按任务开启手部和面部跟踪。每秒全身动画通常消耗 1 积分,手部和面部跟踪各额外消耗 0.5 积分,因此同时开启会提高用量。

多人动作捕捉

同一段视频可选择多个人物并分别绑定角色,人数上限随套餐从 2 人增加到 8 人。人物互相遮挡、重叠或离开画面会降低跟踪稳定性,多人任务应预留更清晰的站位和背景。

物理与动作修正

平台提供脚部锁定、物理过滤、动作平滑、慢动作处理、根骨骼设置和速度调整。Rotoscope Pose Editor 允许逐帧修正关节,用户可通过 rerun 比较不同参数,但平滑过强也可能损失原始动作细节。

自定义角色与重定向

用户可以选用默认角色、创建头像,或上传 FBX、GLB 自定义类人角色,系统把捕捉动作重定向到目标骨架。角色骨架、比例和命名不符合要求时仍需在 Blender、Maya、Unity 或 Unreal Engine 中继续整理。

多格式导出

常见输出包括 FBX、BVH、GLB、MP4、JPG、PNG 和 GIF,Professional 与 Studio 另提供 DMPE。FBX 和 BVH 适合动画管线,GLB 便于网页与实时应用,视频和图片主要用于预览与沟通。

SayMotion 主要功能

文字生成 3D 动作

用户用文字描述人物动作、速度、情绪、肢体方向和表演风格,SayMotion 生成多个 3D 动作变体。它适合快速寻找库存动作库中没有的表演,也能为剧本、游戏原型和虚拟角色建立初稿。

动作插入与延长

Inpainting 可在动作开头、中间或结尾插入文字描述的新片段,并用于延长或局部修改现有动画。用户还能合并不同动作,再通过剪辑长度、脚部锁定、物理过滤和平滑控制过渡。

提示辅助与故事编排

Prompt Enhancer 帮助补充动作描述,Story Mode 用连续指令组织较长表演。生成模型仍可能误解复杂空间关系、双人交互或精确节奏,关键镜头需要逐段生成、选择和手工调整。

视频拍摄要求

  • 使用真人或清晰类人动作视频,卡通和抽象人物不适合作为捕捉对象。
  • 相机距人物约 2 至 6 米并保持固定,常规动作尽量正对拍摄。
  • 确保需要追踪的全身、半身或面部持续可见,避免道具、家具和其他人物遮挡关节。
  • 地面动作可采用四分之三角度,减少身体部位相互遮挡。
  • 使用中性且均匀的光照,避免过亮、过暗、运动模糊和强烈背光。
  • 让人物与背景形成明显对比,服装不要宽松遮住膝、肘等关键关节。
  • 选择符合套餐片长、文件大小、分辨率和帧率限制的视频,当前数值以价格页为准。

Animate 3D 使用教程

  1. 注册并验证 DeepMotion 账号,在门户中选择 Animate 3D 和当前套餐。
  2. 准备符合捕捉指南的视频,先裁掉无关片段并确认人物、关节和地面清晰可见。
  3. 创建动画任务,上传视频,选择单人或多人、全身、手部、面部和目标角色。
  4. 设置脚部锁定、物理过滤、根骨骼、平滑和输出参数,然后提交处理。
  5. 在预览器中对照原视频检查脚滑、穿插、关节跳动和人物错配。
  6. 必要时使用 Rotoscope Pose Editor 逐帧修正,或用 rerun 调整设置重新生成。
  7. 下载 FBX、BVH、GLB 或预览媒体,再导入目标三维软件或游戏引擎完成重定向和清理。

SayMotion 使用流程

  1. 选择角色并输入动作、方向、速度、情绪和持续时间,避免一次要求过多互相冲突的细节。
  2. 选择变体数量并生成,比较节奏、姿态、脚步和空间方向。
  3. 使用剪辑、合并或 Inpainting 插入新动作,逐段建立较长表演。
  4. 启用平滑、物理过滤和脚部锁定,检查过渡是否自然。
  5. 导出目标格式,进入动画软件或引擎进行角色重定向、镜头和最终润色。

适合用户与场景

  • 独立游戏开发者:把演员视频快速转为原型动作并导入 Unity、Unreal Engine 或 Roblox 流程。
  • 三维动画师:为 Blender、Maya、3ds Max 或其他工具准备基础骨骼动画。
  • 影视与虚拟制作团队:从现场或档案视频提取动作,减少基础关键帧工作。
  • 舞蹈、体育和教育创作者:把真人示范转换为数字人动作或可视化素材。
  • VR、AR 和虚拟人产品团队:通过 API 或实时 SDK 将人体追踪集成到应用。
  • 内容创作者:用文字生成短动作,再结合视频捕捉建立更丰富的角色表演。

Animate 3D 价格

以下为当前页面显示的年付折算月价,月付价格可能不同。价格、税费、地区结算与促销应以实际结算页面和账户后台为准。

套餐或版本价格计费周期核心权益或额度适合用户
Freemium免费每月重置25积分;20秒每片;2人;1次重跑;3角色;1080p;无商业许可个人非商用测试
Starter9美元/月按年支付180积分;20秒;3人;3次重跑;5角色;1080p轻量付费创作者
Innovator17美元/月按年支付480积分;30秒;4人;5次重跑;10角色;1080p与60帧持续制作的个人或小团队
Professional39美元/月按年支付1500积分;120秒;6人;25次重跑;20角色;4K与120帧专业动画制作
Studio83美元/月按年支付不限积分;前7200积分最高优先级;360秒;8人;50角色;8K高用量工作室

积分按月重置且不结转,1 积分通常对应 1 秒全身动画或 1 个 3D 姿势。帮助中心仍有免费每月 60 秒的旧表述,与当前价格页的 25 积分不一致,应以登录后的实际额度为准。

SayMotion 价格

套餐或版本价格计费周期核心权益或额度适合用户
Freemium免费每月重置3积分;1次下载;2个变体;10秒剪辑;3角色文字动作试用
Starter9美元/月按年支付15积分;不限下载;4个变体;20秒;5角色低频创作者
Professional39美元/月按年支付400积分;6个变体;120秒;20角色;高优先级专业内容制作
Studio83美元/月按年支付1000积分;8个变体;360秒;50角色;最高优先级工作室与高用量团队

Animate 3D 与 SayMotion 是分开的订阅与额度体系,不应混用积分或权益。付费计划的商业许可和 API 方案也应在购买前分别确认。

免费积分计划

Animate 3D 用户可通过为新上传动作撰写英文动作标签,以及在姿势编辑器中修正关节来赚回积分。标签和修正会用于改进 Animate 3D 与 SayMotion,参与者应理解这是带有模型改进用途的贡献机制。

  • 标签质量按动作类型、风格和描述完整度评分,目前评估模型以英语为主。
  • 姿势修正按骨长和关节角度接近人体机械模型的程度评分。
  • 用户可能赚回任务消耗的部分或全部积分,但不是所有动画自动免费。
  • 获得方式不改变许可证,商业授权仍由生成时所用套餐决定。
  • 赚取的积分随套餐月度周期重置,不结转到下月。

商业许可与退款

Freemium 仅用于个人非商业用途;付费计划对订阅期间创建的产品授予永久、非独占、全额付费、免版税和全球商业许可。动画可以嵌入游戏、软件、应用、视频或电影等完整作品中发行。

  • 不得把动画文件作为独立数字资产出售、再许可或提供下载。
  • 不得仅换角色后把几乎相同的动作作为资产包销售。
  • 终端用户不应能在无需逆向工程的情况下从成品中提取动画资产。
  • 所有购买为最终交易且不退款;用户可以取消续订,套餐持续到当前结算周期结束。
  • 升级会按比例收取差价并立即补充新套餐对应额度。

API、SDK 与 GitHub

DeepMotion 提供 Animate 3D 和 SayMotion REST API,用于批量上传、生成、查询状态、接收 Webhook、管理角色及下载动画。Animate 3D API 使用 Client ID 与 Client Secret 获取访问令牌,API 访问和用量价格需要申请。

  1. 注册门户账号并在 API 区提交访问申请,等待获得客户端凭据和套餐。
  2. 在服务端安全保存密钥,按认证流程换取令牌,不要把密钥写入前端或公开仓库。
  3. 上传视频或提交文字任务,保存返回的任务标识。
  4. 通过轮询或 Webhook 获取完成状态,再下载 FBX、BVH 等结果。
  5. 在生产环境增加重试、超时、额度、内容验证和文件清理策略。

官方提供 Python 和 JavaScript/TypeScript SDK 包,并公开两个 API 文档与示例仓库。仓库未检测到标准开源许可证元数据,核心云平台、模型和 Real-Time SDK 也未公开源码,因此不能把 DeepMotion 产品本身称为开源。

平台与集成

渠道支持情况说明
桌面浏览器支持完整门户、生成、编辑和下载流程
移动浏览器支持单人捕捉可用;部分多人标注功能仍受限制
原生 iOS 与 Android 应用暂未发现移动网页支持不等于原生应用
Chrome 扩展暂未发现未核实到官方浏览器扩展
REST API支持Animate 3D 与 SayMotion 分别提供,需申请访问
Real-Time SDK提供面向实时追踪与应用集成,联系销售

隐私与数据安全

DeepMotion 会处理账号与联系信息、设备与日志、Cookie、使用元数据,以及上传的视频和 3D 模型。上传内容默认不会向其他 Animate 3D 用户公开,但仍会在云端处理并可能与服务提供商的数据基础设施交互。

  • 基础设施与服务商包括 Google Cloud、SendGrid、Okta 和 Citrix Podio 等。
  • 信息可能在美国或服务商设施所在的其他国家处理,涉及跨境传输。
  • 终止账号后,私人档案可因备份、归档或审计保留商业合理时间,未给出固定天数。
  • 自愿公开的内容可能无法完全移除,上传前应确认肖像权、表演权和素材许可。
  • 免费积分计划的标签与动作修正用于改进产品,不适合提交受保密协议约束的描述。
  • 企业和敏感项目应进一步确认内容保存、删除、训练排除、子处理方和安全合同。

优势

  • 只需普通视频即可完成基础人体动捕,降低硬件和场地门槛。
  • 同时覆盖视频捕捉与文字生成,并能合并和编辑两类动作。
  • 支持全身、手、脸、多人、自定义角色和多种动画输出格式。
  • 提供逐帧姿势修正、脚部锁定、物理过滤和动作平滑等实用后处理。
  • 网页、REST API 与实时 SDK 覆盖个人制作、批处理和应用内集成。

限制与注意事项

  • 遮挡、移动相机、低对比、宽松服装和复杂地面动作会造成关节抖动、脚滑或穿插。
  • 生成动作仍需动画师检查骨架、重定向、接触点、节奏和角色比例。
  • 文字生成不保证精确复现复杂编舞、多人互动或专业体育技术。
  • 免费计划没有商业许可,付费许可也禁止独立转售和再分发动画资产。
  • 积分每月清零,手部和面部追踪会额外消耗积分。
  • 部分帮助文档的旧额度与当前价格页冲突,购买前需查看登录后台和结算页。
  • 核心模型与云平台不开源,API 仓库公开不代表可以自托管服务。

常见问题

DeepMotion 需要动捕服吗

不需要。Animate 3D 从普通单摄像机人体视频提取动作,但清晰的拍摄、无遮挡关节和稳定相机仍会显著影响结果。

免费版可以商用吗

不可以。Freemium 面向个人非商业使用,商业项目需要在生成动画时使用付费计划。

1 个积分能生成多少动画

通常 1 积分对应 1 秒全身动画或 1 个 3D 姿势。手部和面部跟踪各额外消耗每秒 0.5 积分。

积分会结转吗

不会。月付和年付套餐的积分都按订阅月重置,未使用积分不会带到下一个周期。

支持哪些输入输出格式

Animate 3D 接收 MP4、MOV 和 AVI 视频,常见导出为 FBX、BVH、GLB、MP4、JPG、PNG 和 GIF。具体格式、片长和大小上限随套餐变化。

可以把生成动作做成资产包出售吗

不能把动画作为独立数字资产转售或再许可。可以把动作嵌入游戏、应用、视频和电影等完整作品,并按条款发行成品。

DeepMotion 是开源的吗

核心产品不是已核实的开源软件。官方公开了 API 文档、示例和 SDK 接入信息,但没有为核心云平台、模型或实时 SDK 提供开源许可证。

取消订阅会退款吗

条款写明购买最终且不退款。取消后不会再续费,已付套餐通常持续到当前结算周期结束。

总结

DeepMotion 适合用普通视频或文字快速建立角色动作,再导入游戏、影视与三维制作流程。选择套餐时应同时评估积分、片长、多人数量、导出规格和商业许可,并为动作清理与工程集成预留人工环节。

©️版权声明:若无特殊声明,本站所有文章版权均归AI工具分享原创和所有,未经许可,任何个人、媒体、网站、团体不得转载、抄袭或以其他方式复制发表本站内容,或在非我站所属的服务器上建立镜像。否则,我站将依法保留追究相关法律责任的权利。

类似于DeepMotion的工具