Convai 是什麼
Convai 是由 Convai Technologies Inc. 所開發的即時型 AI 角色平台,其主要用於幫助遊戲、XR、虛擬世界以及培訓專案,打造能夠對話、感知環境並執行動作的 NPC 或虛擬人物。
它將角色設定、知識、語言模型、語音、視覺、動畫以及運行時介面結合在一起,開發者可以透過無程式碼工具來創建角色,再將這些角色整合到 Unity、Unreal Engine 或網頁應用中。
主要功能
角色思維與知識庫
- 角色創建器可設定姓名、背景故事、目標、性格、說話風格和行為邊界,用於約束角色身份與回答方式。
- 知識庫支援上傳專案資料,讓角色圍繞指定世界觀、產品、課程或任務回答,而非僅依賴通用模型知識。
- 敘事設計與動作配置可定義事件、目標及可調用的行為,使對話能夠推動任務或遊戲流程。
實時語音與多語言對話
- 運行時接收玩家的語音或文字輸入,返回文字、合成的語音以及與回答相關的角色動作。
- 平台提供 60 多種語言和 500 多種聲音選擇,具體語言、聲音和第三方語音額度受當前方案影響。
- 實時體驗受網路、語音識別、模型回應和渲染鏈路共同影響,發布前應在目標地區和設備上測試延遲。
視覺與環境感知
- 視覺能力可接收攝影機畫面、第一人稱視角或遊戲場景資訊,讓角色描述對象並結合環境回應。
- 開發者可向角色傳遞場景元數據、對象和狀態,使回答與當前位置、可見物體或事件保持聯繫。
- 視覺識別可能遺漏對象或誤判情境,涉及安全、教育評估和真實世界操作時不能只依賴自動結果。
動作、動畫與脣形同步
- 角色可以根據對話觸發手勢、面部表情、唇形以及伺服器端的動畫,亦可執行開發者所設定的複雜動作序列。
- 動作介面適用於開門、拾取、移動、引導或播放動畫等任務,但必須透過專案代碼將可用的動作安全地提供給角色使用。
- Avatar Studio 可在網頁中配置外觀、服裝、場景、燈光、攝影機和動畫,減少原型階段的美術與腳本工作。
記憶、評估與角色版本
- 付費方案提供長期記憶與角色版本功能,可讓角色保留跨會話資訊並在修改後管理不同版本。
- Professional 及以上方案提供會話評估功能,適合檢查互動品質、角色一致性及任務完成情況。
- 記憶會增加個人資訊和錯誤資訊長期保留的風險,項目應限定可記錄的內容並設計刪除、更正和重新開始的機制。
無代碼體驗與動作捕捉
- Playground 用於創建、調整和測試角色,適合在寫代碼前驗證人設、知識和對話效果。
- Convai Sim 面向較大規模模擬,可讓角色在場景中導航並與對象互動。
- XR Animation Capture 可透過 Meta Quest 裝置錄製人體動作,再將動畫應用於 Unity 中的角色。
輸入與輸出
| 環節 | 主要輸入 | 主要輸出 | 適合任務 |
|---|---|---|---|
| 角色設計 | 背景、目標、性格、語言與知識文件 | 可測試的角色配置 | NPC、導師、接待員與品牌角色 |
| 實時互動 | 語音、文本和會話上下文 | 文本、合成語音與對話狀態 | 遊戲對話、問答與訓練演練 |
| 環境感知 | 畫面、場景資訊、對象和事件 | 結合環境的回應與行為判斷 | XR引導、空間互動與模擬 |
| 角色動作 | 可用動作、動畫和觸發條件 | 手勢、唇形、移動或對象操作 | 沉浸式 NPC 與虛擬人 |
| 分析評估 | 會話記錄與角色版本 | 互動評估和迭代依據 | 品質檢查與角色調優 |
使用流程
- 註冊帳戶並創建角色,填寫背景故事、性格、目標、語言和說話風格。
- 上傳有權使用的知識資料,設定角色可回答的主題、禁止內容及敘事規則。
- 在 Playground 中用多輪文本與語音測試角色,檢查事實、語氣、延遲和異常輸入。
- 選擇 Unity SDK、Unreal Engine 插件、Web 插件或 API,建立專案金鑰並依照文件說明進行連接。
- 將場景對象、動作、動畫和視覺資訊映射到角色,限制可執行操作及其權限。
- 在目標設備和網路環境中完成併發、額度、隱私、內容安全及失敗回退測試後再發布。
平台與集成
| 平台或方式 | 接入形式 | 主要用途 | 注意事項 |
|---|---|---|---|
| Unity | Unity SDK | 遊戲、VR、AR 和互動式應用 | 需配置角色、密鑰、音頻與場景動作 |
| Unreal Engine | 引擎插件 | 高保真遊戲和即時虛擬人 | 當前插件倉庫採用 Apache 2.0 讓許可證 |
| Web | Web 插件與嵌入組件 | 網站中的 3D 角色和對話體驗 | 嵌入域名權益受方案限制 |
| Pixel Streaming | 嵌入式集成 | 瀏覽器訪問雲端渲染體驗 | 同時消耗角色互動與雲渲染資源 |
| API | 運行時與角色創建介面 | 自訂用戶端、後台和自動化流程 | 角色創建介面僅部分付費方案提供 |
| Meta Quest | XR Animation Capture 應用 | 錄製動作並用於角色動畫 | 需要相容設備及後續 Unity 工作流程 |
價格套餐
一次互動以一次使用者輸入及一次角色回應來計算,語音和文字皆適用。未使用的月度互動不會結轉,且並發額度是根據同一 API 金鑰下的所有角色和使用者所合計的數值。
| 套餐或版本 | 價格 | 計費週期 | 核心權益或額度 | 適合用戶 |
|---|---|---|---|---|
| Free | 0 美元 | 每月 | 100 次互動;60 分鐘雲端渲染;1 路角色併發 | 學習與小型原型 |
| Indie Dev | 29美元;按年支付則為22美元/月 | 月付或年付 | 3000 次互動;600 分鐘雲端渲染;1 路角色併發 | 獨立開發者 |
| Professional | 99美元;年付折算為69美元/月 | 月付或年付 | 10000 次互動;2400 分鐘雲端渲染;3 路角色併發 | 正式項目與小型團隊 |
| Scale | 499美元;按年支付則為299美元/月 | 月付或年付 | 50000 次互動;10200 分鐘雲端渲染;15 路角色並發 | 成長期產品 |
| Business | 1199美元;按年支付則為499美元/月 | 月付或年付 | 125000 次互動;21000 分鐘雲端渲染;30 路角色並發 | 高用量商業部署 |
| Enterprise | 訂製報價 | 合同約定 | 獨立部署、服務保障、優先支援與數據集成 | 大型組織與受控環境 |
Business的年度訂閱價格目前標示著「限時優惠」,此價格並未包含可能產生的稅金。地區、帳戶類型、促銷活動以及結算週期都可能影響最終的金額,因此應以實際的結算頁面或銷售合約為準。
方案中的重要差異
| 項目 | Free | Indie Dev | Professional | Scale | Business |
|---|---|---|---|---|---|
| 知識庫容量 | 無 | 5 MB | 20 MB | 100 MB | 300 MB |
| 長期記憶與版本 | 不含 | 包含 | 包含 | 包含 | 包含 |
| 每月活躍用戶 | 1 | 75 | 250 | 1250 | 2500 |
| 嵌入域名 | 不含 | 不含 | 2 個 | 2 個 | 2 個 |
| 角色創建介面 | 不含 | 不含 | 每月 100 次請求 | 每月 5000 次請求 | 每月 12000 次請求 |
| 會話評估 | 不含 | 不含 | 包含 | 包含 | 包含 |
API、SDK 與開源狀態
- 平台提供 API 參考、Unity SDK、Unreal Engine 插件、Web 插件、模組框架和範例專案,可用於自訂運行時接入。
- 目前,Unreal Engine SDK及其舊版插件庫均標示為採用Apache 2.0許可證,而部分Unity WebGL、Web SDK以及範例庫則未註明其許可證類型。
- 代碼倉庫可公開訪問並不等於獲得任意複製或商用授權;沒有許可證的倉庫應按預設版權保護處理。
- Convai 的託管角色平台、模型、帳戶與雲服務並非整體開源產品,SDK 或插件開源不能等同於平台開源。
內容權利、隱私與安全
- 條款將角色設定、知識、場景、語音、文本和視覺資訊歸入客戶內容,並說明客戶持續擁有客戶內容及 AI 生成內容。
- Creator套裝授予Convai全球範圍內的、無版稅的使用許可,使其能夠儲存並使用客戶內容及AI生成的內容,用於開發和改進服務,除非有另外的書面約定。
- Enterprise 套餐在未獲得明確同意時不收集、儲存或使用用戶生成的數據,具體處理方式由企業協議和配置決定。
- 隱私政策稱會收集帳戶溝通、設備、IP、使用、位置估算和角色互動資訊,並可能與雲端、託管、分析等服務商共享。
- 帳戶關閉後,根據相關規定,帳戶資料會在 30 天內被刪除;若帳戶持續處於無活動狀態,其資料則會在兩年後被刪除,而其他資料則可因業務或合規需求而繼續保留。
- 資料可能傳輸至美國,用戶在部署面向終端用戶的角色時,需要自行提供通知、取得必要同意並處理終端用戶的權利。
- 平台提供內容安全防護機制,並為企業方案提供安全、合規及本地部署的選項,但網路傳輸與生成式模型仍無法保證絕對正確或完全安全。
付款、退款與使用限制
- 付費訂閱會按計費週期收費,付款通常不退款,除非雙方另有約定;稅費需要另行承擔。
- 升級價格通常從下一計費週期開始生效,取消時間、降級處理及剩餘額度安排應在帳戶結算頁確認。
- 禁止創建多個帳戶重複領取免費額度,異常使用可能導致按標準收費或終止服務。
- 角色回答、視覺識別和動作決策可能不準確,醫療、法律、金融、安全培訓或真實設備控制必須增加人工監督和確定性規則。
- 併發量依 API 金鑰進行聚合,多個角色或大量終端用戶將共享上限;上線前應依峰值流量進行容量測試。
- 第三方聲音、模型、頭像、引擎和雲渲染可能另有費用、許可證與資料處理條款。
常見問題
Convai主要用來做什麼?
它用於創建能夠進行語音或文字對話、感知場景、調用動作並帶動畫表現的 AI NPC 與虛擬人,適合用於遊戲、XR、培訓與虛擬世界。
免費方案包含多少額度?
免費方案每月包含 100 次互動、60 分鐘雲端渲染以及 1 路角色併發,未使用的互動不會結轉。
Convai 支援 Unity 和 Unreal Engine 嗎?
支持。開發者可使用 Unity SDK、Unreal Engine 插件以及網頁插件和 API,把角色接入不同運行環境。
Convai 是開源產品嗎?
並非整體都是開源產品。雖然有些 Unreal 附加元件是採用 Apache 2.0 授權,但存放這些附加元件的平台以及那些沒有授權的儲存庫,則不能因此被視為開源。
生成的內容可以商用嗎?
條款說明:客戶擁有其自己的內容以及由 AI 生成的內容,但使用者仍需確保所輸入的資料、第三方的聲音、頭像、動畫以及最終的輸出成果,都不會侵犯他人的權利,並且必須遵守相關的套餐規定及第三方的許可條件。
Convai 會使用角色數據改善服務嗎?
Creator套裝的條款允許其儲存並使用客戶內容以及AI生成的內容,用於開發和改進服務,除非有書面約定;而Enterprise套裝中的資料處理方式,则需根據明確的同意、設定及企業協議來決定。
桂公網安備45132202000164號