Cloudglue

Cloudglue 是什麼

Cloudglue 是由 Aviary Inc. 開發的視頻與音頻上下文平台，其核心構成包括網頁控制台、開發介面以及軟體開發工具包。它能將語音、說話者、畫面、螢幕文字、聲音及元數據整理成可搜尋、可提取，且適合用於大模型推理的上下文資料。

該產品主要服務那些需要在應用程式中處理大量媒體內容的開發者與團隊，而非提供時間軸剪輯、濾鏡或成品生成的傳統影片編輯器。

主要功能

多模態影片描述

• Describe 可按時間順序生成影片描述，結果可包括摘要、轉錄、說話人區分、視覺場景、螢幕文字和音訊事件。
• 用戶可選擇需要的模態，減少無關處理；結果適合字幕整理、內容審閱、無障礙描述和檢索索引。
• 描述結果可以按片段讀取，並可附帶縮圖，便於應用跳轉到對應時刻。

結構化數據提取

• Extract 接收自然語言提示或自訂結構，輸出可供程式繼續處理的實體和字段。
• 提示模式適合探索影片中有哪些資訊，結構模式適合在訪談、商品影片、銷售通話或研究素材中反複提取同一組字段。
• 實體集合可對一批影片套用統一提示和結構，幫助團隊形成可比較的資料集。

分段、鏡頭與章節

• Segment 可按鏡頭或敘事章節拆分媒體，並返回每段的起止時間與描述。
• 開發者可以利用分段結果生成章節導航、短片候選、關鍵幀索引或細粒度搜紏單元。
• 轉錄專用敘事分段適合主要依賴講話內容的會議和播客；鏡頭分段則更適合畫面變化明顯的影片。

跨影片搜尋與問答

• 搜尋支援自然語言語意檢索，可在檔案或集合中查找相關影片、片段及特定時刻。
• 混合檢索可組合一般內容、語音關鍵字、螢幕文字和標籤等模態，減少只查轉錄時遺漏視覺資訊的情況。
• Chat Completions 與 Responses API 可圍繞一個或多個集合連續提問，並返回帶有時間戳的媒體引用。
• Deep Search 會執行多步檢索和推理，適合在大量影片中尋找能作為證據的資料以得出研究答案；預覽模型不應視為穩定的結果保證。

集合與媒體管理

• 集合用於組織同一專案的媒體，可建立媒體描述、實體等不同用途的索引。
• 文件介面可查看處理狀態、時長、解析度、編碼及縮圖，也支援標籤、分享資產、幀提取、臉部檢測與匹配等端點。
• Webhook 可在異步處理完成或狀態變化時通知業務系統，避免用戶端持續輪詢。

輸入方式與能力差異

典型使用流程

1. 註冊帳戶並在控制台建立 API 金鑰；金鑰應儲存在伺服器端的環境變數中，切勿寫入前端代碼或公開的儲存庫中。
2. 上傳本地媒體、貼上公開連結，或授權雲端連接器，再檢查檔案處理狀態。
3. 單檔案任務可直接調用 Describe、Extract 或 Segment；批量檢索和問答則需先建立集合並加入檔案。
4. 根據任務選擇摘要、語音、畫面、螢幕文字、結構欄位或分段策略，並為異步任務配置狀態查詢或 Webhook。
5. 使用 Search、Chat 或 Responses 查詢集合，將返回的時間戳和媒體引用映射到播放器或業務界面。
6. 在上線前記錄每個端點的積分消耗、回應狀態和失敗重試次數，並根據帳戶實際限額設定併發與預算。

適合用戶與場景

• 開發團隊：為知識庫、客服或智慧體增添影片搜尋與問答功能，且無需自行維護轉錄、視覺模型及向量搜尋管線。
• 銷售與客戶成功團隊：從通話和演示中提取異議、需求、產品回饋及行動項，並保留可定位的片段。
• 研究與媒體團隊：在訪談、課程、播客或素材庫中查找人物、主題、畫面與原話出現的時刻。
• 平台型產品：為影片管理、內容審核、會議資訊或教育應用提供結構化的媒體數據。
• 自動化團隊：透過連接器、介面、Webhook 與 MCP，將媒體分析整合到現有的工作流程或 AI 助手上。

價格套餐

公開價格以美元顯示為積分包，訂閱型需求及大型團隊方案需聯繫銷售。頁面沒有明確寫出積分包有效期、稅費、退款及未用積分處理規則，購買前應在結算頁確認。

服務條款中同時註明，訂閱期為按月計費的方式，且需在開票後 5 天內完成付款。此說明與公開頁面上的「選擇積分包」內容並不完全相同，實際的購買方式、續費及付款條件應以帳戶結算頁面或企業訂單為準。

主要積分消耗

積分僅在成功請求時，根據端點與功能的使用量來計算。至於場景分段等個別項目，在公開列表中的數值並不夠明確，因此無法以此判斷其是否免費。

額度與使用限制

• 介面會執行速率與用量限制，超限會返回相應錯誤；更高限制需聯絡團隊。
• 額度文件仍使用 Free Tier 和 Basic Tier，而現行價格頁使用 Mini、Starter、Builder、Scale 等名稱，兩者不能自動對應。
• 額度頁面所列出的 Free 與 Basic 類型，每月最多可處理 100 個檔案，總儲存空間為 10GB，總影片長度則為 1000 小時；而集合數量則分別為 50 和 100，每個集合中的檔案數量則分別為 50 和 100。
• 同一頁面上還列出了每月的提取和轉錄次數，分別為 200 次和 400 次；而聊天額度方面，Free 版本為每月 500 次、每日 50 次，Basic 版本則為每月 30000 次、每日 1000 次。
• 這些技術額度與價格頁面的積分、聊天請求數同時存在，生產部署前應在帳戶後台確認當前套餐的真實上限。

API、SDK 與 MCP

開源的只是 SDK 和 MCP Server 客戶端代碼，並不代表 Cloudglue 的託管平台、模型編排或基礎建設也是開源的。要使用這些組件，仍需要 Cloudglue 賬戶、密鑰及積分，且必須遵守平台的相關條款。

能力邊界

• 自動描述、轉錄、實體提取和推理可能遺漏細節或產生錯誤，法律、醫療、安全與合規場景需要人工複核原始媒體。
• YouTube 連結目前缺乏完整的畫面解析能力；若任務需要依賴動作、物體、螢幕文字或鏡頭變化，應上傳可處理的原始檔案。
• 影片處理通常是異步任務，延遲會受到長度、解析度、所選模態、隊列及集合規模的影響。
• Deep Search 與預覽模型處於快速演進階段，介面參數、品質與成本可能會變動，生產環境應鎖定版本並閱讀更新日誌。
• 可播放引用幫助定位證據，但不等同於事實正確；最終判斷仍應回看對應片段。

隱私、安全與版權

• 服務會處理註冊信箱、第三方登入資料、上傳的影片或數據，以及網站和產品使用分析。
• 隱私政策列出 PostHog 用於行為分析、Stripe 用於支付，並稱不會出售、出租或交易個人資訊。
• 個人資訊及上傳內容會根據提供服務、法律義務及解決爭議所需的時間來保存，但並未公佈固定的保留或自動刪除天數。
• 歐洲經濟區的使用者可請求訪問、更正、刪除、攜帶、限制或反對處理；刪除連接器並不會自動刪除先前已導入的媒體。
• 用戶保留所上傳影片和資料的權利，同時必須確保有處理、轉錄、分析及分享相關素材的授權。
• 條款禁止處理違法、有害或色情內容，也禁止繞過用量限制、逆向探測、未經書面許可轉售接口，以及用平台建構或運行競爭產品。
• 平台輸出的複製、修改和再發行，僅在條款或對應 SDK 授權證明允許時方可進行；在商業上線之前，應審查素材的版權、肖像權、隱私同意以及客戶合約。

退款與採購注意事項

公開條款中並未單獨說明自助積分包的退款、撤銷購買或剩餘積分返還規則。企業訂單、按月開票以及自助積分包可能適用不同的條件，付款前應保存結算頁面，並確認退款、到期日、續費及稅費等相關事項。

總結

Cloudglue 的價值在於能將多模態影片解析、集合索引、搜尋、問答以及結構化資料提取等功能整合為一個統一的開發介面，並提供 SDK、MCP 以及多種媒體連接器。它適用於那些需要將影片轉換成可查詢的商業數據的產品團隊，但在上線之前，應先仔細檢查 YouTube 的格式限制、當前帳戶的使用額度、成本問題，以及內容處理的合規性。