Luma AI是什麼
Luma AI是一個專為創意團隊所設計的影片、圖片及多階段內容製作平台。它可以從文字、圖片、參考素材或現有的影片出發,進行概念規劃、鏡頭製作、視覺調整,並最終產出所需的素材。
許多使用者仍以 Dream Machine 來搜尋該產品,但官方已將其視為舊名稱。目前的消費者工作區稱為 Luma App,現行的影片模型為 Ray3.2,而圖像與多模態模型則為 UNI-1.1。
Luma AI主要功能
- Ray3.2支援文字生成影片與圖片生成影片;
- Modify Video V2可重繪現有表演、環境、服裝和視覺風格;
- Multi-Keyframe可用最多16個關鍵幀控制單個片段;
- Reframe可將現有影片改為不同畫幅並保留運動與表演;
- 支援Draft、540p、720p與1080p多檔生成;
- 原生HDR、16-bit色彩與EXR輸出適合調色和VFX流程;
- UNI-1.1支援文字、參考圖、多圖理解與圖像編輯;
- Luma Agents可規劃、生成、迭代並維護項目上下文;
- 平台整合了部分第三方影片、圖片和音訊模型;
- 正式API與Python、TypeScript SDK適合自動化生產。
Ray3.2影片生成
Ray3.2是Luma目前的視頻模型,用於文字轉換為影片、圖片轉換為影片,以及實現受控的視頻製作流程。它注重鏡頭的連續性、創意導演的能力,以及可擴展的製作方式,而非僅能產生一次性的短片。
使用者可以先以草稿模式,以較低的成本來嘗試不同的構圖與動畫效果,之後再將所選的版本轉換成 540p、720p 或 1080p 的格式。分辨率和長度越高,所需的積分就會越多。
Modify Video V2
Modify Video用於對已有的真人或動畫素材進行重新設計,可改變背景、服裝、角色外觀、燈光以及整體風格,同時盡量保留原有的表演與鏡頭運動。目前支援的最長時間約為20秒,解析度則最高可達1080p。
修改並非傳統的逐像素合成,細小的道具、手部、遮擋物以及快速動作仍可能出現變化。專業項目需要逐幀檢查,並保留原片作為合成的參考。
多關鍵帧與鏡頭連續性
Multi-Keyframe可為單個片段提供最多16個關鍵帧,用於控制人物、構圖、動作和場景變化。關鍵帧間差異過大時仍可能出現跳變,應保持空間關係與視覺風格可推斷。
Reframe與多平台畫幅
Reframe並非單純的裁切,而是根據新的畫面比例來補充內容,同時盡量保持動作、構圖以及人物的表情。它適用於將橫版廣告轉換為縱版短影片、方形社交媒體用圖,或是其他所需的畫面比例。
新增區域由AI推斷,可能產生不符合原場景的物體與邊緣。品牌元素、字幕和商品細節應在重構後重新檢查。
HDR與EXR專業輸出
Ray3.2可生成HDR並導出16-bit EXR,為調色、視覺特效和高動態範圍處理提供更大的後期操作空間。HDR的計算是以基礎SDR的倍數來進行的,而HDR+EXR則需要更多的資源。
高位深輸出只有在進入正確的色彩管理後期流程時才有價值。一般用於社交媒體發布時,可以先使用SDR或低解析度來預覽,從而減少不必要的成本。
UNI-1.1圖像與多模態創作
UNI-1.1是Luma目前的圖像與多模態模型,支援文生圖、參考引導、場景補全以及多圖控制。它適合先建立角色、商品、環境和關鍵視覺元素,再交給Ray來製作動態鏡頭。
Luma Agents與第三方模型
Luma Agents能夠理解專案目標,可跨步驟選擇生成、修改和整理動作,並保留創意上下文。Luma App也整合了部分第三方影片、圖片和音訊模型,讓團隊能在同一專案中比較不同的輸出結果。
第三方模型的能力、費率與數據條款可能不同,不能把所有生成都視為Ray或UNI輸出。選模型前應核對名稱、積分與商用要求。
Luma AI能力對比
| 能力 | 主要輸入 | 主要輸出 | 適合場景 |
|---|---|---|---|
| Ray3.2生成 | 文字或圖片 | 新影片鏡頭 | 概念、廣告與短片 |
| Modify Video | 現有影片與參考 | 保留表演的重繪影片 | 換景、換裝與風格化 |
| Multi-Keyframe | 最多16個關鍵帧 | 受控連續片段 | 分鏡與複雜過渡 |
| Reframe | 已有影片與目標比例 | 擴展後的新畫幅 | 跨平台適配 |
| HDR與EXR | 生成或修改任務 | 高動態範圍素材 | 調色與VFX |
| UNI-1.1 | 文字與多張參考圖 | 圖像和編輯結果 | 角色、場景與關鍵視覺 |
Luma AI價格
Luma App提供Plus、Pro和Ultra三種個人版套餐,Team與Enterprise版則需聯繫銷售人員洽詢。下表為官網上的現行美元價格,年度方案可一次性付款,並享有優惠的月費率。
| 套餐 | 月付 | 年付 | 積分與權益 |
|---|---|---|---|
| Plus | 30美元/月 | 300美元/年,折算為25美元/月 | 10,000積分、Luma及第三方模型、商業使用、訪客編輯 |
| Pro | 90美元/月 | 900美元/年,折算為75美元/月 | 40,000積分,Luma Agents用量約為Plus的4倍 |
| Ultra | 300美元/月 | 3,000美元/年,折算為250美元/月 | 150,000積分,Luma Agents的用量約為Plus的15倍 |
| Team | 聯絡銷售 | 合同約定 | 成員管理、專案組織、共享積分、分析與SSO |
| Enterprise | 聯絡銷售 | 合同約定 | 企業承諾、培訓和訂製微調 |
Ray3.2積分消耗
| 任務 | Draft | 720p | 1080p |
|---|---|---|---|
| 文字或圖片生成5秒 | 20積分 | 100積分 | 400積分 |
| 文字或圖片生成10秒 | 60積分 | 300積分 | 1,200積分 |
| Video-to-Video | 36積分/秒 | 72積分/秒 | 144積分/秒 |
| Reframe | 10積分/秒 | 40積分/秒 | 120積分/秒 |
| HDR | Ray3.2 HDR為SDR積分的2倍,HDR+EXR為3倍 | ||
Ray3.14等舊版或快速模型、UNI圖片以及第三方模型有各自費率。積分表可能隨模型更新而變化,正式批量生產前應在生成頁面核算單條與成片總成本。
Luma AI使用教學
從概念生成專業鏡頭
- 確定鏡頭用途、比例、時長、解析度及色彩交付;
- 描述主體、場景、動作、機位、光線與節奏;
- 先用UNI生成角色、商品或環境關鍵圖;
- 以Draft製作多個低成本運動方案;
- 選擇構圖和表演最穩定的版本;
- 增加關鍵帧或參考圖修正連續性;
- 最後生成高畫質或HDR版本並進入後期。
用Modify重繪實拍素材
- 選擇表演清晰、運動穩定且權利完整的原片;
- 裁切到模型支持的短片段;
- 上傳角色、服裝或環境參考;
- 明確哪些動作、構圖和身份必須保留;
- 先以低解析度測試重繪強度;
- 逐幀檢查手部、遮擋、邊緣和面部;
- 導出選中版本,與原片進行合成、聲音和調色。
透過API批量生成
- 在Luma API平台創建伺服器金鑰並充值;
- 選擇現行模型、任務和正確參數;
- 提交生成任務並保存任務編號;
- 使用回呼或輪詢處理異步狀態;
- 對限流、超時和失敗實現安全重試;
- 記錄餘額、成功率及每項資產的成本;
- 下載結果後進行內容與技術品質審核。
Luma AI適合哪些用戶
- 廣告與創意機構:製作提案、概念影片及多畫幅廣告;
- 影視團隊:預演鏡頭、關鍵帧和視覺特效方案;
- 品牌與電商:生成商品環境、視覺變化及短影片;
- 設計師:用UNI建立角色、場景與系列視覺;
- 社交媒體團隊:快速適配橫版、縱版和方形素材;
- 後期與VFX團隊:使用HDR、EXR和Modify工作流;
- 開發者:透過API和SDK構建批量創意系統。
Luma AI的優勢
- Ray3.2覆蓋生成、修改、關鍵帧和Reframe;
- Draft到1080p的分層工作流便於控制成本;
- 最多16個關鍵帧提供較強導演控制;
- HDR與EXR可進入專業調色和VFX流程;
- UNI-1.1將圖像生成與多模態參考整合;
- Luma Agents可協調多步驟創意任務;
- 官方API以及Python、TypeScript SDK較完整。
使用限制與注意事項
- AI影片仍可能出現肢體、物理、文字和連續性錯誤;
- Modify無法保證逐像素保留人物或產品細節;
- 關鍵幀差異過大時可能產生跳變和身份漂移;
- Reframe新增區域是模型推斷,並非原始畫面;
- 1080p、Video-to-Video、HDR和EXR的耗電量較高;
- 第三方模型的費率、限制和數據政策並不相同;
- 高品質鏡頭仍需剪輯、聲音、調色和人工審查;
- 舊教學中的Dream Machine、Ray2和Photon資訊已過時。
商用、隱私與內容安全
Plus、Pro和Ultra計劃包含商業使用權,舊版的Dream Machine API文件中也明確規定,API的輸出內容可用於商業用途,且不會帶有水印。不過,商業許可並不包括那些用戶無權使用的肖像、聲音、商標、音樂或參考作品。
生成內容的版權資格因地區及人類創作貢獻而異。高價值專案應保存輸入內容、提示詞、關鍵帧、版本以及人工後期處理過的資料,並對其與第三方權利的相似性進行審核。
- 只上傳自有或明確獲授權的圖片與影片;
- 未經同意不製作可識別真人的誤導性合成;
- API密鑰僅存於服務端並設定配額與告警;
- 機密客戶素材應使用符合合同的團隊或企業方案;
- 發布前檢查人物、品牌、背景細節和敏感內容;
- 按平台與當地規則披露AI生成或修改。
API、GitHub與開源說明
Luma提供針對現行Agent、Ray與UNI功能的API平台,同時也保留了舊版的Dream Machine REST API文件。其官方SDK支援Python和TypeScript,具備異步處理、回呼、重試以及餘額查詢等功能。
Ray3.2、UNI-1.1、Luma App以及其相關的推論功能均非開源產品。雖然GitHub上提供了官方的SDK以及一些研究用模型,但這並不代表可以下載這些模型並用於商業用途或私人環境中。
常見問題
Luma Dream Machine現在叫什麼
官方目前將消費者工作區稱為Luma App,影片模型則為Ray3.2。Dream Machine是舊名稱,Ray2與Photon也不應再被視為現行的模型。
Luma AI多少錢
Plus、Pro、Ultra的月費分別為30美元、90美元、300美元,而年費則分別為300美元、900美元、3,000美元。Team和Enterprise版則需要聯繫銷售人員才能獲得相關資訊。
Luma AI支援1080p嗎
支持,Ray3.2生成、影片修改和Reframe均有對應1080p檔位。高畫質、HDR和EXR會比Draft與720p消耗更多積分。
Luma AI提供API嗎
提供,開發者可使用REST API及Python、TypeScript SDK來建立異步生成任務。API採用獨立的credit餘額體系,而非個人訂閱層級。
Luma AI是開源的嗎
不是,現行Ray3.2與UNI-1.1模型和託管平台未開源。官方SDK與研究倉庫公開不等於核心產品開源。
桂公網安備45132202000164號