Luma Dream Machine
免費增值
AI工具大全 AI影片工具

Luma Dream Machine

用自然語言和參考素材生成、修改影片與圖像

標籤:

Luma AI是什麼

Luma AI是一個專為創意團隊所設計的影片、圖片及多階段內容製作平台。它可以從文字、圖片、參考素材或現有的影片出發,進行概念規劃、鏡頭製作、視覺調整,並最終產出所需的素材。

許多使用者仍以 Dream Machine 來搜尋該產品,但官方已將其視為舊名稱。目前的消費者工作區稱為 Luma App,現行的影片模型為 Ray3.2,而圖像與多模態模型則為 UNI-1.1。

Luma AI主要功能

  • Ray3.2支援文字生成影片與圖片生成影片;
  • Modify Video V2可重繪現有表演、環境、服裝和視覺風格;
  • Multi-Keyframe可用最多16個關鍵幀控制單個片段;
  • Reframe可將現有影片改為不同畫幅並保留運動與表演;
  • 支援Draft、540p、720p與1080p多檔生成;
  • 原生HDR、16-bit色彩與EXR輸出適合調色和VFX流程;
  • UNI-1.1支援文字、參考圖、多圖理解與圖像編輯;
  • Luma Agents可規劃、生成、迭代並維護項目上下文;
  • 平台整合了部分第三方影片、圖片和音訊模型;
  • 正式API與Python、TypeScript SDK適合自動化生產。

Ray3.2影片生成

Ray3.2是Luma目前的視頻模型,用於文字轉換為影片、圖片轉換為影片,以及實現受控的視頻製作流程。它注重鏡頭的連續性、創意導演的能力,以及可擴展的製作方式,而非僅能產生一次性的短片。

使用者可以先以草稿模式,以較低的成本來嘗試不同的構圖與動畫效果,之後再將所選的版本轉換成 540p、720p 或 1080p 的格式。分辨率和長度越高,所需的積分就會越多。

Modify Video V2

Modify Video用於對已有的真人或動畫素材進行重新設計,可改變背景、服裝、角色外觀、燈光以及整體風格,同時盡量保留原有的表演與鏡頭運動。目前支援的最長時間約為20秒,解析度則最高可達1080p。

修改並非傳統的逐像素合成,細小的道具、手部、遮擋物以及快速動作仍可能出現變化。專業項目需要逐幀檢查,並保留原片作為合成的參考。

多關鍵帧與鏡頭連續性

Multi-Keyframe可為單個片段提供最多16個關鍵帧,用於控制人物、構圖、動作和場景變化。關鍵帧間差異過大時仍可能出現跳變,應保持空間關係與視覺風格可推斷。

Reframe與多平台畫幅

Reframe並非單純的裁切,而是根據新的畫面比例來補充內容,同時盡量保持動作、構圖以及人物的表情。它適用於將橫版廣告轉換為縱版短影片、方形社交媒體用圖,或是其他所需的畫面比例。

新增區域由AI推斷,可能產生不符合原場景的物體與邊緣。品牌元素、字幕和商品細節應在重構後重新檢查。

HDR與EXR專業輸出

Ray3.2可生成HDR並導出16-bit EXR,為調色、視覺特效和高動態範圍處理提供更大的後期操作空間。HDR的計算是以基礎SDR的倍數來進行的,而HDR+EXR則需要更多的資源。

高位深輸出只有在進入正確的色彩管理後期流程時才有價值。一般用於社交媒體發布時,可以先使用SDR或低解析度來預覽,從而減少不必要的成本。

UNI-1.1圖像與多模態創作

UNI-1.1是Luma目前的圖像與多模態模型,支援文生圖、參考引導、場景補全以及多圖控制。它適合先建立角色、商品、環境和關鍵視覺元素,再交給Ray來製作動態鏡頭。

Luma Agents與第三方模型

Luma Agents能夠理解專案目標,可跨步驟選擇生成、修改和整理動作,並保留創意上下文。Luma App也整合了部分第三方影片、圖片和音訊模型,讓團隊能在同一專案中比較不同的輸出結果。

第三方模型的能力、費率與數據條款可能不同,不能把所有生成都視為Ray或UNI輸出。選模型前應核對名稱、積分與商用要求。

Luma AI能力對比

能力主要輸入主要輸出適合場景
Ray3.2生成文字或圖片新影片鏡頭概念、廣告與短片
Modify Video現有影片與參考保留表演的重繪影片換景、換裝與風格化
Multi-Keyframe最多16個關鍵帧受控連續片段分鏡與複雜過渡
Reframe已有影片與目標比例擴展後的新畫幅跨平台適配
HDR與EXR生成或修改任務高動態範圍素材調色與VFX
UNI-1.1文字與多張參考圖圖像和編輯結果角色、場景與關鍵視覺

Luma AI價格

Luma App提供Plus、Pro和Ultra三種個人版套餐,Team與Enterprise版則需聯繫銷售人員洽詢。下表為官網上的現行美元價格,年度方案可一次性付款,並享有優惠的月費率。

套餐月付年付積分與權益
Plus30美元/月300美元/年,折算為25美元/月10,000積分、Luma及第三方模型、商業使用、訪客編輯
Pro90美元/月900美元/年,折算為75美元/月40,000積分,Luma Agents用量約為Plus的4倍
Ultra300美元/月3,000美元/年,折算為250美元/月150,000積分,Luma Agents的用量約為Plus的15倍
Team聯絡銷售合同約定成員管理、專案組織、共享積分、分析與SSO
Enterprise聯絡銷售合同約定企業承諾、培訓和訂製微調

Ray3.2積分消耗

任務Draft720p1080p
文字或圖片生成5秒20積分100積分400積分
文字或圖片生成10秒60積分300積分1,200積分
Video-to-Video36積分/秒72積分/秒144積分/秒
Reframe10積分/秒40積分/秒120積分/秒
HDRRay3.2 HDR為SDR積分的2倍,HDR+EXR為3倍

Ray3.14等舊版或快速模型、UNI圖片以及第三方模型有各自費率。積分表可能隨模型更新而變化,正式批量生產前應在生成頁面核算單條與成片總成本。

Luma AI使用教學

從概念生成專業鏡頭

  1. 確定鏡頭用途、比例、時長、解析度及色彩交付;
  2. 描述主體、場景、動作、機位、光線與節奏;
  3. 先用UNI生成角色、商品或環境關鍵圖;
  4. 以Draft製作多個低成本運動方案;
  5. 選擇構圖和表演最穩定的版本;
  6. 增加關鍵帧或參考圖修正連續性;
  7. 最後生成高畫質或HDR版本並進入後期。

用Modify重繪實拍素材

  1. 選擇表演清晰、運動穩定且權利完整的原片;
  2. 裁切到模型支持的短片段;
  3. 上傳角色、服裝或環境參考;
  4. 明確哪些動作、構圖和身份必須保留;
  5. 先以低解析度測試重繪強度;
  6. 逐幀檢查手部、遮擋、邊緣和面部;
  7. 導出選中版本,與原片進行合成、聲音和調色。

透過API批量生成

  1. 在Luma API平台創建伺服器金鑰並充值;
  2. 選擇現行模型、任務和正確參數;
  3. 提交生成任務並保存任務編號;
  4. 使用回呼或輪詢處理異步狀態;
  5. 對限流、超時和失敗實現安全重試;
  6. 記錄餘額、成功率及每項資產的成本;
  7. 下載結果後進行內容與技術品質審核。

Luma AI適合哪些用戶

  • 廣告與創意機構:製作提案、概念影片及多畫幅廣告;
  • 影視團隊:預演鏡頭、關鍵帧和視覺特效方案;
  • 品牌與電商:生成商品環境、視覺變化及短影片;
  • 設計師:用UNI建立角色、場景與系列視覺;
  • 社交媒體團隊:快速適配橫版、縱版和方形素材;
  • 後期與VFX團隊:使用HDR、EXR和Modify工作流;
  • 開發者:透過API和SDK構建批量創意系統。

Luma AI的優勢

  • Ray3.2覆蓋生成、修改、關鍵帧和Reframe;
  • Draft到1080p的分層工作流便於控制成本;
  • 最多16個關鍵帧提供較強導演控制;
  • HDR與EXR可進入專業調色和VFX流程;
  • UNI-1.1將圖像生成與多模態參考整合;
  • Luma Agents可協調多步驟創意任務;
  • 官方API以及Python、TypeScript SDK較完整。

使用限制與注意事項

  • AI影片仍可能出現肢體、物理、文字和連續性錯誤;
  • Modify無法保證逐像素保留人物或產品細節;
  • 關鍵幀差異過大時可能產生跳變和身份漂移;
  • Reframe新增區域是模型推斷,並非原始畫面;
  • 1080p、Video-to-Video、HDR和EXR的耗電量較高;
  • 第三方模型的費率、限制和數據政策並不相同;
  • 高品質鏡頭仍需剪輯、聲音、調色和人工審查;
  • 舊教學中的Dream Machine、Ray2和Photon資訊已過時。

商用、隱私與內容安全

Plus、Pro和Ultra計劃包含商業使用權,舊版的Dream Machine API文件中也明確規定,API的輸出內容可用於商業用途,且不會帶有水印。不過,商業許可並不包括那些用戶無權使用的肖像、聲音、商標、音樂或參考作品。

生成內容的版權資格因地區及人類創作貢獻而異。高價值專案應保存輸入內容、提示詞、關鍵帧、版本以及人工後期處理過的資料,並對其與第三方權利的相似性進行審核。

  • 只上傳自有或明確獲授權的圖片與影片;
  • 未經同意不製作可識別真人的誤導性合成;
  • API密鑰僅存於服務端並設定配額與告警;
  • 機密客戶素材應使用符合合同的團隊或企業方案;
  • 發布前檢查人物、品牌、背景細節和敏感內容;
  • 按平台與當地規則披露AI生成或修改。

API、GitHub與開源說明

Luma提供針對現行Agent、Ray與UNI功能的API平台,同時也保留了舊版的Dream Machine REST API文件。其官方SDK支援Python和TypeScript,具備異步處理、回呼、重試以及餘額查詢等功能。

Ray3.2、UNI-1.1、Luma App以及其相關的推論功能均非開源產品。雖然GitHub上提供了官方的SDK以及一些研究用模型,但這並不代表可以下載這些模型並用於商業用途或私人環境中。

常見問題

Luma Dream Machine現在叫什麼

官方目前將消費者工作區稱為Luma App,影片模型則為Ray3.2。Dream Machine是舊名稱,Ray2與Photon也不應再被視為現行的模型。

Luma AI多少錢

Plus、Pro、Ultra的月費分別為30美元、90美元、300美元,而年費則分別為300美元、900美元、3,000美元。Team和Enterprise版則需要聯繫銷售人員才能獲得相關資訊。

Luma AI支援1080p嗎

支持,Ray3.2生成、影片修改和Reframe均有對應1080p檔位。高畫質、HDR和EXR會比Draft與720p消耗更多積分。

Luma AI提供API嗎

提供,開發者可使用REST API及Python、TypeScript SDK來建立異步生成任務。API採用獨立的credit餘額體系,而非個人訂閱層級。

Luma AI是開源的嗎

不是,現行Ray3.2與UNI-1.1模型和託管平台未開源。官方SDK與研究倉庫公開不等於核心產品開源。

©️版權聲明:若無特殊說明,本站所有文章版權均歸AI工具分享本網站的內容為原創作品,任何人或機構在未獲許可的情況下,都不得轉載、抄襲或以其他方式複製並發表本網站的內容,亦不得在非本網站所屬的伺服器上建立其鏡像版本。否則,本網站將依法追究相關責任人的法律責任。

類似於Luma Dream Machine的工具