分類
AI

Luma AI Ray3:一個具備「推理能力」的全新影片模型


Luma AI 的 Ray3 是一款被譽為世界上首個具備「推理能力」的影片模型,同時也是第一個能生成專業級高動態範圍(HDR)影片的模型。該模型已於 2025 年 9 月 18 日正式發布。

以下是根據近期報導整理出的主要特點與功能:

推理與控制
推理能力:Ray3 能夠像人類一樣運用視覺與語言進行「思考」和「推理」。這使它能夠理解複雜且細緻的指令,並能自我評估產出結果以進行優化。這與過去只能被動執行指令的生成模型相比,是一大突破。

視覺註解:使用者可以直接在圖片上塗鴉或繪圖,來引導模型的運作、鏡頭運動和構圖,而無需輸入冗長的文字提示。

高連貫性生成:由於具備推理能力,模型能產生連貫性更高的影片,例如維持角色的一致性、場景的自然發展以及更準確的物理模擬。

高畫質影片
原生 HDR:Ray3 是首個能生成真正 HDR 影片的生成式 AI 模型,支援 10、12 和 16 位元的色彩深度。此功能專為專業創作流程設計,讓影片製作人能更精準地控制色彩、陰影和高光。

SDR 轉 HDR:模型也能將標準動態範圍(SDR)影片轉換為 HDR,為後製提供更大的彈性。

高解析度:Ray3 可原生生成 1080p 影片,並內建神經升頻器,能將影片畫質提升至清晰的 4K。

工作流程與速度
草稿模式:模型新增了「草稿模式」,能快速生成低成本的預覽影片,讓創作者能迅速嘗試各種想法。一旦確定滿意的草稿,便可將其「精製」成高品質的 4K HDR 影片。

與 Adobe 合作:Luma AI 已與 Adobe 合作,將 Ray3 整合至 Adobe Firefly 應用程式和 Dream Machine 平台。這項合作旨在讓創作者能將 AI 生成的影片無縫銜接到 Adobe Premiere Pro 等專業工作流程中。

總體而言,Ray3 定位為一個智慧型的創意夥伴,能夠處理更複雜、多步驟的任務,並為電影製作、廣告及其他創意產業產出專業級的高品質影片。

Luma AI 推出 Ray3,號稱首個具備推理能力的影片模型;Adobe 等公司成為首批客戶
矽谷新創公司 Luma AI 推出 Ray3,並稱其為首個具備推理能力的影片模型。

Adobe、主要廣告公司及創意代理商如 Monks UK、Galeria 和 Strawberry Frog 等,皆是 Ray3 的首批客戶。此模型目前已在 Dream Machine 平台上推出。

這款生成式模型能夠自我評估,並在螢幕上針對修改和改進之處做出筆記。與許多當前模型不同的是,製作中的影片可以儲存並在上次停止的地方繼續。此外,「草稿模式」也允許使用者以更快的速度進行試驗,滿意的結果之後可渲染成 4K 高動態範圍(HDR)影片。

Luma 表示,由於該系統具備推理能力,其產出的影片「感覺更具連貫性,角色形象一致,場景發展自然,物理行為也如預期般運作。」

Luma 還提到,Ray3 是第一個能夠以真正的 10、12 和 16 位元 HDR ACES2065-1 EXR 格式製作影片的模型,使其適用於高端電影和廣告專案。

Luma 的投資者包括 Nvidia 和創投公司 Andreessen Horowitz。今年稍早,Luma 在洛杉磯開設了工作室,並正在紐約建立據點。

Luma AI 執行長兼共同創辦人 Amit Jain 表示:「Ray3 是我們為創意工作打造智慧的第一步。創意工作是人類最需要智力的挑戰之一,然而到目前為止,許多提供給創意工作者的 AI 模型,都遠遠落後於語言模型在編碼和分析方面所能達到的水準。生成式模型過去更像是吃角子老虎機——功能強大,但缺乏智慧。Ray3 則大大改變了這一點。」

Adobe 和 Luma AI 正合作將 Ray3 直接整合進 Adobe Firefly 應用程式中。