Search
Close this search box.

Meta 推 Movie Gen 生成超真實 AI 影片,後製編輯下指令就搞定

Meta、Movie Gen、AI、影片

科技巨頭 Meta 宣布,全新的 AI 影片生成應用 Movie Gen 即將推出,對抗 OpenAI 日前推出的文字轉影片模型 Sora。

Meta 本次推出的 Movie Gen 人工智慧應用,不僅可以透過文字生成影片,甚至連影片中的背景音樂、音效與環境噪音,皆可以由 AI 一次生成,甚至於對應不同影像寬高比,滿足適用於不同平台的個人化影像需求。

允許導入現有素材,打造個人化影片

Movie Gen 最為吸引人之處,在於使用者可以將現有素材,直接融入到 AI 所生成的影像當中,藉此創造出更加個人化的影片。

舉例來說,Meta 示範透過 Movie Gen 先導入一張女性靜態照片,接著讓 AI 針對照片上的人物樣貌製作影片,最終 AI 影片畫面裡的主角,即變成了照片素材上的女性。

Movie Gen 的另一項特色,就是可以對 AI 生成的影片進行部分編輯,例如只替換掉背景,或者更改影片中的某些道具、特效或元素,而且僅需透過文字指令即可完成,這比起目前大多數 AI 影片應用,只能選擇重新生成一次完整影像來得更為強大。

300 億參數影片模型,優於市場其他競品

Meta 表示,Movie Gen 應用總共內建了 4 套模型,包含具備 300 億個參數的文字轉影片生成模型 Movie Gen Video,以及擁有 130 億個參數的音訊生成模型 Movie Gen Audio,另外還有經過後期訓練,可根據人臉生成個人化影片的 Personalized Movie Gen Video,並整合了精確的影片編輯後製模型 Movie Gen Edit。

由上述 4 套模型所打造出來的 Movie Gen,目前已經能夠生成長達 16 秒、16 FPS 的逼真、個人化 1080p 影像,並且主動搭配 48kHz 音訊,再為使用者提供後製編輯功能。

根據 Meta 進行的盲測調查,該公司表示 Movie Gen 整體表現優於目前市面上的其他產品,例如 Runway Gen 3、Luma Dream Machine、OpenAI Sora 和 Kling 1.5。

運算成本高昂,最快明年開放使用

Meta 產品長 Chris Cox 則在 Threads 上指出,雖然 Movie Gen 已經正式對外公開,但 Meta 尚未準備好將其當成產品發布,因為 AI 影片所需要的生成時間太長,而且運算成本依然太昂貴。

Meta 初步計劃將 Movie Gen 提供給好萊塢電影製作人、藝術家與網紅等,擁有足夠影響力的人士,協助他們於社交平台上創作內容,該應用最快也要明年才會整合到旗下平台,如 Instagram 並開放給一般大眾使用。

【推薦閱讀】

◆ 只要給 AI 一句話與 1 分鐘,Meta 新工具就能產生超高水準 3D 模型震撼藝術家

◆ 外媒體驗 Meta 智慧眼鏡稱「真實又自然」,擺脫 VR 頭盔沉重負擔

◆ 面試前 24 小時別再搞自己!Meta 產品經理分享 4 大應徵策略助你勝出

*本文開放合作夥伴轉載,資料來源:《VentureBeat》《The Verge》。首圖來源:Meta