AI 人工智慧準備統治全世界好用軟體一籮筐學習．思考智慧新世代 2024 年 07 月 08 日

影音生成式 AI 服務：Luma AI Dream Machine 實測，能夠勝過 Sora 或 Stable Video 嗎？

影音生成式 AI 服務：Luma AI Dream Machine 實測，能夠勝過 Sora 或 Stable Video 嗎？ - 阿祥的網路筆記本

相較於過去兩年生成式 AI 在文字對談、文字或圖片生成影像的發展類似，今年的生成式 AI 可說是走向了「多媒體內容」創作的領域，除了讓大家為之驚艷的音樂生成式 AI「Suno AI」，二月份 Open AI 公開的文字生成影片 AI 模型「Sora」，以及三月份開放的同類型服務 Stable Video 也提供所有人公開測試，也讓許多人預言未來的影片創作能夠真正實現「無拍攝」。

你可能會有興趣

而近期也出現了另一個影音生成式 AI 服務：由 Luma AI 打造的「Dream Machine」，可以透過文字指令或是上傳的影像生成一段 5 秒左右的動態影片，並能模擬物理反應與真實鏡頭運鏡，而且與 Stable Video 一樣提供了免費的公開測試。

Dream Machine 提供文字或影像生成高品質影片的服務

在接下來的文章中，阿祥就為大家帶來實測心得，同時也附上一段採用相同 Prompt 指令在 Sora、Stable Video 與 Dream Machine 生成的影片內容比較！

文章目錄

Dream Machine 基本介紹

目前 Luma AI 的 Dream Machine 可以提供一般使用者免費註冊使用，並提供每個月 30 則影片生成的使用額度，同時也提供標準版、專業版與頂級版三種付費方案，可以提供每個月最多的影片生成數量、更高的影片生成品質、移除浮水印並可允許商業應用。

Dream Machine 的網站上，點選右上角的「Try Now」即可開始免費試用

帳號註冊可選擇透過 Google 帳號登入

使用文字生成影片

Dream Machine 以文字生成影片的方式與 Stable Video 大同小異，可使用英文或中文輸入影片場景、內容動作的描述，只不過 Dream Machine 並像 Stable Video 一樣會先生成最多四組靜態影像畫面，再讓使用者選擇其一來生成影片，也沒有進階的鏡頭運鏡的設定，在輸入指令之後，會需要等待一段時間（實測約 5 分鐘以上）才會產出影片。

Dream Machine 可直接在指令框輸入英文或中文指令，預設會勾選「Enhance prompt」的優化指令選項，同時右下角也會顯示目前可使用的生成額度，免費版一個月可進行 30 次生成。

輸入指令之後，生成任務會排入佇列，以文字生成來說大約需要 5 分鐘的時間。

影片生成完成後，可點選進入查看播放效果，下方也有功能按鈕可依據此則影片繼續生成後續影片（Extend），也能直接下載（Download），同時也能給這一則生成評分。

不過目前看得出來 Dream Machine 在影像生成時仍舊有不少詭異的錯誤發生，像是下面這一段米格魯狗狗在花園玩耍的影片就蠻驚悚的…

影片：Luma AI：Dream Machine 生成影片範例 – 米格魯

使用圖片生成影片

除了透過文字，Dream Machine 也允許上傳圖片作為畫面基礎來生成影片，且可以搭配文字指令輔助，同時也能再上傳另一張圖片作為影片結束的「關鍵幀」，讓使用者更能指定影片生成的發展方向，不過實測若是使用兩張照片上傳來生成影片，系統花費的時間會長達數個小時之久。

可以直接將照片拖拉到指令列來上傳，作為影片生成的依據。

上傳了第一張照片後，也可以透過「END FRAME」的按鈕上傳另一張影片結束的關鍵幀作為生成的參考，但實測上傳兩張照片的生成時間會非常久，可能長達數個小時

這裡提供一組上傳單張照片、不加上任何指令的影片生成範例：

影片：Luma AI：Dream Machine 生成影片範例（圖片上傳生成）

這裡提供一組有上傳照片與結尾關鍵幀、不加上任何指令的影片生成範例：

影片：Luma AI：Dream Machine 生成影片範例（圖片上傳生成，有設定結尾關鍵幀）

結語

Dream Machine 的免費版方案生成的影片尺寸為 1360 x 752 px ，略高於 Stable Video 的 1024 x 576 px 的規格，不過生成結果來看，影片的細節似乎還有不少改進的空間，尤其是影像的清晰度有些不足，這一點是略遜色於 Stable Video 的，但不確定是否付費版本的生成品質會有明顯的提升？

Dream Machine 目前有三種付費版本，月費從 23.99 美金到 399.99 美金。

若要比較目前已經公開的影片生成式 AI 模型，毫無疑問 Open AI 的 Sora 仍舊是最令人驚艷的一個，不過由於該服務還未向公眾開放，因此並不清楚實際使用的狀況是否如官方已揭露的生成內容這樣高水準，尤其是 Sora 可允許成成數十秒甚至一分鐘的長影片，相較於 Stable Video 與 Dream Machine 僅能生成 5 秒左右長度的影片，仍然有不小的差距。

目前有傳言 Sora 在今年年底前就會正式公開上線，在這之前是否還會有其他的影片生成式 AI 出現來挑戰，應該是相當值得大家期待的吧？

影片：影片生成式 AI 服務比較（Sora、Stable Video、Dream Machine）

更多 AI 相關文章

你可能會有興趣

相關連結：

Luma Dream Machine

歷史上的這一天，我還寫了…

相關

AI Artificial Intelligence Dream Machine Gen AI Luma AI Open AI Tips 人工智慧實測影片生成式 AI 影音生成式心得比較生成式 AI

阿祥

阿祥，本名秦庭祥（Axiang Chin），是一個專注於3C領域、尤其是行動通訊領域的部落客，自2004年10月開始經營部落格超過20年之久，長期關注3C產品資訊與應用－尤其聚焦於智慧型行動裝置、雲端服務應用、App評析與行銷、以及遊戲評測與產業趨勢…等議題。阿祥同時也是3C布政司共同創辦人，提供社群行銷、教學與體驗活動規劃…等服務，並曾擔任元智大學資訊傳播學系兼任講師、國立空中大學管理與資訊學系學科委員，並於三星學園長期擔任手機課程講師，也受邀前往多間大學、政府機關擔任講師，分享雲端與行動工具應用心得。 Google

無留言

發表留言取消回應