新創公司公測類似OpenAI Sora的影片AI生成服務

今年初OpenAI公布的生成式AI影片服務Sora引發市場震撼，本周又有另一家新創公司公布能產生同樣高品質影片的AI服務，名為Dream Machine。

這家新創公司是總部位於舊金山的Luma AI，於2021年創立。根據Techcrunch報導，該公司創辦人之一的Alex Yu是柏克萊大學的AI研究人員，Amit Jain則曾在蘋果擔任Vision Pro多媒體體驗開發。該公司去年11月才募得430萬美元，今年初就在B輪中募到了4,300萬美元。

近日Luma AI公布的Dream Machine是類似Open AI的Sora，可讓用戶輸入自然語言生成逼真的影片。Dream Machine號稱2分鐘就能產出每秒120影格的5秒流暢、高畫質的短影片。根據網站描述，它是直接以影片訓練的高擴充性及高效的transformer模型，能產生精準、一致化而精緻的場景。

Dream Machine也是該公司打造統合式「想像力引擎」的第一步，昨日Dream Machine開放大眾試用。不過，首日上線後卻因網路塞車引來抱怨。Techradar花了超過20分鐘才看到影片。另有報導指出，有不少用戶等了數小時。

Luma AI產品與成長部門主管Barkley Dai透過該公司Discord帳號說明，公司面臨極高運算需求，正在緊急增加頻寬。他稍後補充說，雖經增加頻寬，但仍需數小時來消化已發出的處理呼叫。該公司仍強調正常情況下只要2到3分鐘，就能將文字指令轉化成影片。

Dream Machine是Luma AI最新成果。這家新創去年11月公布3D模型重建模型Luma，可讓使用者透過拍攝照片來建立3D模型。今年初，該公司又發表Genie，將用戶輸入的文字轉化成3D模型。此外，它還提供一項服務，用戶可將錄下的一段影片上傳就能產出影片中的3D場景，可加速遊戲或電影製作。