“前幾天張頌文老師提到過，我給他看人工智能生成的視頻。他是焦慮得一晚上沒睡，其實(shí)我也焦慮了好長(zhǎng)時(shí)間。我覺得這是一種技術(shù)革新。”國(guó)產(chǎn)科幻片《流浪地球》系列的導(dǎo)演郭帆如是說。

視頻截圖

(資料圖片)

正在進(jìn)行時(shí)的上海國(guó)際電影節(jié)，今年首次特設(shè)“科幻電影周”單元，人工智能毫無意外地成了現(xiàn)場(chǎng)頻頻被提及的熱詞。

恰好也就在近日，為奧斯卡大贏家《瞬息全宇宙》提供過技術(shù)支持的人工智能公司Runway，開放了視頻編輯器的免費(fèi)試用。這可能是全球范圍第一個(gè)公開可試用的“文生視頻”AI工具。

隨著“文生圖”的AI繪畫日漸融入我們的日常工作和生活，“文生視頻”也開始嶄露頭角，杭州已有公司正在使用這種技術(shù)制作商業(yè)廣告樣片。

郭帆：

完全顛覆的技術(shù)已經(jīng)出現(xiàn)了

A掏出手機(jī)，給B看一段30秒的視頻。

視頻畫面中，昏暗的燈光下，一位老人在室內(nèi)的環(huán)境里說著臺(tái)詞，表情滿是憂傷。

B：挺好，很走心。

A：這是AI制作出來的，這個(gè)演員根本不存在。

B：沒有借鑒某個(gè)演員的臉嗎？指AI換臉。我就被換過很多次，在網(wǎng)上看到過自己唱歌跳舞。

A：沒有，完全虛擬的人物。這是未來的挑戰(zhàn)。

A是郭帆，B是張頌文。

視頻截圖

“做《流浪地球2》時(shí)，面部的增/減齡雖然也是通過人工智能完成，但當(dāng)時(shí)應(yīng)用并不便利。而現(xiàn)在技術(shù)突飛猛進(jìn)，生成的一個(gè)視頻中，演員可能壓根不存在，而你甚至很難分辨。完全顛覆的技術(shù)已經(jīng)出現(xiàn)了。”被網(wǎng)友戲稱為“賽博妲己”的郭帆，現(xiàn)在每天只有三四個(gè)小時(shí)的睡眠時(shí)間，工作之余都在琢磨人工智能，閱讀相關(guān)書籍。

《流浪地球2》中利用人工智能年輕化吳京飾演的“劉培強(qiáng)”

就在本屆上海國(guó)際電影節(jié)期間舉行的三場(chǎng)科幻電影主題論壇上，國(guó)內(nèi)電影人熱烈討論著如何看待、運(yùn)用生成式AI，AI會(huì)給電影創(chuàng)作和制作帶來哪些影響等話題。現(xiàn)實(shí)似乎比電影更科幻。

網(wǎng)友：

上一次這么興奮

還是第一次體驗(yàn)AI繪畫

就在幾天前，大洋彼岸一家名叫Runway的人工智能公司，面向全球開放了視頻編輯器Gen-2的免費(fèi)公測(cè)。你只需要輸入幾個(gè)詞或者一句話（也可以給張參考圖），就能“無中生有”生成想要的視頻。它支持中文輸入，不過目前公測(cè)版的視頻片段僅為4秒。

“上一次這么激動(dòng)還是第一次體驗(yàn)AI繪畫”“人人能拍大片的時(shí)代要來了”“視頻制作的門檻降低了”……網(wǎng)友難掩興奮。

與Gen-2同時(shí)公測(cè)的，還有上一代編輯器Gen-1，可通過文本或提供參考圖，將現(xiàn)有視頻風(fēng)格轉(zhuǎn)化為其他任意風(fēng)格。成立于2018年的這家公司，其實(shí)也不算無名之輩。它曾完成了《瞬息全宇宙》中香腸手、大眼石頭對(duì)話等超現(xiàn)實(shí)藝術(shù)場(chǎng)景，本月初還拿到了谷歌領(lǐng)投的D輪融資。

在Runway官網(wǎng)的演示視頻中，輸入提示詞“叢林”，大片鏡頭立刻呈現(xiàn)。輪流搭配“河流”“瀑布”“黃昏”“白天”等，這個(gè)AI工具也能秒懂。據(jù)官方透露，Gen-2的訓(xùn)練數(shù)據(jù)，包括2.4億張圖片、640萬個(gè)視頻剪輯片段以及數(shù)億個(gè)學(xué)習(xí)示例。

官方宣傳視頻畫面

實(shí)際生成效果真有這么好嗎？

記者上手試了試。輸入中文提示詞“杭州西湖荷花盛開 影視風(fēng)格”，1分多鐘后呈現(xiàn)在眼前的是“水中亭臺(tái)樓閣”的航拍鏡頭，不見荷花；再轉(zhuǎn)用英語表達(dá)，這次荷花有了，但效果依然不盡如人意，畫質(zhì)較模糊，某些地方卡頓得像幻燈片。

第一次生成

第二次生成

杭州有公司

正在用它制作廣告樣片

“目前這類AI工具，生成視頻的整體水平還比較粗糙，達(dá)不到影視劇直接使用的標(biāo)準(zhǔn)和要求。”杭州元形水滴智能科技CEO、聯(lián)合創(chuàng)始人沈傳立一邊說，一邊傳過來幾段此前用AI生成的視頻。從畫面看，同樣存在顆粒感重、幀率不穩(wěn)定等問題，且人物臉部還有點(diǎn)扭曲和詭異。

這家位于濱江的科技公司，專業(yè)從事數(shù)字人、元宇宙等生成式人工智能相關(guān)的研發(fā)和業(yè)務(wù)。近期，他們正在為客戶用“文生視頻”的技術(shù)，制作商業(yè)廣告宣傳片的demo（樣片）。“因?yàn)楹炗斜Ｃ軈f(xié)議，細(xì)節(jié)不便透露，但就跟‘文生圖’的AI繪畫一樣，這（文生視頻）是目前市場(chǎng)上已經(jīng)在發(fā)展的事。”

那么，“文生視頻”的整體水平還不夠理想，是因?yàn)榧夹g(shù)問題嗎？

與圖像生成相比，優(yōu)質(zhì)和可控的視頻顯然更復(fù)雜。“不是技術(shù)做不到，而是需要有更多人參與。”沈傳立糾正了這種說法。“需要三點(diǎn)：一是數(shù)據(jù)的標(biāo)準(zhǔn)性和通用性，現(xiàn)在‘喂’給模型的數(shù)據(jù)比較雜和‘臟’；二是訓(xùn)練模型的建立和完善，就是需要更多LoRA模型（可以解決微調(diào)大模型的問題）；三是更多開放生態(tài)伙伴加入。說白了，就是好的生成模型，需要好的‘飼料喂養(yǎng)’，也需要更多技術(shù)公司參與進(jìn)來。”

事實(shí)上，目前，國(guó)內(nèi)外大廠都有正在開發(fā)的文生視頻AI工具，像是百度CreateLab、阿里達(dá)摩院的文本生成視頻大模型、谷歌Imagen，還有Meta的Make-A-Video等。

而在Runway等的技術(shù)接近能直接生成電影質(zhì)感的視頻前，至少還要經(jīng)過多次迭代。

這個(gè)時(shí)間大概是多久？

漫威電影《復(fù)仇者聯(lián)盟4》等的導(dǎo)演喬·羅素日前接受采訪時(shí)預(yù)測(cè)，兩年內(nèi)，人工智能就將能夠創(chuàng)造一部成熟的電影。

橙柿互動(dòng)·都市快報(bào)記者 童蔚

標(biāo)簽：