前言
自從 Runway(基礎介紹請先參考這篇)文字轉影片功能上線以來,就一直在提升影片產生的質量與可控性。而這幾個月Runway又再度更新了幾個功能,針對產生的影片有更多的操控性,除了可以讓影片從4秒延長到18秒以外,讓我們一起來看看Runway還有什麼新功能發布吧。
(圖片來源:Runway)
Runway-General Motion
這功能可以讓用戶控制影片的強度,分為1-10級,從輕微到劇烈的改變,不同動態數值的效果對比:
We’ve released a new feature in Gen-2: Motion Slider. Select a value from 1 to 10 to control the amount of movement in your output.
— Runway (@runwayml) August 30, 2023
Available now in browser and coming soon to iOS. pic.twitter.com/AZsxkmzAef
(影片來源:Runway Twitter)
Runway-Camera Motion鏡頭運鏡
透過UI介面用戶可以控制鏡頭的運動方向,包括:水平左移、水平右移、垂直上移、垂直下移、順時針旋轉、逆時針旋轉、鏡頭推進和鏡頭拉遠。從以下範例我們可以看得出來,有了運鏡的功能,就可以讓AI製作的影片更加生動。
Runway's seemingly approaching AI video from a different angle than Pika: director control.
— The Reel Robot (@TheReelRobot) November 30, 2023
This is a preview of the increased camera control you'll soon have. They're enabling real filmmaking.#RunwayGen2 #runway #aivideo pic.twitter.com/Jg6o0ZUHIV
(影片來源:Runway Twitter)
Runway-Motion Brush動態筆刷
Runway最近發表的重大新功能,用戶可以隨意在影像上塗抹任一區域,就可以將塗抹的區域變成動態。這樣我們就可以控制影像中哪邊要動,哪邊要靜止,除了可以提升影片的操控性,更可以減輕text to video常見的畫面扭曲問題,讓處理的效率變高以及影片的效果更加逼真。
Today we're releasing new features and updates to provide more control, greater fidelity and even more expressiveness when using Runway.
— Runway (@runwayml) November 20, 2023
We are excited to introduce Motion Brush, Gen-2 Style Presets, updated Camera Controls and more.
Thread below pic.twitter.com/VdF6MyCUSK
(影片來源:Runway Twitter)
除了提升生成影片的質量,Runway也一直在推動AI影片生態的發展。去年辦了首屆AI電影節(AIFF),邀請全球的藝術家使用最新的AI技術製作創意的短影片。
(圖片來源:Runway AIFF)
前一陣子也舉辦了為期兩天的AI短影片競賽『Gen-48』,全球的用戶也熱烈的參與,大家都可以從Runway的官網看到被評選出來得獎的影片,非常的精彩。
而Runway最近還推出了線上電視頻道Runway TV,24小時不間斷地播放由AI產生的影片,可見Runway非常致力於AI影片的發展。
(影片來源:Runway GEN-48)
(圖片來源:Runway TV)
結論:
從Runway的發展來看,我們可以預見到AI生成式影片的未來將會更加蓬勃發展。目前,許多新創公司也在發表相同的技術,這顯示了這個領域的活力和潛力。傳統的影片拍攝過程需要大量的時間和人力投入,但通過應用AI技術,我們可以大大提高效率和節省成本。AI生成式影片的發展不僅將改變傳統影片製作的方式,還將帶來更多創新和可能性。相信,未來的影片製作將更加便捷、高效和多樣化。