Runway 官網(wǎng):https://runwayml.com
Runway 是什么?Runway 是國外一家在線視頻剪輯制作網(wǎng)站,成立于 2018 年。它有非常完善的在線視頻處理技術(shù),更重要的是公司團隊一直在積極地將生成性 AI 技術(shù)應(yīng)用到視頻內(nèi)容制作中,致力于降低視頻創(chuàng)作的門檻,幫助人們輕松制作出內(nèi)容強大且富有創(chuàng)意的視頻內(nèi)容。
Runway 目前已經(jīng)開發(fā)了 30 多個 AI 魔法工具,其中一部分是將 AI 圖像生成技術(shù)內(nèi)置。比如我們熟悉的根據(jù)文本生成圖像、根據(jù)圖像生成風(fēng)格化變體、圖像延展外繪、根據(jù)文本生成 3D 貼圖紋理、視頻局部無損放大等技術(shù),在 Runway 內(nèi)都可以實現(xiàn)。
另一部分則是令人驚喜的視頻處理魔法,除了我們前面提到的 3 種功能,Runway 還開發(fā)了包括動態(tài)追蹤,智能調(diào)色、智能慢鏡頭、平滑插幀及一鍵模糊人臉等功能。
“動態(tài)追蹤”即通過 AI 技術(shù)識別視頻中物體的運動軌跡,然后為其附上文字或者其他元素,這些元素會自動跟隨物體一起運動,不用手動設(shè)置軌跡。
但更進一步看,我們認為 Runway 的模式是一個 AI native tools 工廠,和字節(jié)的路徑很像。字節(jié)以推薦算法+資訊作為載體,制造了段子、新聞、貼圖、短視頻、中視頻等一系列產(chǎn)品,爆款程度不一。而 Runway 以“AI + 視覺創(chuàng)作”為載體,隨著 AI 技術(shù)每一次浪潮的迭代推出了 30 多個圖像視頻編輯工具,也有不少在業(yè)界成為爆款。
Runway 的產(chǎn)品哲學(xué)很清晰:一直站在 AI 技術(shù)演進的前沿,始終基于 AI 新技術(shù)的邊界,尋找視頻和圖像編輯的全新方法。他們不希望做一個更好的 Photoshop 或 Premiere,而是希望借助云計算和 AI 的力量塑造全新的工作流。、、除了視頻處理工具,Runway 也將 AI 技術(shù)與音頻處理結(jié)合起來,開發(fā)出了自動生成文字稿、一鍵去除空白音頻及智能去除背景雜音等工具。Runway 的研究團隊目前還在開發(fā)一種名為 Soundify 的音效系統(tǒng),該系統(tǒng)利用 AI 技術(shù)先識別視頻內(nèi)容,然后為之生成準確高質(zhì)量的音頻,且自動對齊音頻與視頻的進度,以解決傳統(tǒng)視頻制作過程中尋找合適音頻困難、精準對齊音頻與視頻耗時的問題。