Runway 官網(wǎng):https://runwayml.com
Runway 是什么?Runway 是國(guó)外一家在線視頻剪輯制作網(wǎng)站,成立于 2018 年。它有非常完善的在線視頻處理技術(shù),更重要的是公司團(tuán)隊(duì)一直在積極地將生成性 AI 技術(shù)應(yīng)用到視頻內(nèi)容制作中,致力于降低視頻創(chuàng)作的門(mén)檻,幫助人們輕松制作出內(nèi)容強(qiáng)大且富有創(chuàng)意的視頻內(nèi)容。
Runway 目前已經(jīng)開(kāi)發(fā)了 30 多個(gè) AI 魔法工具,其中一部分是將 AI 圖像生成技術(shù)內(nèi)置。比如我們熟悉的根據(jù)文本生成圖像、根據(jù)圖像生成風(fēng)格化變體、圖像延展外繪、根據(jù)文本生成 3D 貼圖紋理、視頻局部無(wú)損放大等技術(shù),在 Runway 內(nèi)都可以實(shí)現(xiàn)。
另一部分則是令人驚喜的視頻處理魔法,除了我們前面提到的 3 種功能,Runway 還開(kāi)發(fā)了包括動(dòng)態(tài)追蹤,智能調(diào)色、智能慢鏡頭、平滑插幀及一鍵模糊人臉等功能。
“動(dòng)態(tài)追蹤”即通過(guò) AI 技術(shù)識(shí)別視頻中物體的運(yùn)動(dòng)軌跡,然后為其附上文字或者其他元素,這些元素會(huì)自動(dòng)跟隨物體一起運(yùn)動(dòng),不用手動(dòng)設(shè)置軌跡。
但更進(jìn)一步看,我們認(rèn)為 Runway 的模式是一個(gè) AI native tools 工廠,和字節(jié)的路徑很像。字節(jié)以推薦算法+資訊作為載體,制造了段子、新聞、貼圖、短視頻、中視頻等一系列產(chǎn)品,爆款程度不一。而 Runway 以“AI + 視覺(jué)創(chuàng)作”為載體,隨著 AI 技術(shù)每一次浪潮的迭代推出了 30 多個(gè)圖像視頻編輯工具,也有不少在業(yè)界成為爆款。
Runway 的產(chǎn)品哲學(xué)很清晰:一直站在 AI 技術(shù)演進(jìn)的前沿,始終基于 AI 新技術(shù)的邊界,尋找視頻和圖像編輯的全新方法。他們不希望做一個(gè)更好的 Photoshop 或 Premiere,而是希望借助云計(jì)算和 AI 的力量塑造全新的工作流。、、除了視頻處理工具,Runway 也將 AI 技術(shù)與音頻處理結(jié)合起來(lái),開(kāi)發(fā)出了自動(dòng)生成文字稿、一鍵去除空白音頻及智能去除背景雜音等工具。Runway 的研究團(tuán)隊(duì)目前還在開(kāi)發(fā)一種名為 Soundify 的音效系統(tǒng),該系統(tǒng)利用 AI 技術(shù)先識(shí)別視頻內(nèi)容,然后為之生成準(zhǔn)確高質(zhì)量的音頻,且自動(dòng)對(duì)齊音頻與視頻的進(jìn)度,以解決傳統(tǒng)視頻制作過(guò)程中尋找合適音頻困難、精準(zhǔn)對(duì)齊音頻與視頻耗時(shí)的問(wèn)題。