全球新消息丨估值暴漲3倍,《瞬息全宇宙》幕后公司Runway引領(lǐng)AI影視新時(shí)代
近日,生成式AI平臺Runway在谷歌領(lǐng)投的D輪融資中募集到約一億美元。Runway不僅是投資界的新星,其產(chǎn)品RunwayML參與制作的《瞬息全宇宙》也在不久前斬獲了奧斯卡最佳女主角獎。
“這是一個(gè)神奇的世界,留給人類(lèi)的是千變萬(wàn)化的瞬間?!闭珉娪袄锱_詞闡述的那樣,Runway旗下的視頻編輯工具Gen-2展現了AI將文本轉化為視頻世界的魔力與神奇,只需要輸入短短幾個(gè)詞語(yǔ)或者一句話(huà)的描繪,就能為我們生成想要的視頻畫(huà)面。
(相關(guān)資料圖)
視頻是當代社會(huì )內容媒體的重要組成部分,而TikTok、Instagram、Snapchat和YouTube等視頻應用也是過(guò)去幾年下載量最高的應用之一。而短視頻更符合現代人在快節奏與高信息密度下利用碎片化時(shí)間的娛樂(lè )需求,垂直細分領(lǐng)域亦是短視頻的發(fā)展趨勢,Runway恰好滿(mǎn)足二者。
下面我們將探究Runway的發(fā)展歷程,并介紹旗下核心產(chǎn)品與獨特技術(shù),并結合AIGC與其對國內外娛樂(lè )行業(yè)的影響進(jìn)行分析。
Runway崛起之路
Runway是福布斯公布的2023年度AI 50榜單最值得關(guān)注的上榜公司之一,但他的崛起絕不是一蹴而就,而是經(jīng)歷了巧合與必然。
求學(xué)階段
在創(chuàng )辦公司前,Valenzuela花費大量時(shí)間了解計算機如何應用于視覺(jué)藝術(shù)。他雖然只擁有經(jīng)濟學(xué)背景,卻癡迷于電腦的藝術(shù)創(chuàng )造力,并好奇信息技術(shù)能夠使藝術(shù)家對圖像與視頻產(chǎn)生何種結果。
因此,他在搬家去紐約后,報名攻讀了紐約大學(xué)的ITP(交互電子媒體)專(zhuān)業(yè)。這是一個(gè)為期2年的知名碩士項目,主要培養學(xué)生去探索新科技,并與其他學(xué)科交互,從而改善人類(lèi)生活。
Valenzuela在紐約大學(xué)研究ML模型在創(chuàng )意領(lǐng)域中圖像和視頻分割的應用方面時(shí),結識了另外兩名創(chuàng )始人。
他們在學(xué)習ImageNet和AlexNet后,意識到世界有大事即將發(fā)生,但沒(méi)有人去做,那為什么不選擇自己去做呢?
雛形初現
最初他們只專(zhuān)注于學(xué)術(shù)道路,而在進(jìn)行論文研究時(shí),Valenzuela意識到完美的學(xué)術(shù)假想只會(huì )成為實(shí)踐的泡沫,于是他開(kāi)始更多地與藝術(shù)行業(yè)人員進(jìn)行交流,在學(xué)校開(kāi)始了第一個(gè)在Photoshop和Premiere中建立了一系列實(shí)驗和集成的研究項目,并受到外界的鼓舞。
Adobe的人工智能團隊也向他們拋出了橄欖枝,但他們想要的是控制整個(gè)創(chuàng )造流程,而不是根據既定的路線(xiàn)去創(chuàng )造。Valenzuela認為Premiere和Final Cut只是服務(wù)于舊媒體時(shí)代專(zhuān)業(yè)人員創(chuàng )作影音的工具,并非為短視頻時(shí)代下個(gè)人服務(wù)的視頻工具。于是,他們產(chǎn)生了成立公司的想法。
很快,在2018年,Runway首先被作為一個(gè)模型應用商店推出,使用戶(hù)能夠針對各種用例部選擇機器學(xué)習模型,產(chǎn)品特色是應用可視化界面抽象了原本的推理和訓練過(guò)程。
隨著(zhù)模型目錄和用戶(hù)群的不斷增長(cháng),團隊開(kāi)始看到在視頻編輯中出現了一種特別的使用模式。許多視頻編輯和電影制作人使用Runway,是因為他們發(fā)現了利用模型能夠完成自動(dòng)化繁瑣工作流程的潛力。
于是Runway開(kāi)始嘗試利用其模型目錄中的知識,圍繞視頻編輯進(jìn)行更深入的構建。整個(gè)團隊意識到他們正在削減制作視頻的時(shí)間和成本,并使ML視頻編輯變得人人皆可參與。就在那時(shí),他們改變了策略,決定致力于構建即時(shí)視頻生成工具。
大獲成功
Runway被定義為下一代視頻創(chuàng )作者的新工具。Valenzuela表示在藝術(shù)創(chuàng )意中,人們永遠無(wú)法找到能做一切事情的工具,但Runway卻是一款根據人們的問(wèn)題與洞察力而提供幫助的工具,旨在減少人們制作視頻的繁瑣與麻煩。
Runway利用市場(chǎng)對生成式人工智能的熱情,在連續募集幾輪風(fēng)險投資后,估值達到15億美元,一躍成為新晉生成式AI獨角獸。在今年3月份與亞馬遜達成一項大型云協(xié)議后,Runway又在不久前與谷歌簽署了一項重大的云計算協(xié)議,可謂是一呼百應,春風(fēng)得意。
如今,Runway已成為一款成熟的視頻編輯器,可以在瀏覽器中進(jìn)行實(shí)時(shí)協(xié)作,并擁有越來(lái)越多的AI視頻編輯和創(chuàng )建功能。它被成千上萬(wàn)的用戶(hù)使用,無(wú)論是從業(yè)余愛(ài)好者,還是專(zhuān)業(yè)人員。
Runway的產(chǎn)品布局
在Runway,他們相信每個(gè)人都有自己的故事。其使命是:讓所有人都能進(jìn)行內容創(chuàng )作。因此該公司正在利用計算機圖形學(xué)和機器學(xué)習的最新進(jìn)展來(lái)突破創(chuàng )造力的界限,從而降低內容創(chuàng )作的障礙,掀起新一波講故事的浪潮。
在過(guò)去的四年里,該公司從頂級投資者那里籌集了資金,團隊規模從小到只有容納一張桌子的人數,到團隊成員來(lái)自各行各業(yè)并富有創(chuàng )造力,多年來(lái)致力于人工智能視頻編輯軟件的研發(fā)。
Runway的產(chǎn)品和技術(shù)有很多,Runway創(chuàng )業(yè)之初的產(chǎn)品形態(tài)是一個(gè)關(guān)于ML(機器學(xué)習)模型的應用商店,用戶(hù)可以在這上面使用數百個(gè)模型,比如StyleGAN模型。
隨后Runway基于新的AI算法發(fā)布大約30余個(gè)AI創(chuàng )作工具,包含音頻、圖片、視頻、3D和生成五個(gè)大類(lèi),涵蓋了幾乎所有的音視頻內容生成和處理工具。
此外,RunwayML作為全球首款AI生成視頻軟件,是其向傳統內容平臺和移動(dòng)端進(jìn)軍的表率。它除了提供一整套多模態(tài)人工智能工具庫之外,該工具庫還推出圖像修復、綠幕修圖、運動(dòng)跟蹤三大核心功能,可謂是將黑科技直接拉滿(mǎn),效果炸裂的程度。
如今,Runway的核心產(chǎn)品為視頻編輯器Gen-1和Gen-2。Gen-1模型可以通過(guò)輸入文本或圖像,改變原視頻的風(fēng)格,例如將現實(shí)中的實(shí)拍鏡頭轉換為卡通剪紙世界。Gen-2模型可以直接使用文本生成視頻場(chǎng)景, 使用戶(hù)可以使用文本提示生成“逼真的視頻內容”并“自動(dòng)剪輯視頻”。
Runway的產(chǎn)品和技術(shù)不言而喻,其客戶(hù)除了包含許多知名品牌和機構以外,例如Adobe、Facebook、Google、Netflix和The New York Times等,還有抖音和YouTube用戶(hù)以及主流電影和電視劇工作室都在使用該公司的創(chuàng )造,被廣泛應用于電影、電視和廣告等領(lǐng)域。例如:《黑寡婦》中的特效制作;斯蒂芬-科爾伯特主持的《深夜秀》;《瞬息全宇宙》狂拽酷炫的視覺(jué)效果等等。
其應用領(lǐng)域的擴展背后是產(chǎn)業(yè)面臨的巨大變革,作為視頻領(lǐng)域的“神奇魔法”,Runway等工具受到了影視制作行業(yè)的歡迎,但并非所有人都對AI表示歡迎。
編劇抵制,特效最?lèi)?ài)
隨著(zhù)AI工具火遍全球,人們的生活的確變得更加便捷,但這也導致了文案、編劇等文字類(lèi)工作者面臨失業(yè)。公司用AI寫(xiě)劇本,這不僅是在搶編劇們的飯碗,同時(shí)也貶低了“人類(lèi)勞動(dòng)的尊嚴和價(jià)值”。
導演郭帆表示,“《流浪地球》第三季如果拍攝的話(huà),現場(chǎng)可能至少一半以上的人會(huì )減少掉。人工智能對我們來(lái)說(shuō)既是挑戰,也是機遇,可能是我們彎道超車(chē)好萊塢的機會(huì )?!?/p>
目前在好萊塢,制片方出于成本考量,已經(jīng)在大量使用AI進(jìn)行創(chuàng )作。據媒體此前報道,AI機器在學(xué)習某熱門(mén)美劇的劇情后,已經(jīng)可以為新一季的第一集撰寫(xiě)劇本大綱。
這種利用AI進(jìn)行創(chuàng )作的行為卻引發(fā)了美國好萊塢編劇工會(huì )(WGA)數千名電影和電視編劇的強烈抵制,他們抗議收入過(guò)低和AI越來(lái)越多地取代人類(lèi)參與劇本寫(xiě)作的現象?!逗阽R》主創(chuàng )查理·布洛克在接受采訪(fǎng)時(shí)說(shuō),他曾經(jīng)用ChatGPT寫(xiě)了一集《黑鏡》劇本,結果“跟垃圾一樣”。
雖然同屬于影視行業(yè),但特效制作者對待AI的態(tài)度卻截然相反,他們正在積極擁抱AI技術(shù)。
斬獲奧斯卡金像獎的《瞬息全宇宙》的特效團隊便是在A(yíng)I技術(shù)的加持下,僅靠五人就完成了后期制作,其中名場(chǎng)面 “熱狗手”還獲得了業(yè)內外的一致好評。
這個(gè)成功的案例表明,AI技術(shù)在影視創(chuàng )作中的潛力是巨大的,也是不可忽視的。為了探討AI技術(shù)如何改變影視行業(yè)的未來(lái),最近,非營(yíng)利組織AI LA在洛杉磯舉辦了“AI on the Lot”會(huì )議,最終得到“人工智能的時(shí)代已經(jīng)到來(lái)”和“所有創(chuàng )意工作人員都應該學(xué)會(huì )使用它”這兩個(gè)結論。
趨勢不可擋,技術(shù)革新的車(chē)輪滾滾而過(guò),AI的入侵大戲已在好萊塢悄然上演。
AI公司正在入侵好萊塢
的確,人工智能的時(shí)代已經(jīng)到來(lái),并且它正在改變著(zhù)影視行業(yè)的游戲規則,越來(lái)越多的AIGC公司已蓄勢待發(fā),為影視制作帶來(lái)全新的靈感。
Deep Voodoo
Deep Voodoo由知名動(dòng)畫(huà)劇集《南方公園》的創(chuàng )作者Trey Parker和Matt Stone創(chuàng )辦,專(zhuān)注于開(kāi)發(fā)Deepfake技術(shù)的視效服務(wù)和合成媒體技術(shù)項目。
Deepfake是一種利用深度學(xué)習等機器學(xué)習方法創(chuàng )建或合成視聽(tīng)覺(jué)內容的技術(shù),這種技術(shù)可以將已有的圖像或視頻中的人臉或表情替換成目標人物,從而達到偽造身份或表情的目的。
該公司的換臉技術(shù)自推出以來(lái)便廣受關(guān)注,比如說(shuō)唱歌手Kendrick Lamar的《The Heart Part 5》MV以及籃球巨星科比的換臉視頻。
Metaphysic
同樣利用Deepfake技術(shù)進(jìn)行視頻創(chuàng )作的還有Metaphysic,該公司曾在去年9月利用Deepfake讓已經(jīng)故去多年的貓王登上了《美國達人秀》的舞臺。
此外,在經(jīng)典電影《阿甘正傳》原班人馬合作的新片中,該公司將利用AI技術(shù)對主角湯姆·漢克斯和羅賓·懷特的面部進(jìn)行年輕化還原。
MARZ
MARZ作為漫威劇集《旺達幻視》以及Netflix劇集《太陽(yáng)召喚》背后的視效工作室,開(kāi)發(fā)了基于A(yíng)I的視效工具“Vanity AI”。
Vanity AI可以自動(dòng)地完成2D的老化、年輕化、美容、假發(fā)和假肢等視效修飾,大大縮短了制作時(shí)間和成本。
此外,MARZ公司的COO Matt Panousis認為配音和畫(huà)面不同步的問(wèn)題是內容無(wú)法得到更好傳播的主要原因之一,因此該公司正著(zhù)手開(kāi)發(fā)一項用于解決音畫(huà)不同步問(wèn)題的工具,這種工具將能幫助傳媒公司們更好地放眼海外以尋求更大的發(fā)展。
Respeecher
Respeecher是一家烏克蘭的初創(chuàng )公司,成立于2018年,擅長(cháng)運用AI技術(shù)“克隆”陳舊影像檔案中演員的聲音,然后用于新的電影或游戲制作中。在去年Disney+推出的劇集《歐比旺·克諾比》里,Respeecher就成功“克隆”了黑武士的標志性呼吸聲。
同樣,在另一部改編自《星球大戰》、由盧卡斯影業(yè)打造的劇集《波巴·費特之書(shū)》里,Respeecher也還原了盧克·天行者的聲音。
此外,在2021年贏(yíng)得艾美獎的紀錄短片《Event of Moon Disaster》里,Respeecher也利用機器學(xué)習技術(shù)來(lái)處理了1969年尼克松關(guān)于阿波羅11號任務(wù)的演講的畫(huà)面和聲音。
除了上述的幾家公司,還有一些AIGC公司也正在改變著(zhù)影視和動(dòng)畫(huà)行業(yè)。比如利用生成式AI技術(shù)為外語(yǔ)電影和劇集重新進(jìn)行本地語(yǔ)言配音的Deepdub,以智能計算機視覺(jué)技術(shù)、光場(chǎng)技術(shù)、深度學(xué)習技術(shù)為核心的中國公司疊境數字(DGene),以及由參演過(guò)《X戰警》和《頭號玩家》的明星Tye Sheridan和動(dòng)畫(huà)特效專(zhuān)家Nikola Todorovic聯(lián)合創(chuàng )立的公司W(wǎng)onder Dynamics等
Stay hungry,stay foolish
Runway的創(chuàng )業(yè)成功符合當下生成式AI潮流與短視頻媒體時(shí)代背景,很難說(shuō)不屬于過(guò)程順勢而為,結果水到渠成。
“每個(gè)平行世界的我們都存在著(zhù)無(wú)限可能?!耙淋搅赵陔娪爸械母袊@是不是也能印證到Runway創(chuàng )始人的職業(yè)生涯中?他拒絕加入谷歌,如今帶領(lǐng)Runway又與谷歌展開(kāi)緊密合作。
Valenzuela曾在接受采訪(fǎng)時(shí)表示,無(wú)論是創(chuàng )業(yè)還是工作,只有保持不斷學(xué)習的心態(tài)與超過(guò)常人的學(xué)習速度,才能創(chuàng )造出新的產(chǎn)品?;仡櫵麑IGC的追求與堅持,即使他當時(shí)選擇谷歌,我們也相信他絕不會(huì )泯然眾人矣。
AIGC的爆火對元宇宙的發(fā)展不是沖擊,而是助力。元宇宙終將帶領(lǐng)我們把現實(shí)世界與虛擬世界融為一體,這個(gè)看似遙遠的理念離不開(kāi)人工智能技術(shù)的支撐。
2023年已過(guò)半,元宇宙遠去了嗎?不,它只是換了個(gè)旗幟重回我們身邊。
本文來(lái)源:元宇宙之心,原文標題:《估值暴漲3倍,《瞬息全宇宙》幕后公司Runway引領(lǐng)AI影視新時(shí)代》
風(fēng)險提示及免責條款 市場(chǎng)有風(fēng)險,投資需謹慎。本文不構成個(gè)人投資建議,也未考慮到個(gè)別用戶(hù)特殊的投資目標、財務(wù)狀況或需要。用戶(hù)應考慮本文中的任何意見(jiàn)、觀(guān)點(diǎn)或結論是否符合其特定狀況。據此投資,責任自負。關(guān)鍵詞: