“AI影視不能為了用AI而選擇AI,而是要尊重電影的制作本質(zhì)?!壁w天奇對雷峰網(wǎng)(公眾號:雷峰網(wǎng))說道。
當(dāng)傳統(tǒng)的影視制作流程面臨成本高昂、周期漫長等挑戰(zhàn)時(shí),AI技術(shù)的出現(xiàn)為行業(yè)帶來了新的曙光。其中短劇作為一種新興的影視形態(tài),以其短小精悍、節(jié)奏緊湊的特點(diǎn),迅速崛起并吸引大量觀眾。同時(shí),短劇有更大的靈活性和商業(yè)潛力。
正是在這一趨勢下,趙天奇認(rèn)為,通過AI技術(shù)試圖解鎖新的內(nèi)容創(chuàng)作模式,為觀眾帶來全新的內(nèi)容選擇。
作為北京聚力維度科技有限公司的創(chuàng)始人,趙天奇本人博士期間就讀于北京郵電大學(xué),師從徐大雄院士;博士后就讀于清華大學(xué),師從戴瓊海院士,早在學(xué)生時(shí)代便已涉足3D內(nèi)容技術(shù)。此后,他創(chuàng)立公司,專注于用人工智能技術(shù)解決影視制作方向。當(dāng)行業(yè)還在將AI看作輔助工具時(shí),趙天奇已經(jīng)選擇將AI融入到影視制作的底層邏輯中,重構(gòu)內(nèi)容生產(chǎn)的流程,推動行業(yè)邁向新高度。
聚力維度創(chuàng)始人趙天奇
行業(yè)報(bào)告顯示,微短劇相關(guān)企業(yè)注冊量持續(xù)增長并在2020年迎來爆發(fā)突破一萬家,截至2023年底已達(dá)2.3萬家。市場上對優(yōu)質(zhì)短劇續(xù)集的巨大需求,也讓更多企業(yè)去深耕這個(gè)領(lǐng)域,并最終拓展到網(wǎng)劇、連續(xù)劇等更廣闊的市場。
在和趙天奇聊天的過程中,雷峰網(wǎng)了解到這家公司創(chuàng)業(yè)過程的高峰低谷時(shí)期,從早期的技術(shù)研發(fā)焦慮,到如今的商業(yè)化變現(xiàn)探索,走過了一條充滿挑戰(zhàn)卻又充滿希望的道路。受經(jīng)濟(jì)周期波動的當(dāng)下,這家科技企業(yè)是如何實(shí)現(xiàn)自我造血?又是如何借助AI降低短劇成本,并打造自己的產(chǎn)品護(hù)城河?帶著這些疑問,我們走近聚力維度創(chuàng)始人,試圖揭開這家科技公司背后的故事,探尋他們?nèi)绾卧贏I影視浪潮中乘風(fēng)破浪。
以下是雷峰網(wǎng)與趙天奇的對談實(shí)錄,在不改變原意的情況下做了編輯和調(diào)整:
雷峰網(wǎng):在AI技術(shù)變革快速的今天,為什么瞄準(zhǔn)AI短劇賽道?
趙天奇:首先選擇從動畫短劇切入,一方面是因?yàn)槎虅∽鳛榻陙黼y得的互聯(lián)網(wǎng)增量市場,發(fā)展勢頭迅猛,未來三年內(nèi)行業(yè)市場規(guī)模有望突破千億;另一方面是創(chuàng)作自由度高,在短劇市場,個(gè)人可以利用AI技術(shù)獨(dú)立制作并發(fā)布作品,發(fā)布門檻低;
其次,短劇產(chǎn)業(yè)對制作成本敏感,但在AI技術(shù)幫助下,能夠降低成本。例如,可以用每分鐘500-1000元的成本,制作出視覺效果與傳統(tǒng)每分鐘5萬到10萬的高成本動畫項(xiàng)目相媲美的作品。
最后,滿足當(dāng)下觀眾對短劇續(xù)集的期待值,利用AI來制作短劇,可以解決劇組不穩(wěn)定(場景搭建、人員招募等)等外部麻煩,提升短劇的潛力,做到無限續(xù)集和延展,同時(shí)結(jié)合IP屬性,實(shí)現(xiàn)授權(quán)和衍生品開發(fā)。因此,AI不僅降低了制作成本,還解鎖了更多創(chuàng)作和商業(yè)可能性。
所以聚力維度的商業(yè)模式是基于AI技術(shù),應(yīng)用于傳統(tǒng)影視領(lǐng)域,尤其是動畫片制作。核心目標(biāo)是通過自主研發(fā)的全流程3DAI影視制作平臺--賽博導(dǎo)演,包含自研多模態(tài)3D視頻大模型賽媧SEVA,可以把視頻中的對象以3D結(jié)構(gòu)化方式獨(dú)立生成,確保在不同鏡頭與運(yùn)動中完全一致,可編輯,可控。實(shí)現(xiàn)真人“老戲骨”級別的AI影視表演,支持任意時(shí)長。未來將通過這一創(chuàng)新平臺,每個(gè)人都有機(jī)會擁有一個(gè)AI劇組,一天即可制作10分鐘的優(yōu)質(zhì)影視內(nèi)容,開創(chuàng)AI影視制作的新時(shí)代。
雷峰網(wǎng):能聊聊公司的團(tuán)隊(duì)規(guī)模以及產(chǎn)品情況嗎?
趙天奇:團(tuán)隊(duì)大約有70 多個(gè)人,一半以上是研發(fā)團(tuán)隊(duì),目前我們主要用AI技術(shù)制作短劇,未來計(jì)劃擴(kuò)展到網(wǎng)劇和長篇連續(xù)劇。我們現(xiàn)階段正在開發(fā)的產(chǎn)品是賽博導(dǎo)演2.3版本,之前的“賽博演猿cybactor”是我們在大模型之前,專注于動作捕捉技術(shù)的階段。早在2017年時(shí),我認(rèn)為AI生成做不到影視級,創(chuàng)作者必須親自參與表演,這樣才能實(shí)現(xiàn)人人可以制作影視。因此我選擇了視覺捕捉作為核心算法和路線。
所以在那個(gè)階段,我們的產(chǎn)品叫“賽博演猿cybactor”?,F(xiàn)在,隨著技術(shù)升級到大模型,我們的產(chǎn)品也升級為“賽博導(dǎo)演”。
賽博導(dǎo)演演示圖
創(chuàng)作者不用參與表演。賽媧大模型優(yōu)先解決了創(chuàng)作者主要需求且獨(dú)一無二的對象生成:帶綁定的3D數(shù)字人模型。支持多模態(tài)輸入,包括隨機(jī)、文字、圖片等多種方式,支持精細(xì)編輯。
賽博導(dǎo)演演示圖
我們目前認(rèn)為,在3D動畫或數(shù)字化動畫的制作中,一家動畫公司90%以上的成本都集中在關(guān)鍵幀動畫和建模上。相比之下,運(yùn)鏡等拍攝環(huán)節(jié)的成本相對較低。因此,我們目前的主要精力放在動作表演的AI生成以及資產(chǎn)生成上,并將資產(chǎn)生成的重點(diǎn)放在人物生成上。
雷峰網(wǎng):目前短劇的制作成本是什么情況?以及動畫短劇在行業(yè)中占據(jù)什么位置?
趙天奇:短劇的制作成本現(xiàn)在大約是50萬到100萬元,可以制作100分鐘的內(nèi)容,這意味著每分鐘的成本在5000元到1萬元之間。其中,1萬元每分鐘的短劇屬于精品,而5000元每分鐘的算是成本下限,再低的質(zhì)量就很難吸引觀眾。
如果動畫短劇的成本下限無法控制在5000元,而只能達(dá)到5萬元,那么這個(gè)行業(yè)將會萎縮,即使是極限壓縮成本,將所有人員放到最便宜的城市,并刨除所有利潤,動畫的成本也難以低于每分鐘1.5萬元,這已經(jīng)超過了短劇的成本上限。而且,即使是1.5萬元每分鐘的動畫,其制作質(zhì)量往往還不如5000元每分鐘的實(shí)拍短劇,甚至某些方面更差。
雖然頭部短劇作品分賬能超過幾百萬甚至千萬,但是行業(yè)總的平均收入分賬在20萬左右,所以成本高、風(fēng)險(xiǎn)高。并且為了壓低成本,內(nèi)容均為簡單實(shí)拍,特效少,沒有動畫,整體內(nèi)容形式單一。影視制作方式主要有兩種形式:1.實(shí)拍+小部分虛拍+后期,2. 動畫制作。大模型 AIGC 發(fā)展迅猛,所以要擁抱人工智能。
雷峰網(wǎng):公司的商業(yè)化進(jìn)展如何?
趙天奇:我們計(jì)劃在春節(jié)期間,在“紅果”這樣的平臺上推出AI制作的短劇,正式開始商業(yè)化。
聚力維度即將在春節(jié)檔上線的短劇
公司發(fā)展可以分為三個(gè)階段,第一階段是從公司2016年成立到2021年,我們專注于AI影視制作的技術(shù)研發(fā),由于技術(shù)需要從頭研發(fā),加上我們一直傾向于依靠技術(shù)賺錢,而不是同時(shí)做傳統(tǒng)業(yè)務(wù),所以這個(gè)階段沒有進(jìn)行商業(yè)化。現(xiàn)在是商業(yè)化轉(zhuǎn)變的關(guān)鍵時(shí)期。
從2021年下半年開始,我們開始利用成熟的AI技術(shù)做項(xiàng)目,賦能直播、活動、文旅等行業(yè)。雖然這個(gè)階段的商業(yè)模式與我們最初的AI影視愿景不同,但它驗(yàn)證了我們的原創(chuàng)技術(shù),并帶來了收入。這個(gè)階段的轉(zhuǎn)型有兩個(gè)原因:一是技術(shù)逐漸成熟,二是我們需要在實(shí)踐中調(diào)整商業(yè)思維。目前,我們正邁向第三階段,即實(shí)現(xiàn)我們最初的AI影視商業(yè)愿景,用我們一開始就想好的方式賺錢。
雷峰網(wǎng):早期創(chuàng)業(yè)時(shí)感到焦慮嗎?
趙天奇:回想起當(dāng)時(shí)的創(chuàng)業(yè)歷程,的確是焦慮的,我經(jīng)歷過不同階段的焦慮。
早期是科研焦慮,擔(dān)心技術(shù)能否成功研發(fā),能否按時(shí)研發(fā)出來。2022年后,隨著融資環(huán)境變化,我們開始面臨融資焦慮。過去,技術(shù)領(lǐng)先就能持續(xù)融資,但現(xiàn)在不行了,必須考慮盈利。這就導(dǎo)致商業(yè)化變現(xiàn)和存活焦慮,我們必須自力更生,靠自己賺錢。我們擔(dān)心能否盈利,能否繼續(xù)進(jìn)行科研。目前為止,我們進(jìn)行到Pre- A+輪融資,而且即將全面實(shí)現(xiàn)AI影視商業(yè)模式,焦慮感已經(jīng)越來越少了。
雷峰網(wǎng):選擇3D內(nèi)容技術(shù),是出于怎樣的戰(zhàn)略布局考慮?
趙天奇:首先是個(gè)人興趣,我本人熱衷于欣賞電影,甚至此前想要以創(chuàng)作者身份進(jìn)入電影行業(yè)。后來意識到自己不適合成為純粹的創(chuàng)作型作者,所以就開始傾向于從技術(shù)角度切入這個(gè)產(chǎn)業(yè),為創(chuàng)作賦能。如果我對創(chuàng)作本身沒有興趣,也不會在剛開始就研究用AI技術(shù)來輔助產(chǎn)業(yè)發(fā)展。
其次,我認(rèn)為影視核心在于生產(chǎn)創(chuàng)作,而生產(chǎn)創(chuàng)作現(xiàn)在是被落后生產(chǎn)力所束縛。所以顛覆生產(chǎn)流程的創(chuàng)作成本,會成為影視整個(gè)鏈條中關(guān)鍵的一環(huán)。
聚力維度選擇走的3D路線,準(zhǔn)確來說是3D結(jié)構(gòu)化生成,與2D視頻大模型不同,我們選擇的路線更符合影視本質(zhì),在運(yùn)鏡,燈光,一致性上甚至不需要AI即可解決。相比之下比如有的2D視頻大模型公司宣稱自己能運(yùn)鏡,并提供幾種運(yùn)鏡方式供用戶選擇,就需要針對性的訓(xùn)練。
這里的“3D”并非僅指三維視覺,更重要的是“結(jié)構(gòu)化”。結(jié)構(gòu)化是關(guān)鍵,沒有結(jié)構(gòu)化的3D模型將失去可控性、可動性和可編輯性,僅僅是“3D”而已。3D加結(jié)構(gòu)化結(jié)合,既保留了3D的優(yōu)勢,如運(yùn)鏡的便捷性,又實(shí)現(xiàn)了對模型各部分的獨(dú)立控制、生成和組合。這使問題得以分解,各個(gè)擊破,避免了整體模型不可控的困境。
雷峰網(wǎng):在AI影視的應(yīng)用場景上,聚力維度相較于行業(yè)內(nèi)其他公司,更側(cè)重于哪些細(xì)分領(lǐng)域?其差異化競爭優(yōu)勢體現(xiàn)在哪里?”
趙天奇:今天我們討論AI影視,要評估3D路線的好壞和成本高低,就必須先明確“影視”的定義。我認(rèn)為,影視作品應(yīng)該達(dá)到傳統(tǒng)專業(yè)流程下,被大眾喜聞樂見的、具有一定水準(zhǔn)的制作水平。這是從過程和結(jié)果的角度定義的。從技術(shù)本質(zhì)上來說,影視是拍攝3D世界發(fā)生的故事,并將其呈現(xiàn)出來。所以,我們先確定一下影視的定義,而且它通常是敘事的,而非純粹的拍攝。
所以我們選擇3D路徑的優(yōu)勢在于其控制性,更符合電影制作的本質(zhì)。但它的缺點(diǎn)是當(dāng)前難以模擬實(shí)拍效果,也無法快速生成瞬息萬變的視覺效果。
所以聚力維度的商業(yè)模式是基于AI視覺捕捉技術(shù) ,應(yīng)用于傳統(tǒng)影視領(lǐng)域,尤其是動畫片制作。
雷峰網(wǎng):聚力維度的數(shù)據(jù)從哪里來?獲取數(shù)據(jù)的過程中有什么挑戰(zhàn)?
趙天奇:其實(shí)在早期研究中,我們內(nèi)部就發(fā)現(xiàn)該領(lǐng)域缺乏數(shù)據(jù),因此自2017年起,我們就將數(shù)據(jù)采集作為重點(diǎn)工作,并研究相關(guān)算法??梢詫⑵漕惐葹楣I(yè)生產(chǎn)中的工業(yè)母機(jī)和機(jī)器的關(guān)系,正如早期的機(jī)器學(xué)習(xí)算法為深度學(xué)習(xí)提供數(shù)據(jù),小模型為大模型提供數(shù)據(jù)。我們提出了“AI母數(shù)據(jù)”概念,強(qiáng)調(diào)第一手結(jié)構(gòu)化數(shù)據(jù)的重要性,這些數(shù)據(jù)最初是通過人工制作和動作捕捉采集獲得的。
相當(dāng)于是我們內(nèi)部完成了一整套關(guān)于我們這條路線的AI母數(shù)據(jù)的生產(chǎn)流程和相關(guān)技術(shù)。
賽媧SEVA獨(dú)立3D結(jié)構(gòu)性生成圖片生成模型
比如為了專門采集手部數(shù)據(jù),我們開發(fā)了一個(gè)獨(dú)特的采集系統(tǒng),這與傳統(tǒng)動作捕捉公司和影視制作公司的數(shù)據(jù)有很大不同。傳統(tǒng)動作捕捉公司的數(shù)據(jù)沒有經(jīng)過人工修改,有很多問題,無法訓(xùn)練;而影視制作公司往往只關(guān)注針對鏡頭內(nèi)的動作修改,鏡頭沒露出來的部分甚至問題非常大。
我們嘗試過將售賣動作捕捉硬件的公司提供的數(shù)據(jù)與影視制作公司修改后的數(shù)據(jù)結(jié)合使用,但無論是直接購買還是測試,最終的結(jié)論是,這方面并沒有現(xiàn)成的數(shù)據(jù)可以直接用。因此,我們必須自己解決3D路線的AI母數(shù)據(jù),經(jīng)過多年的努力,我們克服了很多困難,現(xiàn)在數(shù)據(jù)和數(shù)據(jù)技術(shù)反而成為了我們的優(yōu)勢和壁壘。
雷峰網(wǎng):面對新技術(shù)的沖擊,聚力維度有感到焦慮嗎?聚力維度的機(jī)會從何而來?
趙天奇:我最焦慮的點(diǎn)在于在不斷學(xué)習(xí)和研發(fā)過程中,進(jìn)展似乎不如預(yù)期般迅速。
目前來看,小公司的創(chuàng)業(yè)機(jī)會并非來自行業(yè)數(shù)據(jù)短缺,如今人人都能輕易獲取海量免費(fèi)的視頻、圖像和文本數(shù)據(jù)。大模型每增加一個(gè)數(shù)量級,就會對下一個(gè)數(shù)量級形成壓制。例如,投資十億的會壓倒投資一億的,投資百億的會壓倒投資十億的。最終,可能全球只剩下少數(shù)幾個(gè)玩家。比如練一個(gè)強(qiáng)大的大模型需要巨額投資,可能高達(dá)數(shù)千億,而市值超過數(shù)千億的公司屈指可數(shù)。如果訓(xùn)練大模型需要如此高昂的成本,且最終勝者只有一個(gè),那么情況就與過去不同了。過去,公司可以在不同的賽道、采用不同的路線、側(cè)重點(diǎn)、方式、定位或服務(wù)來尋求機(jī)會。但現(xiàn)在這種機(jī)會大大減少。
因此,從這個(gè)角度來看,多模態(tài)3D視頻大模型賽媧SEVA生成影視內(nèi)容路線確實(shí)是我的機(jī)會。因?yàn)?D領(lǐng)域缺乏大數(shù)據(jù),而我積累了一定量的數(shù)據(jù),這成為了我的護(hù)城河,其他人都缺乏這樣的數(shù)據(jù)優(yōu)勢。
目前,賽博導(dǎo)演賽媧大模型技術(shù)斬獲《朝陽區(qū)支持互聯(lián)網(wǎng)3.0創(chuàng)新發(fā)展的若干措施支持資金》的高成長企業(yè)加速發(fā)展項(xiàng)目、《朝陽區(qū)促進(jìn)通用人工智能創(chuàng)新應(yīng)用發(fā)展的若干措施》的支持優(yōu)秀垂直領(lǐng)域模型項(xiàng)目等榮譽(yù)。
賽媧SEVA獨(dú)立3D結(jié)構(gòu)性生成文字生成模型
聚力維度已經(jīng)跟多個(gè)頭部平臺達(dá)成了短劇制作合作,第一部短劇將在春節(jié)期間上線,首批會陸續(xù)推出20部短劇,后續(xù)將升級到月產(chǎn)10部乃至月產(chǎn)1000部。公司內(nèi)部正在建立AI影視制作精英種子團(tuán)隊(duì),未來計(jì)劃與政府共建AI短劇制作基地,培訓(xùn)學(xué)生使用賽博導(dǎo)演平臺制作AI短劇,培養(yǎng)新一代AI影視創(chuàng)作者。整個(gè)制作流程由聚力維度把控。通過簽約制方式和政府、學(xué)生、學(xué)校分成。
結(jié)語:
在與聚力維度的深入交流中,我們清晰地看到了AI技術(shù)在影視制作領(lǐng)域帶來的顛覆性變革,毫不夸張地說,未來AI技術(shù)與影視制作的深度融合已是大勢所趨。
正如趙天奇談到的一樣“如果技術(shù)問題得到解決,商業(yè)關(guān)系自然會水到渠成?!本哿S度憑借其在AI動畫領(lǐng)域的深厚積累,以及對影視制作流程的深刻理解,正以一種全新的方式重塑著動畫內(nèi)容的生產(chǎn)模式。
短劇市場的蓬勃發(fā)展,對成本的敏感性,以及對原創(chuàng)內(nèi)容的強(qiáng)烈需求,都與聚力維度的核心優(yōu)勢相契合。伴隨聚力維度在AI短劇領(lǐng)域的探索,也將看到更多AI技術(shù)賦能影視行業(yè)的可能性,為觀眾帶來更加豐富多元的視聽體驗(yàn)。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。