“用AI贏得「注意力之戰(zhàn)」。”
作者丨劉玥
文章來(lái)源丨哈佛商業(yè)評(píng)論
今年4月,在北京的一場(chǎng)影視行業(yè)論壇上,愛(ài)奇藝基礎(chǔ)架構(gòu)與智能分發(fā)事業(yè)群總裁劉文峰正通過(guò)大屏幕演示手機(jī)端的一個(gè)新功能“跳看”:前一秒還是畫(huà)師在寺廟中留下一幅未完成點(diǎn)睛的畫(huà)作,手指一滑,屏幕中一個(gè)黑衣人潛入寺中,還未走出幾步,便在驚雷中暴斃而亡。一段原本8分鐘的開(kāi)場(chǎng)戲,就濃縮成3分鐘,緊湊又充滿(mǎn)懸念。
“這不跟看短劇一樣么?”這一刻起,長(zhǎng)視頻不再只有一種打開(kāi)方式。而能夠?qū)崿F(xiàn)“長(zhǎng)劇短看”、進(jìn)退自如切換劇情的秘密武器正是生成式AI。
時(shí)間撥回三個(gè)月前,一次內(nèi)部會(huì)議上,愛(ài)奇藝創(chuàng)始人、CEO龔宇提出了“跳看”這個(gè)構(gòu)想。這源于他對(duì)用戶(hù)的洞察:面對(duì)相同內(nèi)容,不同用戶(hù)的興趣點(diǎn)和關(guān)注點(diǎn)也不同,而在這個(gè)缺乏耐心的時(shí)代,用戶(hù)的注意力也在變得稀缺。那么,如何通過(guò)供給側(cè)改革,抓住用戶(hù)注意力、為用戶(hù)提供更個(gè)性化的觀影需求?愛(ài)奇藝的解法是:在大語(yǔ)言模型加持下,基于對(duì)用戶(hù)個(gè)性化觀看行為的分析,自動(dòng)識(shí)別并推薦精彩劇情點(diǎn)。
當(dāng)一眾編劇導(dǎo)演還在驚嘆AI時(shí)代長(zhǎng)視頻的觀看邏輯快要被顛覆時(shí),距離北京1400公里外的橫店片場(chǎng),導(dǎo)演金哲勇正盯著眼前的監(jiān)視器。屏幕上,演員土豆正踏過(guò)青山、草原和沙漠,每一次晨昏交匯的光線(xiàn)映照在他臉上、樹(shù)影間、戈壁處都留下了光陰的印跡。但其實(shí),他只是在攝影棚內(nèi)的跑步機(jī)上揮汗如雨,身后沒(méi)有綠幕,也沒(méi)有繁復(fù)的置景,只有一塊500平米的沉浸式LED幕墻。
這場(chǎng)戲所有背景視頻素材都是在AI文生圖、圖生視頻的基礎(chǔ)上實(shí)現(xiàn)的。從導(dǎo)演確認(rèn)第一張概念圖,到完成三個(gè)場(chǎng)景的視頻背景生成,只花了不到一天時(shí)間。
不經(jīng)意間,AI對(duì)影視行業(yè)的沖擊和顛覆,從概念走入現(xiàn)實(shí),從用戶(hù)端的淺層體驗(yàn)延伸到內(nèi)容創(chuàng)作的核心環(huán)節(jié)。
彼時(shí),距離龔宇斷言“生成式AI將在3-5年內(nèi)徹底改變影視行業(yè)”不過(guò)580天。而在同年晚些時(shí)候,《哈佛商業(yè)評(píng)論》中文版2023年會(huì)上,龔宇演講的結(jié)語(yǔ)是:“人類(lèi),不會(huì)被AI取代。不掌握AI的人類(lèi),將被掌握AI的人類(lèi)取代。”
龔宇分享關(guān)于AI的思考
這是懸在龔宇頭上的達(dá)摩克利斯之劍,也成為此后580天里愛(ài)奇藝與生成式AI共舞的內(nèi)驅(qū)力。
01
動(dòng)起來(lái),比什么都重要
張曉媚是愛(ài)奇藝影視文學(xué)研發(fā)中心負(fù)責(zé)人,20多年來(lái)一直專(zhuān)注在內(nèi)容的挖掘和創(chuàng)作,經(jīng)歷過(guò)無(wú)數(shù)個(gè)打起精神看劇本的深夜。2023年3月,GPT-4發(fā)布不久,她被拉進(jìn)一場(chǎng)高層會(huì)議。龔宇與劉文峰分坐兩側(cè),討論的核心議題正是如何用AI重塑影視內(nèi)容的創(chuàng)作與評(píng)估。“我記得當(dāng)時(shí)老板對(duì)文峰說(shuō),你們的目標(biāo)就是把曉媚‘替代’掉。”她回憶道。
在這場(chǎng)“被革命”的技術(shù)創(chuàng)新中,張曉媚的新角色是“AI大模型的老師”。“我面對(duì)的第一個(gè)挑戰(zhàn),就是教會(huì)AI理解什么是‘情節(jié)’、什么是‘?dāng)⑹陆Y(jié)構(gòu)’。”
如何盡快讓AI像人一樣理解內(nèi)容?每周二下班后,張曉媚的影研團(tuán)隊(duì)和智能制作產(chǎn)品的開(kāi)發(fā)團(tuán)隊(duì)、算法技術(shù)團(tuán)隊(duì)就會(huì)聚在一起“拉片”:讀完劇本的一個(gè)章節(jié),“碼字的”和“碼農(nóng)”一起對(duì)其中的情節(jié)點(diǎn)做討論和評(píng)級(jí)。公司里的兩種人、兩種不同思維,在這一時(shí)空展開(kāi)跨學(xué)科的交互與碰撞。
兩三個(gè)月內(nèi),他們仔細(xì)為《隱秘的角落》《蒼蘭訣》等優(yōu)秀劇本做了評(píng)級(jí)標(biāo)注。這批劇本被路香菊所在的AI算法團(tuán)隊(duì)拿去做深度拆解和分析,轉(zhuǎn)化為機(jī)器能夠“讀懂”的結(jié)構(gòu)化信息,成為訓(xùn)練大模型的關(guān)鍵語(yǔ)料。通過(guò)不斷“喂養(yǎng)”,優(yōu)化其理解與生成能力,AI從最初僅能識(shí)別文本的字面含義,進(jìn)化到能夠聯(lián)系上下文,理解并洞察文字背后隱藏的復(fù)雜情感。機(jī)器的思維,越來(lái)越向人靠近。
這個(gè)能讀通劇本的應(yīng)用型AI隨后出師,就是2024年發(fā)布的“劇本工坊”。
不只張曉媚,愛(ài)奇藝所有員工都在經(jīng)歷類(lèi)似的快速轉(zhuǎn)變。不上車(chē)就會(huì)被落下。什么時(shí)候意識(shí)到危機(jī)就在身邊?受訪(fǎng)者們不約而同地提到了2023年初舉行的一次全員大會(huì)。
當(dāng)年3月3日,所有員工被要求參加主題為“在愛(ài)奇藝業(yè)務(wù)場(chǎng)景中玩轉(zhuǎn)AI”的培訓(xùn),不得缺席。這樣的全員培訓(xùn)是愛(ài)奇藝成立15年歷史上唯一的一次。很快,員工們發(fā)現(xiàn)內(nèi)部OA系統(tǒng)上線(xiàn)了AIGC專(zhuān)區(qū),一批生成式AI工具開(kāi)放全員免費(fèi)使用。龔宇提出,不管是否工作需要,專(zhuān)區(qū)里的AI工具大家都可以嘗試。“關(guān)鍵是用起來(lái),比如試試用它幫你看體檢報(bào)告”。
線(xiàn)上線(xiàn)下,人力資源部門(mén)圍繞生成式AI主題的課程和分享舉辦了一輪又一輪。其中,僅線(xiàn)上課程就開(kāi)設(shè)了40多門(mén),超9成的導(dǎo)師來(lái)自愛(ài)奇藝內(nèi)部。先用帶后用,不同需求交叉培訓(xùn)。負(fù)責(zé)內(nèi)部培訓(xùn)的HR劉虹邑回憶:“除了請(qǐng)外部嘉賓,還去各部門(mén)打聽(tīng)有沒(méi)有對(duì)AI工具使用有研究的同事,結(jié)果發(fā)掘了很多寶藏。”
2024年,愛(ài)奇藝AI視覺(jué)創(chuàng)意大賽開(kāi)賽,200多支跨部門(mén)團(tuán)隊(duì)參賽,帶來(lái)了121組生成式AI輔助設(shè)計(jì),參賽者中有運(yùn)營(yíng)、宣傳、程序員,絕大部分都不是專(zhuān)業(yè)設(shè)計(jì)師。重要的是,一線(xiàn)員工由此切身感受到了效率的躍升。獲得一等獎(jiǎng)的團(tuán)隊(duì)表示:“創(chuàng)作過(guò)程中生成了上千張AI圖片,搭建了超10條ComfyUI工作流,嘗試了近20種AI工具,AI帶來(lái)的效率提升令人驚嘆。”
從管理層到一線(xiàn)員工都意識(shí)到“AI與我有關(guān)”時(shí),戰(zhàn)略轉(zhuǎn)型便不再只是一句愿景。管理學(xué)著名的“錢(qián)德勒命題”指出,企業(yè)組織結(jié)構(gòu)應(yīng)隨經(jīng)營(yíng)戰(zhàn)略而調(diào)整,組織結(jié)構(gòu)制約著戰(zhàn)略的實(shí)施。愛(ài)奇藝的AI文化建設(shè)與靈活的組織調(diào)整,為其AI戰(zhàn)略落地提供了堅(jiān)實(shí)基礎(chǔ)。
在龔宇看來(lái):“世界在變、社會(huì)在變、行業(yè)在變、技術(shù)也在變。我們需要?jiǎng)討B(tài)地看待行業(yè)的變化,并持續(xù)跟隨和適應(yīng)這些變化。”
02
沉下去,用AI武裝影視工業(yè)
2023年夏,北京遭遇罕見(jiàn)持續(xù)40度高溫,而大語(yǔ)言模型市場(chǎng)的熱度更甚。
年初GPT-4發(fā)布后,國(guó)內(nèi)文心一言、通義千問(wèn)、天工等大模型相繼亮相,生成式AI落地場(chǎng)景的競(jìng)爭(zhēng)日趨激烈。一些面向消費(fèi)者的AI應(yīng)用如“某某AI相機(jī)”,甚至很快積累了數(shù)以10萬(wàn)計(jì)的用戶(hù)。
“跟不跟?”愛(ài)奇藝對(duì)此有過(guò)激烈討論。調(diào)用大模型基礎(chǔ)功能開(kāi)發(fā)類(lèi)似產(chǎn)品,當(dāng)時(shí)對(duì)技術(shù)團(tuán)隊(duì)來(lái)說(shuō)并非難事。然而,最終的決定是“不做”——因?yàn)椤昂?jiǎn)單調(diào)用無(wú)法形成核心競(jìng)爭(zhēng)力”。
“我們判斷,僅僅調(diào)用大模型的基礎(chǔ)能力無(wú)法形成愛(ài)奇藝的核心競(jìng)爭(zhēng)力。生成式AI應(yīng)該被用于那些更能深刻改變影視工業(yè)未來(lái)的領(lǐng)域。”劉文峰解釋道。
這是愛(ài)奇藝對(duì)待AI的一貫態(tài)度。早在2018年,龔宇就在致全體員工信中寫(xiě)道:“AI將更深度地影響我們這個(gè)行業(yè),未來(lái)我們會(huì)在這方面投入巨大。”
“我問(wèn)過(guò)一些程序員,AI是不是會(huì)對(duì)他們的工作產(chǎn)生沖擊。但他們的回答卻是感覺(jué)自己變得更強(qiáng)大了,好像突然之間有了大量的工具可以幫忙,跨語(yǔ)言編寫(xiě)代碼的門(mén)檻也降低了。不僅是程序員,設(shè)計(jì)師的感受也是如此。”劉文峰說(shuō)。
愛(ài)奇藝本身并不研發(fā)通用大語(yǔ)言模型,但其豐富的多模態(tài)場(chǎng)景對(duì)大語(yǔ)言模型的訓(xùn)練和應(yīng)用需求巨大。不出意外,在3月那次“動(dòng)員會(huì)”后,后臺(tái)團(tuán)隊(duì)很快發(fā)現(xiàn)大模型的調(diào)用量顯著上升,從產(chǎn)品研發(fā)團(tuán)隊(duì)、到內(nèi)容工作室的需求申請(qǐng)紛至沓來(lái)。截至2024年6月,公司里超98%的員工調(diào)用過(guò)大模型,2024年的調(diào)用量較2023年猛增83倍。在內(nèi)部搭建的智能體開(kāi)發(fā)平臺(tái)——奇智上,就有64個(gè)業(yè)務(wù)調(diào)用了6300多個(gè)智能體應(yīng)用。
這組數(shù)據(jù)的背后,是一個(gè)多部門(mén)緊密聯(lián)動(dòng)、協(xié)同開(kāi)發(fā)的AI創(chuàng)新體系:技術(shù)團(tuán)隊(duì)評(píng)估引入基礎(chǔ)大模型,策略團(tuán)隊(duì)規(guī)劃產(chǎn)品路線(xiàn)圖,應(yīng)用團(tuán)隊(duì)負(fù)責(zé)數(shù)據(jù)、對(duì)齊模型,內(nèi)容工作室等使用團(tuán)隊(duì)提出需求并協(xié)助模型訓(xùn)練,從而共同推進(jìn)基于大模型的創(chuàng)新應(yīng)用開(kāi)發(fā)和快速落地。在內(nèi)容創(chuàng)意、制作乃至商業(yè)化探索中,生成式AI都被視為關(guān)鍵變量。
和張曉媚在一個(gè)會(huì)議室里“拉片”的王慶豐,長(zhǎng)期從事影視行業(yè)戰(zhàn)略規(guī)劃和投資,2023年夏天調(diào)崗加入新成立的“AIGC內(nèi)容科技創(chuàng)新中心”,新使命是結(jié)合公司戰(zhàn)略、內(nèi)容需求和技術(shù)能力,推動(dòng)生成式AI落地。“劇本工坊”“影像工坊”等就是近兩年他參與推出的重要應(yīng)用。
一直以來(lái),影視作品從劇本創(chuàng)意到拍攝制作再到播出,其間多個(gè)評(píng)估環(huán)節(jié)嚴(yán)重依賴(lài)人的經(jīng)驗(yàn)。王慶豐堅(jiān)信,將人的經(jīng)驗(yàn)和AI的執(zhí)行能力結(jié)合起來(lái),可以讓評(píng)估更深入、更全面。調(diào)崗后,他密集地與工作室制片人、導(dǎo)演、編劇做訪(fǎng)談?wù){(diào)研,漸漸明晰了愛(ài)奇藝需要的AI工具應(yīng)該是什么樣。
2023年9月28日,這個(gè)時(shí)間他記得很清楚——第一版小說(shuō)提煉大綱和人物小傳的功能上線(xiàn)。很快,能力迭代至第二代,能針對(duì)劇本進(jìn)行故事大綱、分級(jí)梗概和人物關(guān)系圖的提煉,準(zhǔn)確率超過(guò)90%。
了解到創(chuàng)作團(tuán)隊(duì)有大量的資料查詢(xún)需求,AIGC內(nèi)容科技創(chuàng)新中心聯(lián)動(dòng)產(chǎn)品團(tuán)隊(duì)打造了“影視知識(shí)問(wèn)答”,收錄大量人文社科典籍。編劇向其提問(wèn)題,即可檢索到創(chuàng)作所需的歷史、文化、音樂(lè)等各種信息。
為了激活創(chuàng)作團(tuán)隊(duì)的靈感,“故事銀行”應(yīng)運(yùn)而生。多達(dá)80萬(wàn)個(gè)來(lái)自案件卷宗的故事原型,為懸疑、刑偵等垂直賽道的內(nèi)容創(chuàng)作者提供了豐富的借鑒素材。這兩個(gè)功能一同接入“劇本工坊”,成為輔助創(chuàng)作的重要工具。
參與“故事銀行”研發(fā)的路香菊還記得第一次看到案件卷宗的感受——“非常枯燥,看不下去”。這些卷宗動(dòng)輒長(zhǎng)達(dá)四五千字,可讀性遠(yuǎn)不如小說(shuō)。“原來(lái)編劇需要硬啃這些枯燥的文字?”和編劇的交流讓“編程”思維的她有了不同視角去理解信息搜集這件事:不是客觀信息的羅列,而是找出有特點(diǎn)的故事。
“故事銀行”的研發(fā)思路就是借助大模型的能力,將卷宗中的案件發(fā)展過(guò)程、人物特點(diǎn)、關(guān)鍵證據(jù)、作案手法等重要信息抽取出來(lái),得到一個(gè)個(gè)易讀的故事,方便創(chuàng)作者獲取靈感。
“簡(jiǎn)單理解傳統(tǒng)的搜索只是檢索,是信息的‘搬運(yùn)工’,但基于海量數(shù)據(jù)訓(xùn)練的概率模型,輸出的是將信息內(nèi)化后的結(jié)果,其實(shí)是信息的‘煉金士’。”她說(shuō),“大模型出現(xiàn)之前,我們也許能將內(nèi)容簡(jiǎn)化、拆解,但要形成一個(gè)具備可讀性的故事是非常難的。現(xiàn)在我們抓住了這個(gè)新機(jī)會(huì),讓創(chuàng)意的獲取方式發(fā)生質(zhì)的變化。”
工具造出來(lái)了,好不好用還得試。熊曉玲和她的創(chuàng)作團(tuán)隊(duì)是率先“吃螃蟹的人”。2025年2月,她擔(dān)任總制片人的偶像劇《愛(ài)你》在海內(nèi)外熱播,接連登上愛(ài)奇藝國(guó)際版12個(gè)國(guó)家和地區(qū)的熱播榜TOP1。而一年多前,他們?cè)诓邉澔I備這部劇時(shí)成為“劇本工坊”的首批用戶(hù)。
“分集情節(jié)點(diǎn)的功能特別實(shí)用,尤其是上會(huì)提案、跟片方溝通時(shí),很快就能定位到要重點(diǎn)溝通的部分。”在她看來(lái),劇本商業(yè)化開(kāi)發(fā)對(duì)什么是“好”什么是“不好”要有清晰統(tǒng)一的界定,“劇本工坊”快速拆解劇情、判斷情節(jié)點(diǎn)強(qiáng)弱的本領(lǐng),為她提供了客觀評(píng)估維度。
為了研發(fā)劇本評(píng)估功能,算法團(tuán)隊(duì)花了大量時(shí)間學(xué)習(xí)張曉媚的影研團(tuán)隊(duì)如何評(píng)價(jià)劇本,再將他們的思考維度轉(zhuǎn)化為機(jī)器可以理解的維度。比如“線(xiàn)頭過(guò)多”這樣的評(píng)語(yǔ),對(duì)AI來(lái)說(shuō)往往對(duì)應(yīng)著更低維度的幾十條需要提取歸納的信息,“這個(gè)劇本到底有多少條劇情線(xiàn)?它們彼此間是有關(guān)聯(lián)還是孤立的?劇情分階段收束的時(shí)機(jī)在全片哪些位置?如果劇情主線(xiàn)本身很明確清晰,是不是由于使用了閃回、倒敘等手法把它分割散亂了……”
路香菊和同事們大量挖掘、提煉著這些劇本評(píng)估維度,訓(xùn)練大模型的思路也越發(fā)清晰。他們針對(duì)性地將提示詞轉(zhuǎn)換為各類(lèi)AI智能體(Agent)。“經(jīng)過(guò)我們的長(zhǎng)期訓(xùn)練,AI現(xiàn)在已經(jīng)明白了,一集里如果出現(xiàn)新角色超過(guò)一定數(shù)量,觀眾就會(huì)覺(jué)得信息過(guò)多,一集里如果閃回超過(guò)次數(shù)太多,觀眾就會(huì)感到劇情太亂,這些都會(huì)影響追看率。
“碼農(nóng)”們通過(guò)技術(shù)創(chuàng)新,讓AI最大化復(fù)用“碼字人”的經(jīng)驗(yàn)。到2024年底,“劇本工坊”已累計(jì)為5000部小說(shuō)和劇本提供評(píng)估提速。眼下“劇本工坊”還在持續(xù)迭代。2025年4月發(fā)布的版本中,它已接入DeepSeek等最新國(guó)產(chǎn)大模型,以加強(qiáng)對(duì)中國(guó)文化和中文語(yǔ)境的理解,大幅提升了“讀劇本”的效率:不到30分鐘就能完成對(duì)一部50萬(wàn)字劇本的全面評(píng)估。主題是否有賣(mài)點(diǎn)、題材是否吸引人、有哪些情節(jié)可以刪除讓劇情更抓人……七大維度的評(píng)估不亞于給劇本做了一次“體檢”。
現(xiàn)在,幾乎所有工作室都在用“劇本工坊”。使用反饋和更多迫切需求涌向王慶豐。那下一個(gè)工具做什么?
過(guò)去劇本提案往往只有文字描述,沒(méi)有可視化場(chǎng)景,這一切隨著又一個(gè)AI工具“影像工坊”的上線(xiàn)得以改善。這個(gè)基于AI的影視項(xiàng)目全流程圖像視頻生成及管理平臺(tái),不僅能根據(jù)劇本智能生成分鏡,還可以生成概念宣發(fā)海報(bào),進(jìn)行角色設(shè)計(jì)、場(chǎng)景設(shè)計(jì)等。隨著Midjourney V6.1、Stable Diffusion XL等大模型的完善,文字能便捷地轉(zhuǎn)化為視覺(jué)實(shí)體,大幅提升前期美術(shù)概念設(shè)計(jì)的效率。
劉文峰在今年愛(ài)奇藝世界·大會(huì)上展示“影像工坊”時(shí),以《無(wú)憂(yōu)渡》女主角段半夏的形象設(shè)計(jì)為例:通過(guò)“劇本工坊”智能提取劇本中角色形象的文字描述,“影像工坊”生成中國(guó)古代風(fēng)格的段半夏形象;在項(xiàng)目確定以唐代作為時(shí)間背景后,只需修改角色設(shè)計(jì)的提示詞,就可生成和唐代風(fēng)格相符的角色形象。
據(jù)悉,“影像工坊”支持用AI生成概念海報(bào)、角色概念圖、置景設(shè)計(jì)圖等,顯著降低溝通成本。2025年第一季度,“影像工坊”出圖量達(dá)10萬(wàn)張。
影像工坊:替換提示詞可迅速調(diào)整角色設(shè)計(jì)風(fēng)格
“AI選角”功能則把角色設(shè)計(jì)再推進(jìn)一步:在擁有超2萬(wàn)名活躍演員的畫(huà)像庫(kù)中,基于劇本分析的結(jié)論,AI能從外貌氣質(zhì)、專(zhuān)業(yè)能力和商業(yè)價(jià)值等維度做智能匹配,推薦最符合劇本要求的演員供主創(chuàng)參考。今年前5個(gè)月,“AI選角”用在了近千個(gè)角色的演員篩選工作中。
就在王慶豐忙于將工作室需求與技術(shù)部門(mén)能力“對(duì)齊”時(shí),遠(yuǎn)在新疆的《我的阿勒泰》劇組現(xiàn)場(chǎng),愛(ài)奇藝副總裁、智能制作負(fù)責(zé)人朱梁帶著團(tuán)隊(duì)正在調(diào)試系統(tǒng),以支持劇組拍攝的樣片上云。傳統(tǒng)拍攝流程中,手動(dòng)拷貝和轉(zhuǎn)碼素材需1-3天,且介質(zhì)運(yùn)輸有泄密風(fēng)險(xiǎn)。現(xiàn)在,通過(guò)這套上云系統(tǒng),身在北京的剪輯指導(dǎo)周新霞教授在拍攝當(dāng)天輸入關(guān)鍵詞和場(chǎng)次信息,旋即就可調(diào)用篩選所需素材。很快,這個(gè)系統(tǒng)升級(jí)為QClip一體機(jī),支持全部機(jī)位實(shí)時(shí)拍攝的畫(huà)面上云。在《大王別慌張(第二季)》片場(chǎng),導(dǎo)演金哲勇從iPad里看到的畫(huà)面,幾乎無(wú)延時(shí)地出現(xiàn)在北京辦公室總制片人王業(yè)勛的iPad上。
這只是朱梁團(tuán)隊(duì)眾多看家法寶中的一項(xiàng)。愛(ài)奇藝自研的影視制片管理系統(tǒng),在《我的阿勒泰》的拍攝期也派上了大用場(chǎng)。制片人齊康提到,該劇題材小眾、拍攝地偏遠(yuǎn)、配套設(shè)施不足,制片管理尤其是成本管控的壓力巨大。用上了制片管理系統(tǒng)后,整個(gè)60天拍攝周期內(nèi)共上傳了近5000條樣片片段、300多張道具素材和美術(shù)素材,線(xiàn)上生成了超4000條場(chǎng)記記錄……“項(xiàng)目品控能力大幅提升。”齊康說(shuō)。
“影視制片管理系統(tǒng)就像一個(gè)用實(shí)際業(yè)務(wù)‘訓(xùn)練’出來(lái)的AI制片助手。它取代了無(wú)數(shù)溝通群和電話(huà)會(huì),通過(guò)數(shù)據(jù)看板即可掌握進(jìn)度和消耗,及時(shí)調(diào)整拍攝計(jì)劃。”朱梁表示。
影視這個(gè)基于感性創(chuàng)造、某些程度上還停留在手工作坊式的行業(yè),正日益向智能制造業(yè)靠攏——不僅向AI要效率,更向AI要智能。
在愛(ài)奇藝內(nèi)部,智能制作部被視為“兵工廠”。比如在虛擬制作領(lǐng)域,這個(gè)團(tuán)隊(duì)就攻克了虛擬場(chǎng)景光線(xiàn)延時(shí)匹配、虛實(shí)雨雪特效融合等技術(shù)難點(diǎn),還以國(guó)內(nèi)首創(chuàng)的美術(shù)置景電動(dòng)旋轉(zhuǎn)地臺(tái),解決了LED屏前正反打拍攝的痛點(diǎn)。應(yīng)用虛擬制作進(jìn)行攝制的《大夢(mèng)歸離》制片人就表示:“完全顛覆了我們之前的想象,基本看不出來(lái)哪里是實(shí)景哪里是虛景。屏幕上的數(shù)字場(chǎng)景完全可以根據(jù)實(shí)景的感覺(jué)變化景深、光線(xiàn)與色彩,非常符合現(xiàn)實(shí)環(huán)境的物理變化。”
最新的制作技術(shù)和方案往往催生于一線(xiàn)最迫切的需要。就像《大王別慌張(第二季)》里,導(dǎo)演金哲勇一度為如何呈現(xiàn)劇本中天書(shū)閣的海量書(shū)籍而撓頭,短劇拍攝時(shí)長(zhǎng)和成本都有限,實(shí)地搭景和后期特效顯然過(guò)于奢侈。“兵工廠”又一次拿出了適配方案:直接用AI輔助掃描生成遠(yuǎn)景中的書(shū)和書(shū)架,三五分鐘就可從照片直接轉(zhuǎn)為三維模型,相較傳統(tǒng)人工制作三維模型提效近10倍。
4月愛(ài)奇藝世界·大會(huì)連續(xù)釋放出《唐朝詭事錄之長(zhǎng)安》《云襄傳之將進(jìn)酒》《狐妖小紅娘王權(quán)篇》《一枕春華》《與晉長(zhǎng)安》等多部新劇的虛擬拍攝畫(huà)面。相比其他平臺(tái)只能拍一兩部虛擬制作樣片,愛(ài)奇藝真正做到了“量產(chǎn)”。
虛擬拍攝現(xiàn)場(chǎng)
“虛擬制作雖是前沿技術(shù),但發(fā)展它的根本目的一定是為了解決內(nèi)容創(chuàng)作中遇到的問(wèn)題。靈活地使用AI工具,能讓虛擬制作更‘親民’。”朱梁如是說(shuō)。過(guò)去一年,愛(ài)奇藝內(nèi)部使用虛擬制作的項(xiàng)目數(shù)量同比增長(zhǎng)了50%。為了推廣普及這項(xiàng)技術(shù),今年6月1日起,愛(ài)奇藝主動(dòng)大幅降低虛擬制作系統(tǒng)的使用價(jià)格:不含數(shù)字場(chǎng)景制作的全套軟硬件系統(tǒng)使用價(jià)格,由16萬(wàn)元/天降至最低3.5萬(wàn)元/天。
以往因制作投入巨大,行業(yè)趨于保守、風(fēng)險(xiǎn)偏好低、創(chuàng)新不足。若能將創(chuàng)作成本降低一兩個(gè)數(shù)量級(jí),內(nèi)容豐富度將大幅提升,人類(lèi)將迎來(lái)一個(gè)內(nèi)容井噴的時(shí)代。
科技作家凱文·凱利在其新書(shū)《2049》中預(yù)言,未來(lái)25年,“好萊塢”將再次被顛覆。
這一場(chǎng)景似乎無(wú)需等待25年。就在愛(ài)奇藝從內(nèi)而外轟轟烈烈掀起“AI革命”之時(shí),AI也成為中國(guó)影視行業(yè)大大小小論壇上的關(guān)鍵詞。
2024年“前瞻中國(guó)電影AI時(shí)代”的討論上,憑作品《狙擊手》《滿(mǎn)江紅》《堅(jiān)如磐石》廣為人知的編劇陳宇表示,AI其實(shí)可以淘汰一些庸常的創(chuàng)作,倒逼創(chuàng)作者進(jìn)步。作為投資者,易凱資本創(chuàng)始人王冉則在中國(guó)電視劇制作產(chǎn)業(yè)大會(huì)上預(yù)測(cè),2028年到2030年之間會(huì)出現(xiàn)一個(gè)分水嶺,AI將會(huì)為行業(yè)節(jié)省成本并創(chuàng)造增量?jī)r(jià)值,尤其是在微短劇領(lǐng)域。
觀點(diǎn)尚在交鋒,變革已經(jīng)發(fā)生。導(dǎo)演唐季禮在拍攝電影《傳說(shuō)》時(shí)已經(jīng)用“Deepfake”技術(shù)還原27歲成龍的模樣,將特效成本降至傳統(tǒng)方法的二三成。制片人白一驄則坦言自己“開(kāi)著四個(gè)AI模型輔助寫(xiě)劇本”。作為《三體》《老九門(mén)》等知名劇集的制片人,他在2019年就曾感慨:“我們需要掌握最先進(jìn)的工具,讓自己晚點(diǎn)出局。”
03
跳出來(lái),用AI贏得“注意力之戰(zhàn)”
《我的阿勒泰》最終在電視劇史上留下了自己的名字:第30屆白玉蘭獎(jiǎng)最佳中國(guó)電視劇獎(jiǎng)。阿勒泰明媚的夏日,不僅讓草原上可愛(ài)的人悄然走進(jìn)觀眾的心里,也向世界“種草”了新疆。
李夢(mèng)(化名)就是其中之一。她非常喜歡劇中主角巴太,追劇時(shí)發(fā)現(xiàn)在愛(ài)奇藝的虛擬形象互動(dòng)平臺(tái)“桃豆世界”里,竟能與虛擬的“巴太”聊天,這讓她驚喜不已。她喜歡問(wèn)“巴太”一些關(guān)于草原的問(wèn)題:“草原那么大,牛媽媽會(huì)把小牛弄丟嗎?”“草原上的土撥鼠能吃嗎?”“你會(huì)給小羊穿好看的衣服嗎?”虛擬“巴太”總會(huì)給出一些鮮活、富有生命力、出乎意料的回復(fù)。作為二次元愛(ài)好者,李夢(mèng)當(dāng)然知道和自己對(duì)話(huà)的并非真人,但這并不妨礙她從中獲得喜悅和慰藉。
這正是產(chǎn)品經(jīng)理?xiàng)蠲髟O(shè)計(jì)“桃豆世界”的初衷。她工作時(shí)是AI產(chǎn)品經(jīng)理,業(yè)余時(shí)間則是一名資深的同人內(nèi)容創(chuàng)作者。雙重身份讓她對(duì)AI角色陪伴的理解更具溫度。
“我們觀察到,即使劇集過(guò)了熱播期,觀眾對(duì)角色的內(nèi)容需求和互動(dòng)渴望依然旺盛。這推動(dòng)他們?cè)趧〔ネ旰蟪恋頌槊餍欠劢z或同人作品受眾。熱播劇的長(zhǎng)尾效應(yīng)可能持續(xù)三五年,因此一個(gè)受到用戶(hù)喜愛(ài)的角色,在延長(zhǎng)生命周期上非常有潛力,前提是用戶(hù)能找到Ta,能和Ta互動(dòng)。”她說(shuō)。
第三方機(jī)構(gòu)Appfigure數(shù)據(jù)顯示,2024年全球AI陪伴應(yīng)用總下載量達(dá)1.1億次。騰訊研究院預(yù)計(jì),2027年中國(guó)AI陪伴市場(chǎng)規(guī)模或達(dá)千億元。
2024年,“桃豆世界”上線(xiàn)。一年多來(lái),超過(guò)100個(gè)影視IP的1000多個(gè)角色在這里安家成為AI NPC,超百萬(wàn)用戶(hù)在這里獲得了精神陪伴,僅聊天就進(jìn)行了上億輪次。
李夢(mèng)和“巴太”溫暖對(duì)話(huà)的背后,是李海所在的愛(ài)奇藝“奇聲”產(chǎn)研團(tuán)隊(duì)在保駕護(hù)航。基于大模型技術(shù)的語(yǔ)音轉(zhuǎn)換(Voice Conversion)和文字轉(zhuǎn)語(yǔ)音(TTS,Text to Speech)并不難,但結(jié)合影視角色和特定對(duì)話(huà)場(chǎng)景,讓AI在對(duì)話(huà)的時(shí)候具有和人一樣的情感表現(xiàn)力,一直是業(yè)界難題。
李海團(tuán)隊(duì)開(kāi)發(fā)的國(guó)內(nèi)首個(gè)自研影視劇場(chǎng)景的AI配音技術(shù)——奇聲集成了語(yǔ)音轉(zhuǎn)換、聲紋識(shí)別、語(yǔ)音分離和音視頻降噪等多種AI技術(shù),為多種音色的識(shí)別和轉(zhuǎn)換提供了基礎(chǔ)。通過(guò)調(diào)用先進(jìn)大模型的能力,奇聲研發(fā)團(tuán)隊(duì)以大量的高質(zhì)量?jī)?nèi)容作為訓(xùn)練素材,為算法注入“情感”,讓大模型會(huì)根據(jù)說(shuō)話(huà)內(nèi)容預(yù)測(cè)出情緒向量,研發(fā)出帶情感TTS文字轉(zhuǎn)語(yǔ)音方案。這個(gè)在影視劇垂類(lèi)場(chǎng)景的創(chuàng)新實(shí)踐,獲得了中國(guó)計(jì)算機(jī)學(xué)會(huì)科技成果獎(jiǎng)科技進(jìn)步一等獎(jiǎng),并取得了ICASSP、Interspeech、ASRU等6篇國(guó)際頂級(jí)會(huì)議論文,24項(xiàng)發(fā)明專(zhuān)利(含受理和授權(quán))和9項(xiàng)軟件著作權(quán)。
“希望每一個(gè)角色都能在桃豆世界得到尊重和珍視。”楊明團(tuán)隊(duì)對(duì)AI的應(yīng)用和產(chǎn)品功能設(shè)計(jì)既靈活又克制。他們甚至為不好意思和AI角色聊天的“i人”設(shè)計(jì)了角色朋友圈和“桃家糖水鋪”。前者讓大家可以刷到喜愛(ài)角色分享的日常狀態(tài),后者則可調(diào)用AI為用戶(hù)寫(xiě)同人小故事,配方由用戶(hù)定制。
在“桃豆世界”里還有位特殊角色——“桃豆”。它并非影視角色的數(shù)字分身,而是愛(ài)奇藝推出的個(gè)人智能助手。“嘿,有沒(méi)有又甜又虐的古裝劇推薦呀?”只是簡(jiǎn)單一句提示,桃豆就秒級(jí)響應(yīng),給出了《無(wú)憂(yōu)渡》《念無(wú)雙》等內(nèi)容的簡(jiǎn)介和觀看鏈接。如果碰上劇集開(kāi)啟加更禮,桃豆甚至能幫你查會(huì)員積分,確認(rèn)兌換資格。
一直以來(lái),許多企業(yè)在AI轉(zhuǎn)型中對(duì)直接面向消費(fèi)者的互動(dòng)場(chǎng)景會(huì)采取謹(jǐn)慎的態(tài)度,擔(dān)心AI智能體響應(yīng)延遲或“說(shuō)錯(cuò)”影響體驗(yàn)。因?yàn)檫@考驗(yàn)企業(yè)駕馭AI的能力,還有對(duì)新消費(fèi)趨勢(shì)及場(chǎng)景的把握。
愛(ài)奇藝副總裁、智能平臺(tái)部總經(jīng)理謝丹銘認(rèn)為,關(guān)鍵還是在于理解用戶(hù)的真實(shí)需求,明確AI應(yīng)用的技術(shù)方向。愛(ài)奇藝始終將“視頻理解”作為重點(diǎn)技術(shù)攻關(guān)。早在2014年,愛(ài)奇藝就將AI用于視頻審核以提升效率。和Netflix等公司一樣,不斷深入使用機(jī)器學(xué)習(xí)(ML)優(yōu)化內(nèi)容推薦系統(tǒng),2016年技術(shù)團(tuán)隊(duì)用AI抽取視頻內(nèi)容并打上標(biāo)簽,更精準(zhǔn)地匹配用戶(hù)的內(nèi)容偏好。
隨著愛(ài)奇藝多模態(tài)人物識(shí)別和卡通角色識(shí)別技術(shù)的日益成熟,2020年推出了“奇觀”功能,讓用戶(hù)在觀看時(shí)能一鍵獲取演員資料、識(shí)別背景音樂(lè)等……2021年愛(ài)奇藝用戶(hù)使用“奇觀”功能超過(guò)20億次。相比下,同類(lèi)平臺(tái)在2024年才推出相似功能的產(chǎn)品。
“ChatGPT發(fā)布后,我和團(tuán)隊(duì)認(rèn)為每一個(gè)AI應(yīng)用都值得用大語(yǔ)言模型重構(gòu)。”謝丹銘談起那一刻仍難掩興奮。隨著接入大語(yǔ)言模型并結(jié)合自研的多模態(tài)視頻理解技術(shù),愛(ài)奇藝的視頻理解平臺(tái)——“星羅”迅速升級(jí)為“大星羅”。
它通過(guò)對(duì)海量互動(dòng)數(shù)據(jù)及劇情的深度理解,實(shí)現(xiàn)了多類(lèi)型視頻、多元化圖文內(nèi)容的AI自動(dòng)化生產(chǎn)。AI應(yīng)用“繆斯”工具一年內(nèi)制作了64萬(wàn)條短視頻,站內(nèi)外總播放量達(dá)108億次。“馬良”平臺(tái)通過(guò)自動(dòng)分析視頻內(nèi)容,識(shí)別視覺(jué)沖擊力強(qiáng)、劇情張力大的鏡頭生成海報(bào),全年生成量超2000萬(wàn)張,日均超5萬(wàn)張。
“以前我們的頻道運(yùn)營(yíng),都要身兼美工,自己做海報(bào)、剪視頻,能做完就很不錯(cuò)了,更別提隨著劇情發(fā)展持續(xù)更新。現(xiàn)在我們的AI海報(bào)、種草視頻非常豐富,已經(jīng)可以支持千人千面的個(gè)性化推薦。”謝丹銘說(shuō)。
隨著視頻理解能力的提升,“大星羅”的應(yīng)用場(chǎng)景拓展至用戶(hù)直接體驗(yàn)環(huán)節(jié):本文開(kāi)篇提到的“跳看”功能,便得益于此。這個(gè)功能推出一周后,看劇時(shí)使用“跳看”的用戶(hù)數(shù)量已經(jīng)超過(guò)了直接選擇倍速檔位觀看的用戶(hù)。支持描述劇情進(jìn)行搜索的“AI劇情搜索”功能上線(xiàn)后,通過(guò)此入口進(jìn)入正片的觀眾人均觀看時(shí)長(zhǎng)提升了40%。
這些能力不僅顯著提升了愛(ài)奇藝內(nèi)容分發(fā)的精準(zhǔn)度,也成為商業(yè)化的“加速器”。2025年升級(jí)的智能廣告投放平臺(tái)“奇炬”,利用多模態(tài)模型深度解析素材語(yǔ)義與用戶(hù)偏好,實(shí)現(xiàn)個(gè)性化推送。廣告主自然堂在該系統(tǒng)支持下做出投放,ROI超額完成120%,投放成本較同期降低50%,長(zhǎng)效ROI高于同期10%。
“愛(ài)奇藝的多模態(tài)場(chǎng)景已成為國(guó)內(nèi)外眾多大模型廠商的‘試驗(yàn)田’。我們與多家大模型團(tuán)隊(duì)保持緊密合作,共同探索未來(lái)的訓(xùn)練方向。”謝丹銘表示。
現(xiàn)任微軟公司執(zhí)行副總裁兼首席商務(wù)官Judson Althoff在2024年6月訪(fǎng)問(wèn)愛(ài)奇藝時(shí)表示,愛(ài)奇藝是微軟具有最典型和最深度AI應(yīng)用場(chǎng)景的合作伙伴之一。
謝丹銘透露,今年夏天,愛(ài)奇藝國(guó)際站發(fā)起的“愛(ài)奇藝AI創(chuàng)作大賽”即將啟動(dòng),在多個(gè)國(guó)際領(lǐng)先的視頻生成模型支持下,攜手全球創(chuàng)作者探索內(nèi)容創(chuàng)作更多可能性。
“在生成式AI支持下,內(nèi)容創(chuàng)作門(mén)檻降低。誰(shuí)能在創(chuàng)意、制作和播出各階段用好AI,誰(shuí)就能擁有更強(qiáng)的創(chuàng)作能力、更高的執(zhí)行效率、更短的用戶(hù)反饋周期,從而在注意力爭(zhēng)奪戰(zhàn)中快人一步。”劉文峰如此預(yù)判AI影響下的影視行業(yè)未來(lái)。
愛(ài)奇藝在商業(yè)范式和內(nèi)容創(chuàng)新上的先鋒形象一直深入人心:從2011年率先“做正版內(nèi)容”,到率先推行“VIP會(huì)員”模式,奠定視頻平臺(tái)長(zhǎng)期可持續(xù)發(fā)展的商業(yè)基礎(chǔ),再到推出“迷霧劇場(chǎng)”懸疑劇廠牌,引發(fā)全行業(yè)劇集“廠牌化”的運(yùn)營(yíng)潮流……
但它并不太為大眾所知的“以科技創(chuàng)新為驅(qū)動(dòng)“的另一面,更令人激動(dòng):愛(ài)奇藝AI已經(jīng)深度賦能影視制播全流程,從IP挖掘和創(chuàng)意劇本智能評(píng)估,到文生圖、文生視頻的多模態(tài)創(chuàng)作提速,從AI配音到多語(yǔ)種實(shí)時(shí)翻譯內(nèi)容提效海外發(fā)行……
自1895年電影誕生、1925年半機(jī)械式電視機(jī)的誕生宣告電視時(shí)代的到來(lái),再到近20年在線(xiàn)娛樂(lè)的活躍,無(wú)一不是技術(shù)進(jìn)步的結(jié)果。科技創(chuàng)新隨時(shí)可能顛覆性地改變行業(yè)。龔宇,以及臺(tái)前幕后眾多程序員、工程師、制片人、編劇、導(dǎo)演、攝影、攝像、燈光、道具、美術(shù)、剪輯、錄音、特效……全鏈條的從業(yè)者們,正在與AI的共舞中,用技術(shù)革命托舉藝術(shù)創(chuàng)作,激發(fā)更多靈感,激活更多可能。
有趣的靈魂疊加萬(wàn)億規(guī)模的算力,將共同決定人類(lèi)的下一代娛樂(lè)會(huì)有多精彩。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶(hù)上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.