99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

《現(xiàn)代電影技術(shù)》|陳寶權(quán)等:基于人工智能技術(shù)的未來影像研究與思考

0
分享至


本文刊發(fā)于《現(xiàn)代電影技術(shù)》2024年第12期

專家點評

當前,全球電影行業(yè)已進入大科學(xué)、大視聽、大融合時代,多學(xué)科多業(yè)務(wù)交叉滲透明顯,生產(chǎn)流程持續(xù)優(yōu)化升級,數(shù)字技術(shù)與實體經(jīng)濟、網(wǎng)絡(luò)空間與現(xiàn)實社會融合發(fā)展趨勢日益明顯,進程不斷深化。以人工智能(AI)、大數(shù)據(jù)、云計算等新一代信息技術(shù)為核心的技術(shù)創(chuàng)新進入前所未有的密集活躍期,工程科技成為推動電影科技進步和產(chǎn)業(yè)升級的重要引擎。面向2035年電影強國建設(shè)目標,電影行業(yè)需聚焦AI技術(shù)自主研發(fā)與大模型行業(yè)定制、新型放映模式拓展、影院多業(yè)務(wù)融合等新領(lǐng)域新賽道,加快推動電影創(chuàng)新技術(shù)研發(fā)落地,統(tǒng)籌推進“十五五”電影科技發(fā)展預(yù)測分析、電影國際標準突破躍升、放映裝備國產(chǎn)化、電影重點實驗室創(chuàng)建等重點科技工作。隨著人工智能技術(shù)的持續(xù)演進,影像技術(shù)品質(zhì)、視覺體驗、場景設(shè)計質(zhì)量、制作效能持續(xù)提升,同時也給影像創(chuàng)作生產(chǎn)、傳輸分發(fā)、解碼播映等產(chǎn)業(yè)節(jié)點帶來風(fēng)險和挑戰(zhàn)。構(gòu)建既促進技術(shù)創(chuàng)新和產(chǎn)業(yè)升級,又確保安全可控并符合技術(shù)倫理的AI發(fā)展環(huán)境,是當前行業(yè)關(guān)注熱點和難點。《基于人工智能技術(shù)的未來影像研究與思考》一文,從電影創(chuàng)制、計算機圖形學(xué)、三維視覺等多維度出發(fā),分析探討了AI在計算機模擬、虛擬攝制、模型驅(qū)動、影像呈現(xiàn)、電影內(nèi)容創(chuàng)制等領(lǐng)域的應(yīng)用實踐,提出了AI創(chuàng)制內(nèi)容的審美策略和多樣化技術(shù)落地思考,為構(gòu)建我國新一代影像創(chuàng)制解決方案提供了技術(shù)思路。本文觀點準確、內(nèi)容詳實,將帶給從業(yè)者和讀者深層次的思考啟示,具有很好的行業(yè)指導(dǎo)意義和借鑒參考價值。

——龔波

正高級工程師

中國電影科學(xué)技術(shù)研究所

(中央宣傳部電影技術(shù)質(zhì)量檢測所)黨委書記、所長

作 者 簡 介

陳寶權(quán)

北京大學(xué)博雅特聘教授、智能學(xué)院副院長,IEEE Fellow,長江學(xué)者特聘教授,主要研究方向:計算機圖形學(xué)、三維視覺與可視化。

北京大學(xué)藝術(shù)學(xué)院副院長,長江學(xué)者特聘教授,澳門科技大學(xué)博士生導(dǎo)師,主要研究方向:中國電影史、影視文化批評、數(shù)字人文與電影研究、中國電影知識體系。

李道新

孫立軍

北京電影學(xué)院副院長、北京電影學(xué)院中國動畫研究院院長,主要研究方向:中國動畫史研究、動畫電影創(chuàng)作、當代藝術(shù)創(chuàng)作等。

《異人之下》聯(lián)合導(dǎo)演,主要研究方向:電影語言創(chuàng)新。

夏 鵬

作為一種現(xiàn)代表達媒介和藝術(shù)形式,電影將視覺、聽覺等多種感官與記錄、敘事、抒情等元素融為一體,創(chuàng)造出令人難以忘懷的體驗。電影與計算機技術(shù)的緊密聯(lián)系,使其在過去幾十年中不斷進化,產(chǎn)生了如數(shù)字視效(VFX)、虛擬現(xiàn)實(VR)等諸多革新。近年來,隨著人工智能(AI)技術(shù)的快速發(fā)展,特別是OpenAI Sora等文生視頻工具的出現(xiàn),使其在電影制作中的潛力備受矚目,并被認為可能顛覆電影創(chuàng)制全過程。本文基于2024中國計算機大會(CNCC2024)“AI與未來影像”論壇,回顧了計算機圖形圖像技術(shù)在數(shù)字影像發(fā)展過程中的重要支撐作用,探討了AI時代電影工業(yè)所面臨的機遇與挑戰(zhàn),展望了AI技術(shù)在電影行業(yè)乃至未來影像領(lǐng)域的發(fā)展趨勢,對進一步推動電影與AI技術(shù)的深度融合進行了探索。

關(guān)鍵詞

人工智能;電影技術(shù);數(shù)字影像;圖形圖像;數(shù)字化

1 引言

影視行業(yè)與計算機技術(shù)的緊密聯(lián)系,使其在過去幾十年持續(xù)實現(xiàn)技術(shù)演進,數(shù)字3D、數(shù)字視效、虛擬攝制、動作捕捉、虛擬現(xiàn)實、實時渲染等創(chuàng)新技術(shù)為電影制作帶來了諸多革新。20世紀70年代末開始,好萊塢電影導(dǎo)演喬治·盧卡斯(George Lucas)在拍攝《星球大戰(zhàn)》時首次運用計算機合成技術(shù),標志著數(shù)字技術(shù)在電影中的首次應(yīng)用,使電影進入了數(shù)字影像時代。1986年,史蒂夫·喬布斯(Steve Jobs)收購盧卡斯影業(yè)的計算機動畫部門,成立皮克斯動畫工作室(Pixar Animation Studio),推動了三維模型轉(zhuǎn)化為逼真數(shù)字圖像的技術(shù)發(fā)展。1995年,《玩具總動員》作為世界上第一部長篇計算機動畫電影上映,展示了最新計算機渲染系統(tǒng)的應(yīng)用。2009年,《阿凡達》的公映給觀眾和業(yè)界帶來了新的視角,該影片全面應(yīng)用虛擬攝制技術(shù),使導(dǎo)演可在第一時間看到實拍演員、真實場景和虛擬場景的實時合成效果,并實現(xiàn)了動作捕捉和表演捕捉。《猩球崛起》系列從側(cè)面呈現(xiàn)了動作捕捉技術(shù)的發(fā)展,其攝制過程克服了戶外動作捕捉復(fù)雜的環(huán)境干擾,實現(xiàn)了多人動作捕捉。《獅子王》則將元宇宙技術(shù)全面引入電影攝制過程中,創(chuàng)新應(yīng)用虛擬資產(chǎn)、虛擬現(xiàn)實、虛擬勘景等手段,實現(xiàn)了全CG打造3D“真人版”電影。《曼達洛人》的問世標志著虛擬攝制技術(shù)的新發(fā)展,該劇使用StageCraft平臺,以LED背景墻的形式將實時引擎渲染生成畫面與演員表演及現(xiàn)場置景結(jié)合,打造真實的現(xiàn)場動態(tài)照明和環(huán)境光效果,使本已被虛擬攝制模糊的電影前后期環(huán)節(jié)實現(xiàn)深度融合。

人工智能(AI)作為計算機領(lǐng)域熱門且重要的分支,近年來得到飛速發(fā)展,從模式識別、圖像處理、自然語言處理(NLP)到自動駕駛、醫(yī)療診斷,AI技術(shù)正逐漸改變我們的生活和工作方式。電影作為和圖像、內(nèi)容密切相關(guān)的產(chǎn)業(yè), AI技術(shù)在影視創(chuàng)制過程中的應(yīng)用已愈發(fā)廣泛。AI技術(shù)被應(yīng)用于從劇本創(chuàng)作到后期制作的電影創(chuàng)制全流程,全面提升了工藝鏈工作效率并開辟了新的創(chuàng)造可能性。隨著人工智能生成內(nèi)容(AIGC)技術(shù)的快速發(fā)展,特別是OpenAI Sora等文生視頻工具的出現(xiàn),AI在電影制作中的作用越來越受到矚目。

計算機技術(shù)與影視行業(yè)的深度融合,將進一步促進計算機專業(yè)人士與影視制作人間的深入交流和思考。本文將從計算機技術(shù)、電影學(xué)理論和內(nèi)容創(chuàng)作等角度出發(fā),論述當下AI技術(shù)對電影行業(yè)發(fā)展演進帶來的新變化,提出跨學(xué)科、跨領(lǐng)域的學(xué)術(shù)思考。

2 AI技術(shù)發(fā)展對電影行業(yè)的沖擊及思考

2.1 AI作為智能體并非簡單工具

工業(yè)光魔(ILM)前CEO,數(shù)字王國(Digital Domain)創(chuàng)始人、前首席執(zhí)行官(CEO) 斯科特·羅斯(Scott Ross)既是電影制作專家,也是數(shù)字電影行業(yè)的先驅(qū)者,見證了從模擬到數(shù)字時代再到人工智能時代的影視行業(yè)技術(shù)發(fā)展歷程。計算機圖形學(xué)(CG)領(lǐng)域是與好萊塢電影技術(shù)發(fā)展最為息息相關(guān)的技術(shù)領(lǐng)域之一,羅斯在2024年與北京大學(xué)智能學(xué)院陳寶權(quán)教授就AI與未來影像的思考分享中,貢獻了諸多精彩觀點。

羅斯認為,從印刷術(shù)到電視、互聯(lián)網(wǎng)和智能手機,幾乎所有的新興媒體技術(shù)均旨在幫助人類實現(xiàn)信息傳遞、故事講述和現(xiàn)實復(fù)刻目的。當今AI技術(shù)應(yīng)用帶來的影響同以往新技術(shù)所帶來的變化有著本質(zhì)區(qū)別——以往新技術(shù)帶來的是新工具,而當前新技術(shù)帶來的是智能體(Agent)。早期的AI技術(shù)大多僅是人類用來創(chuàng)造事物的工具。這類工具在某種程度上替代人類完成了部分工作,人類使用工具后可將時間和精力投入到創(chuàng)意度更高的工作中。而現(xiàn)在智能體直接取代了人類完成創(chuàng)造,這是根本上的不同。如皮克斯影片《玩具總動員》中玩具變成了有生命的角色并能自主行動一樣,AI技術(shù)就如同工具從工具箱里“跳”出來,變得像人類一樣解決問題,使其完全同之前所有的工具區(qū)分開來。

理解作為智能體的AI,首先要了解AI技術(shù)的發(fā)展階段。AI技術(shù)發(fā)展的第一階段,開發(fā)者們創(chuàng)造一系列軟件工具,使工作流程更具創(chuàng)意、更加便捷。第二階段的AI技術(shù)發(fā)展使諸多工種被逐漸取代,其中受沖擊最嚴重的將是那些相對創(chuàng)意簡單且藝術(shù)性較低的領(lǐng)域。此階段的典型例子可參考印度影視制作行業(yè)由于AI技術(shù)的誕生與不斷發(fā)展,其龐大的視覺特效和動畫人員隊伍正在被AI智能體所取代,大批從業(yè)人員面臨失去工作的危險。AI技術(shù)飛速發(fā)展的新能力造成諸多單調(diào)、重復(fù)性工作被取代,但就創(chuàng)造力而言,這種新的智能體有望激發(fā)本就具有創(chuàng)意的從業(yè)者獲得更多靈感。

作為熱衷引入新興技術(shù)的導(dǎo)演,詹姆斯·卡梅隆(James Cameron)的目標即是盡可能優(yōu)質(zhì)高效地按照設(shè)想制作電影,他將AI視為一種能幫助其實現(xiàn)這一目標的工具,諸多工作環(huán)節(jié)可通過AI實現(xiàn)簡化。如引入AI技術(shù)后的生產(chǎn)管線將不再需要一個藝術(shù)部門來完成概念創(chuàng)意或者外觀設(shè)計,僅需一個懂得如何編寫提示詞(Prompt)且能在人工智能環(huán)境中熟練工作的從業(yè)人員。AI可生成50種不同的圖像讓導(dǎo)演直接從中篩選,僅回答“是”或“否”即可。此外,AI還能創(chuàng)建LED虛擬攝制所需虛擬場景。但部分專業(yè)人士認為,當前熱門的LED虛擬攝制或?qū)⒑芸毂恍录夹g(shù)取代,相關(guān)技術(shù)公司正在創(chuàng)造出更為逼真的虛擬人類,未來機器學(xué)習(xí)(ML)和深度學(xué)習(xí)(DL)的表現(xiàn)會越來越好,對于真人演員的需求將進一步縮減,這也給演員們敲響了警鐘。

2.2 AI帶來的問題應(yīng)在當代解決

羅斯提出,隨著AI的“指數(shù)級”成長,針對AI技術(shù)帶來的問題,應(yīng)盡快著手解決,刻不容緩。

前文所述AI的發(fā)展階段可簡要概括為:第一階段為創(chuàng)建AI工具;第二階段則是AI工具的介入改變工作流程,觸發(fā)勞動力結(jié)構(gòu)的重大變化,使創(chuàng)作更高效、更實惠甚至有望更好。羅斯提醒要謹慎對待第三階段,即在某一時刻,未來學(xué)家雷·庫茲韋爾(Ray Kurzweil)的奇點理論會成為現(xiàn)實,人工智能與人腦智能實現(xiàn)兼容。羅斯相信后天培養(yǎng)勝過先天條件,即認為AI可通過不斷學(xué)習(xí)獲得成長,甚至表達情感。因此,當奇點發(fā)生——庫茲韋爾認為這一時間節(jié)點將為2033年左右——彼時AI將真正具有創(chuàng)造力,也就不再需要人類作為AI技術(shù)的接口。對于這一假想,羅斯表示,也許人類將會深挖人性,并有能力與這些機器互動。參考以色列著名作家、《人類簡史》作者尤瓦爾·諾亞·赫拉利(Yuval Noah Harari) 的說法,這將是所謂的“新人類”階段。赫拉利同時提出,每個人在使用AI的過程中都處于跟AI交流的信息節(jié)點上,肩負著正確引導(dǎo)AI向著一種積極的、有利于人類發(fā)展方向的責(zé)任。

當奇點到來,AI終將學(xué)會人類教授的內(nèi)容。但人類本身存在諸多問題,我們很可能會看到AI被用于不義之地,若各國政府不設(shè)立適當?shù)姆雷o措施,AI可能使人類面臨巨大麻煩。既然人類知道未來AI可能對其生存形成風(fēng)險,就應(yīng)在當下充分討論并著手制定應(yīng)對方案,以妥善解決這些問題。技術(shù)人員當前需要拓寬視野,不僅關(guān)心正在創(chuàng)造中的技術(shù),同時更要關(guān)心相應(yīng)技術(shù)可能帶來的后果。

3 AI技術(shù)為電影行業(yè)發(fā)展帶來新變革

3.1 傳統(tǒng)電影制作流程將發(fā)生顛覆性改變

近年來,隨著人工智能(AI)技術(shù)的快速發(fā)展,其對電影行業(yè)的影響愈加深入,甚至可能會顛覆電影創(chuàng)制流程。傳統(tǒng)電影制作遵循創(chuàng)作、設(shè)計、拍攝制作、后期特效的流程,而在智能電影時代,AI不僅被用于劇本創(chuàng)作及輔助概念設(shè)計,與此同時,攝影與AI影像生成也已緊密結(jié)合;隨著后期特效中AI技術(shù)的應(yīng)用,其與電影創(chuàng)作與制作已密不可分(圖1)。


圖1 影視制作傳統(tǒng)流程及AI時代流程對比

自2016年全球第一部AI劇本創(chuàng)作、真人參演的科幻片《陽春》(Sunspring)[1]問世,到2024年2月OpenAI Sora產(chǎn)品發(fā)布正式開啟了文生視頻時代,回顧近幾年來AI參與電影制作的發(fā)展歷程,從劇本創(chuàng)作到最終影片生成,AI從端到端的介入實現(xiàn)了故事創(chuàng)作和影像制作的效率提升。同時,AI在影像產(chǎn)業(yè)發(fā)展演進中發(fā)揮了重要推動作用(圖2),其可輔助人類完成影像、聲音的制作和任務(wù)處理,人類得以將有限的精力投入到高創(chuàng)意性工作中,從而成就更多具備想象力、創(chuàng)新性和藝術(shù)性的精品佳作,而影像媒介形式也將向更具沉浸感的方向發(fā)展。


圖2 影像產(chǎn)業(yè)發(fā)展演進趨勢和AI發(fā)揮的作用

特別是近年來,快速發(fā)展的高維影像手段給影像產(chǎn)業(yè)帶來了廣闊的發(fā)展空間,多視點、多維度、互動式的觀看內(nèi)容層出不窮,電影《黑客帝國》開創(chuàng)的“子彈時間”360°拍攝方式已在體育比賽、演藝會展等領(lǐng)域廣泛應(yīng)用。

3.2 計算機圖形學(xué)與電影行業(yè)形成深度互動并實現(xiàn)科研成果產(chǎn)出

作為計算機圖形學(xué)著名學(xué)者和首位入選ACM SIGGRAPH Academy“計算機圖形學(xué)名人堂”的中國科學(xué)家,陳寶權(quán)教授在任北京電影學(xué)院未來影像高精尖創(chuàng)新中心(以下簡稱“高精尖創(chuàng)新中心”)首席科學(xué)家期間,組織了大量國內(nèi)國際計算機圖形學(xué)和電影行業(yè)的深度交流互動活動,緊密聯(lián)系的專家包括前文所述的斯科特·羅斯(Scott Ross),美國工程院院士、計算機圖形學(xué)和人機交互技術(shù)先驅(qū)、喬治亞理工大學(xué)教授詹姆斯·弗雷(James Foley),美國工程院院士、美國硅圖公司(SGI) 聯(lián)合創(chuàng)始人、Lytro CTO、OpenGL之父科特·埃克利(Kurt Akeley),PDI聯(lián)合創(chuàng)始人、Cloudpic創(chuàng)始人理查德·莊(Richard Chuang)以及中國工程院院士、北京航空航天大學(xué)教授趙沁平等。在國際化交流環(huán)境中,陳寶權(quán)教授帶領(lǐng)的科研團隊在幾何三維重建、物理仿真模擬、人體動作控制等研究方向均取得重要進展。


圖3 真人表演+數(shù)字合成虛擬預(yù)演(PreViz)演示短片制作現(xiàn)場

在國家重點研發(fā)計劃項目支持下,高精尖創(chuàng)新中心科研團隊研發(fā)的虛擬預(yù)演系統(tǒng)(圖3)以真人表演+數(shù)字合成的形式展現(xiàn)了三維數(shù)字技術(shù)在影像創(chuàng)制方案實時預(yù)演中發(fā)揮的有效作用,該系統(tǒng)被應(yīng)用于《鼠膽英雄》《媽閣是座城》等多部國產(chǎn)電影的虛擬預(yù)演。相關(guān)技術(shù)更是被應(yīng)用于場館演出和體育賽事等場景,從而實現(xiàn)對場館設(shè)計、賽道模擬、拍攝機位模擬、觀眾座位觀賽視角模擬等的智能管理[2]。陳寶權(quán)教授團隊針對虛擬預(yù)演系統(tǒng)中不可或缺的攝影機軌跡規(guī)劃開發(fā)了“基于樣例和關(guān)鍵幀的虛擬相機控制算法”(圖4),從真實的影片中學(xué)習(xí)攝影機運鏡的手法,智能化控制虛擬攝影機運動,實現(xiàn)有“電影感”的拍攝,不僅提供了靈活、高效的攝影機控制,更降低了虛擬系統(tǒng)使用的門檻,實現(xiàn)實時的攝影機軌跡編輯;“幾何三維重建”研究基于多機器人協(xié)同實現(xiàn)高效場景掃描與重建工作,進一步提高了場景掃描效率,可實現(xiàn)真實世界的數(shù)字孿生,從而用于數(shù)字資產(chǎn)的采集和重建;“物理仿真模擬”研究則不斷深耕于計算機語言表達和構(gòu)建更加精準、全面的仿真環(huán)境,團隊曾用計算機模擬液體表面張力可達到以假亂真效果,并可在動畫制作中實現(xiàn)應(yīng)用,系列成果使團隊得以在物理仿真領(lǐng)域持續(xù)保持國際領(lǐng)先地位。


圖4 可實現(xiàn) “電影感”拍攝的虛擬攝影機控制方法

近兩年,團隊“人體動作控制”方面科研成果接連斬獲SIGGRAPH ASIA 2022及SIGGRAPH 2023的最佳論文獎及最佳論文榮譽提名獎,使團隊在具身智能研究領(lǐng)域獲得了國內(nèi)國際學(xué)術(shù)界的關(guān)注。系列研究可通過動作捕捉技術(shù)采集人體運動數(shù)據(jù),運用深度學(xué)習(xí)、強化學(xué)習(xí)和語音、文字等多模態(tài)驅(qū)動方法實現(xiàn)運動的生成與控制,進而實現(xiàn)動畫人物風(fēng)格化手勢動作等效果(圖5)。


圖5 由語音和文字來驅(qū)動上半身人體3D模型進行手勢表演的跨模態(tài)生成系統(tǒng)


圖6 冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)

在北京2022年冬奧會和冬殘奧會期間,陳寶權(quán)教授團隊研發(fā)的“冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)” [3](圖6)通過多個相機陣列同步拍攝,實現(xiàn)了多視點影視轉(zhuǎn)播的“自由視點”效果,使每位觀眾得以自主控制觀看視角,更具沉浸感地觀賞比賽精彩瞬間。團隊還實現(xiàn)了在賽事轉(zhuǎn)播中引入“子彈時間”特效效果,在直播中實現(xiàn)原本需要長時間計算渲染的特效。這些技術(shù)和研發(fā)成果起源于電影,應(yīng)用于其他行業(yè),并將反哺電影攝制技術(shù)發(fā)展,有望為電影創(chuàng)制過程帶來顯著改變,推動電影向更高維度影像媒介方向發(fā)展。

3.3 AI技術(shù)在電影學(xué)研究領(lǐng)域?qū)崿F(xiàn)應(yīng)用

由北京大學(xué)藝術(shù)學(xué)院副院長李道新教授任首席專家的2022年度國家社科基金藝術(shù)學(xué)重大項目“中國特色電影知識體系研究”,正在“新文科”和交叉學(xué)科的視野里,努力整合北京大學(xué)人文社科與信息管理、人工智能領(lǐng)域的學(xué)術(shù)力量和技術(shù)優(yōu)勢。該項目聯(lián)合清華大學(xué)、北京師范大學(xué)、北京電影學(xué)院、中國傳媒大學(xué)以及1905電影網(wǎng)、中國國際廣播出版社等多方力量,建設(shè)基于大數(shù)據(jù)與AI驅(qū)動的中國電影知識體系(CCKS)平臺,并以影人年譜、電影計量為中心,借助平臺建設(shè)和紙質(zhì)出版,探索中國特色電影知識體系建構(gòu)路徑[4]。該平臺旗下CCKS?Cinemetrics (又名:PyCinemetrics)工具(圖7),是國內(nèi)第一款專用計量電影研究工具,主要功能包括:利用深度學(xué)習(xí)和PySide2 解析電影視覺風(fēng)格;使用TransNet V2將電影分割為鏡頭幀,探索平均鏡頭長度(Average Shot Length)和節(jié)奏;利用 K?Means 從鏡頭幀中提取主要顏色;使用EasyOCR提取電影字幕以獲取影片對白;基于VGG?19的目標檢測來識別隱喻性道具和物體;通過 OpenPose檢測骨骼點的比例以及在畫面的占比,間接確定拍攝景別;基于PySide2集成各功能并提供良好的擴展性。目前,研究團隊已使用CCKS?Cinemetrics對經(jīng)典電影進行計量分析測試,證明了軟件的準確性和效率[5]。計量分析結(jié)果不僅可用于電影學(xué)研究,也可服務(wù)當前及未來的內(nèi)容創(chuàng)作和人工智能制作,為二者提供指導(dǎo)及訓(xùn)練所需數(shù)據(jù)集。


圖7 CCKS?Cinemetrics的景別識別功能

李道新教授認為,在新時代必須結(jié)合大數(shù)據(jù)與人工智能等新興科技,重新審視并構(gòu)建電影知識體系。在當今快速變化的技術(shù)環(huán)境中,將傳統(tǒng)電影理論與現(xiàn)代科技結(jié)合,實現(xiàn)電影研究與生產(chǎn)的深度融合,是必要而緊迫的。作為一個基于大數(shù)據(jù)與AI驅(qū)動的中國電影知識體系平臺,CCKS平臺得到了跨媒介、跨學(xué)科、跨國別、跨領(lǐng)域等的特別關(guān)注。研究團隊將以高質(zhì)量數(shù)據(jù)與自主性知識體系為目標,力圖將CCKS平臺打造為教、學(xué)、研、產(chǎn)、服、命融合的智能體。其中,服指為個體、社會、國家和民族服務(wù);命指稟賦生命經(jīng)驗與使命意識,構(gòu)建網(wǎng)絡(luò)空間命運共同體[4]。

4 AI技術(shù)在中國影視創(chuàng)制過程中實現(xiàn)應(yīng)用

作為票房全球第二、影院銀幕保有量全球第一的電影大國,目前我國電影產(chǎn)業(yè)發(fā)展勢頭依然迅猛,各領(lǐng)域影視行業(yè)人員都對AI技術(shù)在影視行業(yè)應(yīng)用這一話題極為關(guān)注。

《流浪地球》系列科幻電影導(dǎo)演郭帆認為,在如今科技應(yīng)用與藝術(shù)創(chuàng)作緊密相連的時代,對于AI應(yīng)用的討論是非常有意義的話題。《流浪地球》第三部的創(chuàng)制過程中也已開始嘗試應(yīng)用AI技術(shù)[6],比如在美術(shù)概念設(shè)計階段,AI可快速實現(xiàn)創(chuàng)意可視化。不可忽視的是,AI技術(shù)正在改變電影創(chuàng)制方式,從而實現(xiàn)影視創(chuàng)作工作流程的逐步優(yōu)化,為創(chuàng)作者提供了更為廣闊的想象空間。未來,AI技術(shù)有望對個體專業(yè)化創(chuàng)制實現(xiàn)更廣泛賦能,突破傳統(tǒng)影像邊界,為影視創(chuàng)制帶來更多元的維度。

4.1 從動畫電影發(fā)展看AI技術(shù)給我國動畫制作帶來的技術(shù)突破

動畫電影伴隨著電影技術(shù)的發(fā)展歷程大致可劃分為三個階段。在電影誕生階段,工業(yè)革命催生出膠片電影,膠片放映設(shè)備經(jīng)歷了從手動到自動的轉(zhuǎn)變;通過放映機與留聲機的結(jié)合,電影從無聲變?yōu)橛新暎泄獠牧虾统上窦夹g(shù)又讓電影實現(xiàn)從黑白到彩色。作為膠片時代最具代表性的當屬水墨動畫電影,上海美術(shù)電影制片廠1963年攝制的《牧笛》[7]是當時極具代表性且彰顯了中式審美的水墨動畫電影,其問世以獨樹一幟的中華民族美學(xué)風(fēng)格在世界動畫舞臺享有盛譽。從制作成本包括人力成本角度而言,彼時一部10~20分鐘時長水墨動畫影片的制作成本驚人。

第二階段則是第三次科技革命后的數(shù)字電影時代,解決了膠片電影在攝制與放映時質(zhì)量不穩(wěn)定、成本過高等問題。第三階段則是我們當前正在經(jīng)歷的智能電影時代,4D電影、8K播映、LED放映系統(tǒng)等均在極大程度上實現(xiàn)了感官體驗的延展,并仍具備無限的發(fā)展空間。從電影誕生到智能電影時代到來歷經(jīng)近百年,而從計算機介入電影制作,到取代膠片僅用了20余年[8]。國產(chǎn)動畫電影作為我國電影產(chǎn)業(yè)的重要分支,同樣在技術(shù)變革的浪潮中持續(xù)探索著符合民族和時代需求的發(fā)展路徑。而今,智能電影時代的動畫電影制作在計算機技術(shù)輔助下,得以呈現(xiàn)更加驚人的效果[9]。

北京電影學(xué)院副院長孫立軍教授自1991年起成為中國第一批接觸計算機技術(shù)的純藝術(shù)生,至今從業(yè)近40年,是我國計算機動畫的先行者。伴隨著AI技術(shù)的快速發(fā)展,孫立軍教授帶領(lǐng)團隊開始嘗試在創(chuàng)制過程中靈活應(yīng)用AI技術(shù),并制作了一系列實驗影片。其間,孫立軍教授發(fā)現(xiàn)AI技術(shù)引入電影制作后,歷經(jīng)由模擬真實到超真實,再到藝術(shù)家們希望的“反真實”過程,即因為過于真實,而出現(xiàn)的從“AI熱”到“AI膩”的現(xiàn)象,且這一過程極為短暫[10,11]。

可以說,智能電影時代的AI成長空間是人類難以精準預(yù)判的,而AI技術(shù)在電影工業(yè)化制作過程中所具備的優(yōu)勢也逐步得以體現(xiàn)。2024年6月,孫立軍教授創(chuàng)作(著)的世界第一本AI繪畫專著《AI繪畫:當代水墨藝術(shù)“正發(fā)生”》[12]出版,率先以先鋒性、實驗性的方式,通過將生成式人工智能(Generative AI)水墨繪畫與原創(chuàng)水墨繪畫“重屏”并置,創(chuàng)造性地直觀展現(xiàn)了AI與人類藝術(shù)的“對景”與“對弈”。北京電影學(xué)院制作的科幻短片《地球大炮》〔圖8(a)〕、動畫電影《愚公移山》〔圖8(b)〕、仿木偶全AI影片《景陽岡》〔圖8(c)〕均因AI技術(shù)的應(yīng)用體現(xiàn)出更高制作效率和更佳視覺效果。《鐵血蒼穹》〔圖8(d)〕則是孫立軍教授牽頭創(chuàng)制的一部院線科幻大片,該影片除海報上的書法外,所有畫面、影片中運動的鏡頭等全流程均通過AI制作完成,極大程度節(jié)省了制作成本,影片海報僅需約50元便可完成,遠低于當前行業(yè)內(nèi)傳統(tǒng)設(shè)計工藝下所需的2~3萬元設(shè)計與制作成本。動畫短片《宇宙牧場》由北京電影學(xué)院一名本科學(xué)生僅用兩周時間獨立完成,而按照北京電影學(xué)院傳統(tǒng)教學(xué)規(guī)劃要求,相應(yīng)內(nèi)容制作在一年內(nèi)完成即可。由此可見,人工智能時代的影像創(chuàng)制可在成本投入與團隊規(guī)模方面實現(xiàn)相當大程度的優(yōu)化。


圖8 北京電影學(xué)院利用全AI流程完成的動畫電影示例

未來已來。自AI技術(shù)誕生后,動畫電影與真人電影的界限逐漸模糊,以好萊塢為代表的超豪華、高投資、全明星商業(yè)模式,可能在未來的AI時代將不復(fù)存在,“如何向AI學(xué)習(xí)”以及“如何與AI交朋友”是當前值得思考的問題。中國電影行業(yè)的年輕從業(yè)人員要有把國產(chǎn)電影“做大”的意識,把AI視為和人類思想性、藝術(shù)性賽跑的對手。智能電影時代的到來無疑給我國藝術(shù)家、技術(shù)專家以及電影從業(yè)人員帶來了挑戰(zhàn),但更多的還是機遇,鼓勵我們最大程度地發(fā)揮自身原創(chuàng)性,對于講好中國故事、傳播中國聲音、彰顯中式審美而言有著深遠的意義[13]。

4.2 真人電影制作過程中的AI技術(shù)應(yīng)用

我國利用AI技術(shù)進行電影制作的最新案例中,影片《異人之下》的創(chuàng)制過程極具代表性。其在制作過程中將真人摹片動畫與人工智能風(fēng)格遷移(Style Transfer)技術(shù)結(jié)合[14],取得了重要的技術(shù)突破。常規(guī)的真人摹片動畫包括兩個工作流程,即實拍及手工摹片。具體而言,真人摹片動畫通常先拍攝真人演員的表演,之后將拍攝的真人片段轉(zhuǎn)換為24幀/秒的畫面,再逐幀將畫面遷移為漫畫風(fēng)格,最后重新轉(zhuǎn)換為動畫的制作方法。

影片《異人之下》在拍攝完成后,創(chuàng)制團隊就一直在探索以新方式制作回憶部分動畫的路徑,例如引入新的風(fēng)格表達,從而使觀眾明確相關(guān)部分是對原畫作的致敬。在AI技術(shù)引入前,影片制作團隊已耗時2年嘗試采用傳統(tǒng)摹片動畫方式完成回憶段落。轉(zhuǎn)折點發(fā)生在2024年初,導(dǎo)演烏爾善與聯(lián)合導(dǎo)演夏鵬共同討論決定重新啟用AI生成的方式制作回憶場景,即把實拍和二維畫面結(jié)合,在原有傳統(tǒng)手工摹片基礎(chǔ)上,通過AI技術(shù)對整個動畫部分進行再次生成(圖9)。盡管僅耗時2個月通過AI技術(shù)進行生成重制,但真人摹片動畫技術(shù)的引入使影片《異人之下》的回憶場景以漫畫風(fēng)格實現(xiàn)視覺呈現(xiàn),與影片中存在的其他時間線在風(fēng)格上拉開距離,從而達到表達回憶的統(tǒng)一視覺效果。


圖9 影片《異人之下》摹片動畫技術(shù)制作過程示例

AI技術(shù)在電影創(chuàng)制過程中展現(xiàn)出飛快的進步,如鏡頭長度引發(fā)的劇烈閃爍、風(fēng)格遷移后效果不理想等技術(shù)問題,由于AI技術(shù)的迭代升級,在之后短時間內(nèi)便得以解決。影片制作最終以編程和其他技術(shù)手段來干預(yù)AI的產(chǎn)出效果,讓影片呈現(xiàn)出2.5次元風(fēng)格,既保留了真人演員表演的細膩情感,也兼顧了動漫的繪畫感,在銀幕上實現(xiàn)了創(chuàng)造性呈現(xiàn)。

這一過程中,《異人之下》技術(shù)團隊探索出一套全新的電影制作流程和技術(shù),包括真人實拍、關(guān)鍵幀摹片、動態(tài)摹片、3D視效制作、2K升4K技術(shù)等,這些技術(shù)的引入讓制作出的畫面實現(xiàn)了大銀幕放映的預(yù)期,完成了一種全新影像質(zhì)感呈現(xiàn),也是AI參與電影制作的一次有益探索。聯(lián)合導(dǎo)演夏鵬認為,盡管該片的技術(shù)探索尚有不足,但隨著未來技術(shù)的快速進步,電影工業(yè)化制作正面臨的實際問題將會逐步解決,例如目前諸多文生視頻(T2V)或圖生視頻(I2V)的畫面精美且細節(jié)豐富,但人物神情不夠生動的問題。影片《異人之下》的探索經(jīng)驗表明,解決這一問題既要結(jié)合演員的真實表演,又要積極應(yīng)用AI進行美術(shù)設(shè)定,從而創(chuàng)作出一種更新的藝術(shù)表達方式。AI技術(shù)的應(yīng)用有望使創(chuàng)作者們不再被資金、資源、時間成本等條件所限,擴展出更大的想象空間,從而更容易實現(xiàn)創(chuàng)意,進而將作品更完整、更有效地呈現(xiàn)給觀眾。

5 中國電影創(chuàng)制面臨的AI發(fā)展問題及未來方向探討

5.1 抓住人工智能時代發(fā)展機遇實現(xiàn)跨越式發(fā)展

當前,AI技術(shù)與電影間的關(guān)系已密不可分,放眼好萊塢乃至全世界的電影制作團隊,都在嘗試開展電影與人工智能技術(shù)的深度融合創(chuàng)新。好萊塢電影工業(yè)體系歷經(jīng)百年發(fā)展,具備較為深厚的積累與沉淀。AI技術(shù)到來使我國和全世界的電影制作行業(yè)站在同一起跑線上。這一變化為我們提供了更好的趕超機會,換言之,新的顛覆性技術(shù)的到來為我國電影行業(yè)從業(yè)者提供了一個有望實現(xiàn)跨越式發(fā)展的機會。

5.2 實現(xiàn)AI創(chuàng)制內(nèi)容審美的中國化和多樣化

AI時代的電影作品,無疑消弭了所謂現(xiàn)實與虛幻、真實與反真實、商業(yè)大片和中小成本獨立影片間各方面的邊界。AI為我國電影行業(yè)豐富且優(yōu)秀的故事講述提供了機遇,用電影發(fā)出中國聲音,用電影講述中國故事。2020年2月,孫立軍教授執(zhí)導(dǎo)、運用三維渲染二維視覺效果的水墨動畫短片《秋實》,以極具風(fēng)格的中國審美入圍第70屆柏林國際電影節(jié)[15],讓世界領(lǐng)略了新時期水墨動畫的技術(shù)創(chuàng)新和審美意境。對藝術(shù)家而言,藝術(shù)家自己的風(fēng)格就是作品的靈魂,目前發(fā)布的諸多AI大模型更側(cè)重西方審美,而中式審美在AI大模型中的缺失,是值得中國電影從業(yè)者關(guān)注的重要論題。在某AI大模型生成的內(nèi)容中,來自中國的大熊貓坐在地中海前拉大提琴,即該模型尚未掌握東方審美核心,側(cè)面說明了建立中國自主、中式審美的AI大模型和數(shù)據(jù)集的重要性。

藝術(shù)創(chuàng)作旨在表現(xiàn)立體思維,整體的真實是電影的重要表現(xiàn),而不能僅是某一點的真實。如何借助AI技術(shù)讓內(nèi)容更加多元化?如何從藝術(shù)創(chuàng)新角度解決AI大模型藝術(shù)審美偏差與風(fēng)格多樣化?基于當前AI大模型的學(xué)習(xí)效率,其可很快掌握某一特定藝術(shù)家的風(fēng)格,然而如何保證藝術(shù)家對AI和相關(guān)技術(shù)的友好態(tài)度?如何保護或者鎖定藝術(shù)家的作品版權(quán)與自身藝術(shù)風(fēng)格?這些問題是我國電影人和技術(shù)專家將要共同應(yīng)對的挑戰(zhàn)。

5.3 訓(xùn)練中國式審美的影視創(chuàng)制AI大模型

AI技術(shù)可能會是一個打開電影人們想象力的“法寶”,對于最前沿的AI大模型,我們可形象化類比其為一個無形的人類——計算機硅人類。如果僅基于好萊塢影片作為學(xué)習(xí)數(shù)據(jù),將陷入重復(fù)好萊塢敘事模式、創(chuàng)作風(fēng)格、消費理念的模式,有悖于當下的技術(shù)發(fā)展機遇和文化強國時代使命。如何訓(xùn)練影視創(chuàng)作AI大模型有效輔助中國式審美表達,從而真正意義上實現(xiàn)中國式創(chuàng)新,是我們必須思考的問題。誠然,我國悠久的文化底蘊不是簡單“解碼”可呈現(xiàn)的,需要技術(shù)專家與創(chuàng)作者形成合力,共同討論并產(chǎn)生思想碰撞,在形成一定共識的基礎(chǔ)上,以技術(shù)推動藝術(shù)發(fā)展,將電影技術(shù)與藝術(shù)表達有機結(jié)合,更好地運用AI創(chuàng)作出優(yōu)秀的中國電影及泛影像藝術(shù)作品。

6 結(jié)語

未來,我國的計算機科學(xué)與影視、影像產(chǎn)業(yè)有望實現(xiàn)深度同構(gòu)共生。這種共生關(guān)系意味著兩個領(lǐng)域不再孤立發(fā)展,而是相互融合、共同進步。而AI技術(shù)將在這一過程中扮演至關(guān)重要的角色。

電影與AI技術(shù)的結(jié)合正在重塑我們對世界和未來人類本身的理解。這種同構(gòu)性不僅體現(xiàn)在技術(shù)層面,更在文化和哲學(xué)層面展現(xiàn)出深刻聯(lián)系。電影作為一種藝術(shù)形式,通過視覺和聽覺手段傳遞情感和思想;而AI技術(shù)通過算法與數(shù)據(jù)處理模擬和增強人類的智能行為,兩者在追求創(chuàng)新和突破的過程中,都致力于探索未知、挑戰(zhàn)極限,展現(xiàn)出驚人的相似性。

將AI視為新質(zhì)生產(chǎn)力的一部分,意味著我們已認識到AI技術(shù)在推動社會進步和經(jīng)濟發(fā)展中的重要性。在電影領(lǐng)域,AI技術(shù)不僅能提高制作效率和質(zhì)量,還能為影視創(chuàng)制過程提供新的視角和工具。此外,AI技術(shù)可輔助研究者分析鏡頭語言和電影文本,幫助創(chuàng)制人員理解觀眾喜好和需求,進而創(chuàng)作出符合本土化審美需求的作品,為中國乃至全球觀眾帶來前所未有的觀影體驗。AI技術(shù)也將助力建立更加靈活、高效的中國制片體系,以快速響應(yīng)市場變化,并保持高質(zhì)量的制作標準。

通過計算機科學(xué)領(lǐng)域新技術(shù)尤其是AI技術(shù)的發(fā)展和應(yīng)用,我國有望生產(chǎn)出更多高質(zhì)量電影作品。這些作品不僅能豐富中國人民的精神文化生活,滿足人們對美好生活的向往,還可在全球范圍內(nèi)傳播中國價值觀和文化理念,為構(gòu)建人類命運共同體貢獻中國智慧和力量,通過電影這一載體向世界展示一個真實、立體、全面的中國形象,傳遞和平、發(fā)展、合作、共贏的中國理念。

參考文獻

(向下滑動閱讀)

[1] 科技日報. 啟用人工智能當編劇的首部電影,為何有點“雷”[EB/OL].(2016?10?20)[2024?11?13]. https://www.thepaper.cn/newsDetail_forward_1546236.

[2] 未來影像高精尖創(chuàng)新中心. 獨家 | 揭密“北京八分鐘”背后的黑科技——張藝謀導(dǎo)演背后站立著來自母校的科技團隊![EB/OL]. [2024?11?13].https://fve.bfa.edu.cn/info/1015/2720.htm.

[3] 人民網(wǎng). 《人民冰雪·冰雪科技談》:“自由視角+導(dǎo)播系統(tǒng)”讓觀眾隨心所欲“躺平”觀賽. [EB/OL].(2022?02?18) [2024?11?13]. https://baijiahao.baidu.com/s?id=1725064629315552684&wfr=spider&for=pc.

[4] 李道新,侯光明,饒曙光,等.中國自主電影知識體系建設(shè)的挑戰(zhàn)與愿景——對中國電影知識體系平臺CCKS的討論及其延展[J].中國文藝評論,2024(10):55?65.DOI:10.19324/j.cnki.zgwypl.2024.10.006.

[5] 光影綿長李道新. 活動預(yù)告| 國內(nèi)第一款自主研發(fā)的AI電影計量軟件CCKS?Cinemetrics發(fā)布[EB/OL].(2024?05?20)[2024?11?28].https://mp.weixin.qq.com/s?__biz=MzAxMzc3MzA2NQ==&mid=2649733381&idx=2&sn=6a7dd638980b

0020771c51d7eb487e16&chksm=83866963b4f1e07565e16314e2fc4395735cafd231bad5271f4cae3a5261776c124d7ff43edd&scene=21#wechat_redirect.

[6] 界面新聞. 郭帆在行動:《流浪地球》短片集,藝術(shù)與技術(shù)的雙重實驗[EB/OL]. (2024?02?03)[2024?11?13]. https://www.jiemian.com/article/10771122.html.

[7] 百度百科.牧笛[EB/OL] . [2024?11?13]. https://baike.baidu.com/item/%E7%89%A7%E7%AC%9B/17765?fr=ge_ala.

[8] 孫立軍,楊亮.人機一體、虛擬表演與技術(shù)美學(xué)[J].北京電影學(xué)院學(xué)報,2023(11):100?105.

[9] 楊亮,孫立軍.《阿凡達:水之道》是動畫電影嗎?——兼論數(shù)字時代“運動影像”的超真實想象[J].北京電影學(xué)院學(xué)報,2023(01):46?53.

[10] 孫立軍,霍笑妍.漫談人工智能時代未來電影發(fā)展方向——動畫導(dǎo)演孫立軍訪談[J].電影評介,2023(20):1?5.

[11] 孫立軍,楊亮.“元宇宙”時代的未來影像前瞻[J].電影評介,2023(10):1?6.

[12] 凡悲魯. AI繪畫:當代水墨藝術(shù)的“正發(fā)生”[M].北京:海洋出版社,2024.

[13] 孫立軍,楊亮,張文正.構(gòu)建人工智能時代的東方審美[J].當代動畫,2023(04):75?80.

[14] 中國電影報道.幕后:結(jié)合AI 揭秘《異人之下》真人摹片動畫[EB/OL]. (2024?08?16)[2024?11?13]. https://tv.cctv.cn/2024/08/16/VIDEzDIK6Vmd5lBfcKu3L7ld240816.shtml.

[15] 北京電影學(xué)院. 我校副校長孫立軍導(dǎo)演水墨動畫《秋實》入圍柏林國際電影節(jié)[EB/OL].( 2020?03?09 )[2024?11?13].https://www.bfa.edu.cn/cgerc/info/1026/1021.htm1.

[16] 楊亮,孫立軍.從化身,替身到原生——元宇宙題材電影中虛擬角色的身份類型與文化反思[J].當代電影, 2023(3):152?158.

[17] 中國計算機學(xué)會. 陳寶權(quán)、李道新、Scott Ross、孫立軍、郭帆、夏鵬將共議AI與未來影像 | CNCC大會論壇[EB/OL].(2024?10?21)[2024?11?13]. https://mp.weixin.qq.com/s?__biz=MjM5MTY5ODE4OQ==&mid=2651586303&idx=1&sn=94ac5201b22840070980809d5dd161fb&chksm=bcc8e51d1c932914847aad4c8bfea39ff95c8e042a9346246ccc2d74e833f5af31897b570f90&scene=27.

[18] 李道新.《逆行人生》:從“迭代現(xiàn)實”走向“算法現(xiàn)實主義”[J].電影藝術(shù),2024(05):61?64.

[19] 李道新,楊向華,陳剛,等.中國電影數(shù)字化的戰(zhàn)略轉(zhuǎn)型與發(fā)展趨勢[J].當代電影,2022(12):4?15.

[20] Ray K. THE SINGULARITY IS NEARER[EB/OL]. [2024?11?13]. https://www.thesingularityisnearer.com/.

[21] Yuval N H. Yuval Noah Harari [EB/OL]. [2024?11?13]. https://www.ynharari.com/.

【基金項目信息】國家重點研發(fā)計劃“科技冬奧”重點專項“冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)”(2019YFF0302900);國家社科基金藝術(shù)學(xué)重大項目“中國特色電影知識體系研究”(22ZD10);國家社科基金藝術(shù)學(xué)重點項目“中華民族現(xiàn)代文明視野下的動畫電影東方審美研究”(24AC006)。


特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

電影技術(shù)微刊 incentive-icons
電影技術(shù)微刊
電影技術(shù)微刊
565文章數(shù) 208關(guān)注度
往期回顧 全部

專題推薦

洞天福地 花海畢節(jié) 山水饋贈里的“詩與遠方

無障礙瀏覽 進入關(guān)懷版 主站蜘蛛池模板: 茂名市| 山丹县| 册亨县| 阿勒泰市| 铁岭市| 雷波县| 疏附县| 加查县| 南充市| 乌兰察布市| 黎平县| 大港区| 东宁县| 大邑县| 白城市| 佛山市| 游戏| 高台县| 黎川县| 乐亭县| 玉屏| 乃东县| 翁牛特旗| 辽阳县| 平泉县| 四子王旗| 贵定县| 宿州市| 搜索| 治县。| 扶余县| 汉源县| 分宜县| 博客| 县级市| 许昌县| 梨树县| 靖远县| 荣昌县| 松原市| 峡江县|