來源:《影視制作》
《歌手2025》自5月16日開播以來,收視表現(xiàn)與技術(shù)創(chuàng)新持續(xù)掀起熱潮。節(jié)目播出五期,湖南衛(wèi)視連續(xù)五周蟬聯(lián)CVB、歡網(wǎng)收視第一,創(chuàng)今年以來省衛(wèi)周五黃金檔收視率最高紀(jì)錄;芒果TV累計播放量14.18億,平臺直播互動總次數(shù)累計破9000萬次;截至6月15日0點,全網(wǎng)傳播量626.7億次,全網(wǎng)熱搜數(shù)11396個,破億傳播話題50個;海外社媒總覆蓋量9152萬。
技術(shù)創(chuàng)新方面,節(jié)目中4K超高清直播帶來的視覺盛宴、沉浸式音頻系統(tǒng)營造的聽覺享受,以及橫豎屏融合的創(chuàng)新觀看模式等,都讓觀眾感受到了技術(shù)與藝術(shù)的深度融合。
為此,《影視制作》特別采訪了芒果TV副總裁盧海波與芒果TV智能研究中心第一副總經(jīng)理宋施恩,分享節(jié)目背后的技術(shù)創(chuàng)新故事,展望對『歌手』系列節(jié)目的技術(shù)應(yīng)用。
受訪者
盧海波
湖南廣播影視集團(tuán)(臺)
科學(xué)技術(shù)委員會常務(wù)副主任
芒果TV副總裁、首席技術(shù)官
專注于芒果TV科技研發(fā)與技術(shù)生態(tài)體系搭建工作,帶領(lǐng)技術(shù)團(tuán)隊,在人工智能、虛擬現(xiàn)實、超高清制播、內(nèi)容電商、文博資產(chǎn)數(shù)字化等領(lǐng)域均取得突破性進(jìn)展,圍繞文化科技融合戰(zhàn)略,持續(xù)推動芒果TV技術(shù)躍升與平臺數(shù)智升級。作為項目負(fù)責(zé)人承擔(dān)多個省部級科研專項及行業(yè)標(biāo)準(zhǔn)制定,成功組織五屆“馬欄山杯”國際音視頻算法大賽。2024年榮獲“湖湘工匠”稱號,長沙市高層次人才行列。
宋施恩
芒果TV智能研究中心
第一副總經(jīng)理
主導(dǎo)構(gòu)建覆蓋內(nèi)容創(chuàng)作、生產(chǎn)審核、編碼分發(fā)的全鏈路AI技術(shù)體系與產(chǎn)品矩陣,推動“芒果大模型”備案及應(yīng)用,主持研發(fā)低成本虛擬拍攝系統(tǒng)和超高清云制作系統(tǒng)。擔(dān)任湖南2024年度“三尖”創(chuàng)新人才工程科技賦能文化產(chǎn)業(yè)創(chuàng)新工程重點專題項目負(fù)責(zé)人,主持并參與多項湖南省重點研發(fā)計劃項目。
Q:
技術(shù)團(tuán)隊的參與對節(jié)目創(chuàng)新至關(guān)重要,《歌手2025》中技術(shù)團(tuán)隊是在哪個階段介入的?關(guān)于線上線下互動環(huán)節(jié)的策劃過程是怎樣的?
盧海波:芒果TV內(nèi)容與技術(shù)口的雙向溝通非常密切,每個節(jié)目策劃初期就有技術(shù)團(tuán)隊深度參與,通過全流程的技術(shù)支持與應(yīng)用研討,力求實現(xiàn)更好的節(jié)目呈現(xiàn)效果。具體到《歌手2025》,技術(shù)團(tuán)隊于2024年10月就正式進(jìn)入項目組,全程深度參與了節(jié)目呈現(xiàn)與互動方面的工作。
參與初期,技術(shù)團(tuán)隊就設(shè)定了“線上線下全民互動”的核心目標(biāo),并制定了雙向賦能的技術(shù)方案:一是“現(xiàn)場→線上”的氛圍傳遞,基于《歌手 2024》的技術(shù)積累進(jìn)一步升級優(yōu)化,力求將現(xiàn)場演出的熱烈氛圍趣味化地傳遞給線上觀眾;二是“線上→現(xiàn)場”的情緒反饋,探索如何將線上觀眾的情緒有效地反饋到現(xiàn)場,并形成節(jié)目內(nèi)容的一部分。但考慮不影響現(xiàn)場觀眾自主決策投票,部分方案會在其他節(jié)目中實踐。
為實現(xiàn)上述目標(biāo),節(jié)目創(chuàng)新應(yīng)用AI情緒識別技術(shù),并在終端呈現(xiàn)層面實現(xiàn)兩大突破:其一是“同頻共振”,當(dāng)現(xiàn)場觀眾鼓掌時,線上觀眾終端屏幕將同步觸發(fā)震動效果,強(qiáng)化沉浸式體驗;其二是“實時監(jiān)票”,線上觀眾可全程觀看現(xiàn)場投票流程并參與監(jiān)票,提升競演投票透明度。
截至目前,《歌手2025》直播互動率連續(xù)五期穩(wěn)定保持40%+的高水位,累計互動用戶已超千萬,累計互動次數(shù)已突破9000萬。
《歌手2025》AI情緒識別界面(芒果TV手機(jī)端)
《歌手2025》實時監(jiān)票界面(芒果TV手機(jī)端)
Q:
與前幾季相比,《歌手2025》技術(shù)團(tuán)隊在團(tuán)隊組成與規(guī)模上有哪些變化?
盧海波:《歌手2025》面向電視大屏、移動小屏提供了全方位的4K超高清直播服務(wù),為應(yīng)對千萬級并發(fā)流量壓力,組建了播放技術(shù)、云服務(wù)與互聯(lián)網(wǎng)技術(shù)團(tuán)隊協(xié)同保障體系。相較于傳統(tǒng)電視直播模式,《歌手2025》中互聯(lián)網(wǎng)技術(shù)團(tuán)隊已成技術(shù)核心。
在團(tuán)隊組成方面,這次新增了算法團(tuán)隊與播放技術(shù)團(tuán)隊的深度參與。算法團(tuán)隊基于AI聲音識別與圖像分析,支持“虛擬座席”功能,實現(xiàn)現(xiàn)場評審情緒的實時捕捉與線上反饋,強(qiáng)化跨屏互動體驗。播放技術(shù)團(tuán)隊則聚焦雙Vivid直播的端到端技術(shù)攻關(guān),以自研技術(shù)為核心貫通從制作、處理到終端渲染的全流程,填補行業(yè)技術(shù)空白,最終實現(xiàn)了全球首個基于國產(chǎn)三維聲技術(shù)的直播大型音樂綜藝的落地。
《歌手2025》虛擬座席界面(芒果TV手機(jī)端)
團(tuán)隊規(guī)模方面呈現(xiàn)出了量級變化。這次技術(shù)團(tuán)隊參與人數(shù)較以往擴(kuò)大了3-5倍,數(shù)百名技術(shù)人員需同步在崗值守,全方位保障節(jié)目直播的順利進(jìn)行。芒果TV技術(shù)團(tuán)隊辦公室與演播廳分別位于七彩盒子演播基地的頂層與次頂層,每期節(jié)目直播期間,樓上樓下一片燈火通明,技術(shù)人員緊密協(xié)作的場景,成為節(jié)目技術(shù)保障的生動縮影。
Q:
《歌手2025》決定采用4K超高清直播的行業(yè)背景和平臺戰(zhàn)略考量是怎樣的?此前有哪些探索基礎(chǔ)?
盧海波:早在《歌手2024》收官之際就確定《歌手2025》要采用雙Vivid超高清直播。這既是對國家廣電總局超高清戰(zhàn)略的積極響應(yīng),也是芒果TV持續(xù)踐行“為觀眾提供高品質(zhì)視聽服務(wù)平臺”目標(biāo)的重要舉措。我們希望通過這一挑戰(zhàn)為行業(yè)貢獻(xiàn)有價值的實踐案例,也希望更多的用戶能對精品內(nèi)容的影音體驗有更好的感知,更愿意通過電視直播、通過電視大屏觀看內(nèi)容。
技術(shù)團(tuán)隊踐行“不創(chuàng)新,毋寧死”的平臺理念,2024年便開始在《下一站歌手》等直播節(jié)目中啟動4K超高清技術(shù)驗證,通過抽取小范圍觀眾樣本進(jìn)行嘗鮮體驗。歷經(jīng)近半年調(diào)試,在《歌手2025》開播前兩個月最終確定“4K超高清+三維聲”技術(shù)方案,并在播出前一個多月完成全流程技術(shù)準(zhǔn)備。節(jié)目正式播出后,技術(shù)團(tuán)隊還針對每期播出效果進(jìn)行動態(tài)微調(diào)和優(yōu)化,持續(xù)提升用戶視聽體驗,收獲了優(yōu)異的收視表現(xiàn)。
《下一站歌手》4K超高清直播畫面
Q:
在實現(xiàn)4K超高清、高清同播的模式過程中,遇到了哪些技術(shù)難點?采取了哪些解決方案。
宋施恩:在實現(xiàn)4K超高清與高清同播的過程中,我們主要遇到了三大技術(shù)難點。
首先是如何保證超高清HDR與高清SDR畫面零色差,為此芒果TV首創(chuàng)輕量化算法調(diào)色技術(shù),在播控編碼環(huán)節(jié)基于現(xiàn)場高清信號對4K信號實時二次調(diào)色,通過動態(tài)映射算法校準(zhǔn)亮度曲線與色彩空間,實現(xiàn)“零色差”同播。高清畫面精準(zhǔn)還原舞臺色彩,而4K畫面則展現(xiàn)出更為豐富的細(xì)節(jié)和通透的色彩,同時50幀的刷新率讓畫面更加流暢自然。
《歌手2025》4K超高清&高清畫面零色差同播
其次是現(xiàn)場大量信號處理的挑戰(zhàn),節(jié)目直播現(xiàn)場部署了35臺頂級4K攝像機(jī),有超百路直播流,傳統(tǒng)播控系統(tǒng)難以應(yīng)對。為此,我們自研了輕量化全I(xiàn)P多機(jī)位直播系統(tǒng),通過分布式架構(gòu)實現(xiàn)全量信號、全流程實時監(jiān)看,同時還支持批量處理延時、實時調(diào)整字幕與秒級應(yīng)急切換,多機(jī)位播出設(shè)備成本較傳統(tǒng)方案下降70%,人力投入節(jié)省一半以上。
《歌手2025》現(xiàn)場 4K 攝像機(jī)
芒果TV輕量化全I(xiàn)P多機(jī)位直播系統(tǒng)
第三是超高清直播帶來的網(wǎng)絡(luò)帶寬成本驟增的問題,《歌手2024》因直播產(chǎn)生了千萬級帶寬成本增長的壓力,《歌手2025》升級為超高清直播,意味著更高的帶寬成本。為此,我們一方面采用智能編碼等方式,在同等體驗下壓降了30%的直播流碼率,另一方面與供應(yīng)商建立戰(zhàn)略合作爭取帶寬優(yōu)惠政策。
從投入與成效的正向反饋來看,技術(shù)創(chuàng)新的價值得到了充分驗證。特別值得一提的是車載場景的應(yīng)用,2024年芒果TV便與華為鴻蒙智能座艙達(dá)成戰(zhàn)略合作,為系列車型用戶定制《歌手2025》三維聲專屬體驗,這一合作已吸引合作伙伴為高品質(zhì)視聽服務(wù)付費采購會員權(quán)益。盡管車載場景目前并非核心播放場景,但其展現(xiàn)出的商業(yè)潛力,正成為芒果TV持續(xù)加碼超高清直播投入的重要驅(qū)動力。
華為鴻蒙智能座艙車載場景定制了《歌手2025》三維聲專屬體驗
只有依托優(yōu)質(zhì)的節(jié)目內(nèi)容,4K超高清技術(shù)才能真正深入人心。基于這一認(rèn)知與考量,芒果TV也在全面推進(jìn)互聯(lián)網(wǎng)電視端點播內(nèi)容的超高清升級,以精品內(nèi)容吸引更多用戶的同時,實現(xiàn)商業(yè)收益的提升。
Q:
請介紹《歌手2025》中沉浸式音響系統(tǒng)的設(shè)計以及現(xiàn)場音頻制作的理念。相較《歌手2024》的沉浸式音頻系統(tǒng),有哪些升級或創(chuàng)新?
宋施恩:沉浸式音響系統(tǒng)主要面向現(xiàn)場聽審與觀眾,較此前系列節(jié)目《歌手2025》實現(xiàn)了又一次升級突破。
除了繼續(xù)采用全球頂級的LiSA音響系統(tǒng),還為每組音響新增了一個發(fā)聲單元,同時新增12組音柱作為360°環(huán)繞音箱,并通過AI自動算法將舞臺原本水平方向的分布擴(kuò)展至觀眾席四周,有效增強(qiáng)了聲場包圍感,讓音樂呈現(xiàn)更具沉浸感,也為調(diào)音師提供了充足的創(chuàng)作空間,讓現(xiàn)場觀眾能更直觀地感受聲音的深度、寬度及真實飽滿度。
《歌手2025》現(xiàn)場LiSA音響系統(tǒng)
Q:
“橫豎融合直播模式”這一創(chuàng)新的直播觀看方式是如何誕生的?拍攝錄制系統(tǒng)對應(yīng)進(jìn)行了怎樣的設(shè)計與布局?觀看反饋如何?
宋施恩:這一創(chuàng)新源于對《歌手2024》用戶互動數(shù)據(jù)的分析,團(tuán)隊發(fā)現(xiàn)用戶對多視角互動需求旺盛,因此延續(xù)技術(shù)探索。《歌手2024》中,超千萬用戶通過引導(dǎo)自動切換機(jī)位自主選擇觀看視角,在終端體驗到個性化觀看的樂趣。同年首創(chuàng)的云導(dǎo)播技術(shù)打破傳統(tǒng)模式,將畫面選擇權(quán)交給用戶,使其既能觀看演唱會現(xiàn)場,也能同時看到后臺歌手真人秀,滿足了多場景、多視角的個性化需求,帶動《歌手2024》參與用戶直播觀看時長提升60%。
云導(dǎo)播功能的橫豎屏結(jié)合觀看效果(芒果TV手機(jī)端)
今年云導(dǎo)播全面升級,業(yè)內(nèi)率先實現(xiàn)橫豎屏幕融合模式,推出橫屏與豎屏直播機(jī)位同屏觀看的積木式拼接模式,云導(dǎo)播使用率較去年提升32%。直播中云導(dǎo)播提供了20個機(jī)位供用戶選擇,包含4個豎屏和16個橫屏。云導(dǎo)播以橫屏沉浸式觀看為主,豎屏則聚焦呈現(xiàn)主持人或藝人的微表情及個性化設(shè)計,兼顧用戶體驗與行業(yè)趨勢。豎屏除滿足用戶對細(xì)節(jié)觀看的需求外,還契合商務(wù)需求,豎屏直播將采用商務(wù)品牌的超長焦手機(jī)拍攝。
考慮到豎屏適合展現(xiàn)真人秀或歌手細(xì)節(jié),且橫豎屏組合美觀,升級后的云導(dǎo)播精準(zhǔn)滿足了用戶對多場景、多視角的個性化需求,收獲了良好效果。
Q:
在芒果TV的綜藝內(nèi)容版圖中,《歌手2025》在其中處于怎樣的位置?節(jié)目在提升用戶黏性、推動大小屏融合等方面起到了哪些重要作用?
盧海波:“歌手”作為芒果爆款音綜,因直播屬性成為技術(shù)應(yīng)用標(biāo)桿,包括超高清在內(nèi)的多項新技術(shù)均優(yōu)先在此落地。節(jié)目直播帶動大量用戶回歸大屏。它的成功將為后續(xù)其他音樂節(jié)目在直播形式、超高清播出及三維聲直播與點播制作等方面提供重要參考,技術(shù)團(tuán)隊也將從中積累將超高清制作技術(shù)進(jìn)一步提質(zhì)、降本的重要經(jīng)驗,加速超高清制作技術(shù)的普及。
Q:
從技術(shù)應(yīng)用角度來看,您對后續(xù)歌手系列節(jié)目是否有期待?
盧海波:后續(xù)我們將重點聚焦互動媒體發(fā)展,一方面在畫面和聲音上持續(xù)強(qiáng)化沉浸式體驗的技術(shù)積累,以實現(xiàn)多終端的良好體驗。另一方面著力提升互動性,致力于增強(qiáng)直播舞臺互動效果,讓全球用戶即便身處各地,也能共同感受演播廳的視聽享受與互動,使觀眾互動成為內(nèi)容制作的一部分。
此外,線上線下互動場景仍存在豐富的創(chuàng)新可能性,例如探索基于全網(wǎng)觀眾情緒數(shù)據(jù)的舞臺動態(tài)調(diào)節(jié)機(jī)制,讓技術(shù)成為連接內(nèi)容與用戶情感的橋梁。
好文共賞請轉(zhuǎn)發(fā) 有話要說請留言
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.