【摘要】當(dāng)前，人工智能技術(shù)越來越成熟，虛擬數(shù)字人在廣播電視領(lǐng)域的應(yīng)用也越來越廣泛。本文對基于人工智能的虛擬數(shù)字人相關(guān)理論進(jìn)行了分析，著重研究了基于人工智能的虛擬數(shù)字人在廣播電視新聞、綜藝、體育等節(jié)目中的應(yīng)用，并對廣播電視工程中虛擬數(shù)字人的創(chuàng)新發(fā)展進(jìn)行了展望，以期為廣播電視工程領(lǐng)域的虛擬數(shù)字人應(yīng)用提供一定參考。

【關(guān)鍵詞】人工智能；虛擬數(shù)字人；廣播電視工程

中圖分類號：TN92" " " " " " " " " " " " " " 文獻(xiàn)標(biāo)識碼：A" " " " " " " " " " " " " " DOI：10.12246/j.issn.1673-0348.2024.22.002

近年來，人工智能技術(shù)快速發(fā)展，基于人工智能的虛擬數(shù)字人技術(shù)日益成熟，已被廣泛應(yīng)用于廣播電視領(lǐng)域，虛擬數(shù)字人的應(yīng)用場景逐漸明晰、應(yīng)用效果也不斷提升，有效促進(jìn)了廣播電視行業(yè)的發(fā)展。在現(xiàn)代視聽行業(yè)發(fā)展中，人們對視聽體驗提出了更高的要求，加上新媒體技術(shù)的發(fā)展，傳統(tǒng)的廣播電視媒體發(fā)展受到了很大的影響，廣播電視工程建設(shè)中，還需積極推動技術(shù)創(chuàng)新。虛擬數(shù)字人作為一種新的視聽媒介，不僅有著逼真的形象，還有著智能化的交互能力，可以為廣播電視媒體提供新的視聽形式和載體，進(jìn)而更好地滿足觀眾視聽需求。本文對人工智能的虛擬數(shù)字人在廣播電視工程中的應(yīng)用進(jìn)行了研究，并對虛擬數(shù)字人在廣播電視工程中的創(chuàng)新發(fā)展進(jìn)行了展望。

1. 基于人工智能的虛擬數(shù)字人概述

1.1 虛擬數(shù)字人概述

虛擬數(shù)字人技術(shù)需應(yīng)用到計算機(jī)圖形學(xué)、計算機(jī)視覺、人工智能等知識。這一技術(shù)的具體應(yīng)用中，可以利用計算機(jī)圖形學(xué)創(chuàng)建數(shù)字模型，模擬人體骨骼結(jié)構(gòu)與外貌特征，并控制虛擬數(shù)字人的動作，模擬人類行為。運(yùn)用骨骼動畫和紋理貼圖等技術(shù)，能夠進(jìn)一步增強(qiáng)虛擬數(shù)字人的真實度，進(jìn)而給觀眾帶來更加真實的觀看體驗。為進(jìn)一步提升虛擬數(shù)字人的真實感，還需引入語音識別、面部表情、手勢識別等技術(shù)。在虛擬數(shù)字人中運(yùn)用語音識別技術(shù)，可以增強(qiáng)虛擬數(shù)字人的互動交流能力，虛擬數(shù)字人可以理解并回應(yīng)人類指令。在虛擬數(shù)字人中使用面部表情技術(shù)，可以讓虛擬數(shù)字人更好地傳達(dá)情感。在虛擬數(shù)字人中使用手勢識別技術(shù)，可以讓虛擬數(shù)字人更好地識別用戶手勢，進(jìn)而實現(xiàn)與用戶的自然交互。當(dāng)前，虛擬數(shù)字人技術(shù)的應(yīng)用領(lǐng)域越來越廣泛，并有效改變和推動了各個行業(yè)領(lǐng)域的發(fā)展，比如電影、虛擬現(xiàn)實、娛樂等，通過對這一技術(shù)的應(yīng)用，可以為人們帶來更加逼真的視聽體驗。

1.2 人工智能在虛擬數(shù)字人中的應(yīng)用

虛擬數(shù)字人作為重要的人機(jī)交互技術(shù)，能夠理解和處理人類語言是實現(xiàn)人機(jī)交互目的的關(guān)鍵，因此，虛擬數(shù)字人中還需加強(qiáng)人工智能技術(shù)應(yīng)用研究。在虛擬數(shù)字人中運(yùn)用自然語言處理和語音識別技術(shù)，可以有效增強(qiáng)虛擬數(shù)字人的人機(jī)交互能力，不僅可以深入分析相應(yīng)文本和語義，還能將語音轉(zhuǎn)化為文本，進(jìn)而達(dá)到語音交互效果。虛擬數(shù)字人如果要更好地模擬人類語言、動作和行為，需要能夠逼真地表達(dá)人類情感，運(yùn)用情感識別和情感合成技術(shù)，可以讓虛擬數(shù)字人更好地理解人類面部表情、聲音語調(diào)及語言語氣等，可以讓虛擬數(shù)字人表現(xiàn)得更加人性化。此外，還可以在虛擬數(shù)字人中引進(jìn)機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等技術(shù)，增強(qiáng)虛擬數(shù)字人的學(xué)習(xí)能力，虛擬數(shù)字人在大量學(xué)習(xí)后，能有效改善和優(yōu)化自身交互能力，從而更加智能。通過對人工整理技術(shù)的應(yīng)用，可以有效提升虛擬數(shù)字人的交互能力，提升其智能水平，進(jìn)而給各領(lǐng)域的創(chuàng)新發(fā)展帶來更多的可能性。

2. 虛擬數(shù)字人在廣播電視工程中應(yīng)用的關(guān)鍵技術(shù)和實施策略

2.1 高精度建模與實時渲染技術(shù)

高精度建模與實時渲染技術(shù)是虛擬數(shù)字人視覺呈現(xiàn)的重要基石，在虛擬數(shù)字人的創(chuàng)造中，運(yùn)用高精度建模技術(shù)，才能讓人感受到虛擬數(shù)字人的真實感。在虛擬數(shù)字人的高精度建模中，可以利用3dsMax、Maya、Zbush等建模軟件開展虛擬數(shù)字化設(shè)計，完成模型構(gòu)建后，可以對相應(yīng)模型虛擬合成并渲染，進(jìn)而形成三維模型，虛擬數(shù)字人模型的構(gòu)建中，還可以對其人體、衣物進(jìn)行三維建模，而這一過程對相關(guān)技術(shù)有著較高的要求[1]。在具體的模型制作中，需要精準(zhǔn)模擬人類身體各個部位的幾何形狀、皮膚質(zhì)地、肌肉運(yùn)動規(guī)律及細(xì)微表情變化。虛擬數(shù)字人的模型制作中，可以采用多邊形建模、NURBS曲面模型、細(xì)分表面建模等方法進(jìn)行建模，通過對相應(yīng)軟件的運(yùn)用可以有效構(gòu)建虛擬數(shù)字人的皮膚、毛發(fā)、服飾等細(xì)節(jié)部位的高分辨率模型，同時，還可以借助人體解剖學(xué)、生物力學(xué)等專業(yè)知識，真實再現(xiàn)人體面部表情和各種動態(tài)變化。比如在臉部模型的制作中，可以采用人臉掃描設(shè)備再現(xiàn)毫米級的真人3D臉部模型及貼圖，將相應(yīng)模型與貼圖導(dǎo)入UE5軟件后，相應(yīng)軟件能夠自動識別相應(yīng)數(shù)據(jù)，并能夠手動拓?fù)溲b扮身體、服裝、發(fā)型，模型制作人員可以在UE5/Maya軟件中進(jìn)一步優(yōu)化模型細(xì)節(jié)，最終形成逼真的虛擬數(shù)字人。

在完成虛擬數(shù)字人的模型制作后，通過對實時渲染技術(shù)的運(yùn)用，可以將相應(yīng)模型轉(zhuǎn)化為觀眾可見的動態(tài)圖像，這一技術(shù)對虛擬數(shù)字人的視覺真實感有著決定性的影響。關(guān)于虛擬數(shù)字人模型的實時渲染，其主要是借助基于物理的渲染、全局光照、環(huán)境遮蔽及光線追蹤等多種技術(shù)，保證虛擬數(shù)字人在實時交互的基礎(chǔ)上，運(yùn)用實時渲染技術(shù)，有效模擬真實世界的光照、陰影、反射和折射等現(xiàn)象，進(jìn)而呈現(xiàn)真實的視覺效果。在廣播電視工程中，通過應(yīng)用實時渲染技術(shù)，能夠讓直播、錄播等場景中的虛擬數(shù)字人保持自然、流暢的動作，給觀眾帶來真實的感受，從而更好地沉浸于節(jié)目中。

2.2 動作捕捉與實時交互設(shè)計

動作捕捉技術(shù)可以讓虛擬數(shù)字人呈現(xiàn)更加逼真的動態(tài)效果，進(jìn)而給觀眾帶來更好的視聽體驗。在動作捕捉技術(shù)應(yīng)用中，需要借助精密的設(shè)備捕捉真人動作數(shù)據(jù)，一般是安裝慣性傳感器、光學(xué)標(biāo)記點捕捉系統(tǒng)等，相應(yīng)系統(tǒng)與設(shè)備可以真實記錄表演者的動作數(shù)據(jù)，將相應(yīng)數(shù)據(jù)上傳至虛擬數(shù)字人模型后，可以為虛擬數(shù)字人賦予更多活力，提升虛擬數(shù)字人逼真性[2]。同時，為進(jìn)一步提升虛擬數(shù)字人的生命力和智能性，還需做好虛擬數(shù)字人的實時交互設(shè)計工作。具體的設(shè)計中，需要將集成語音識別、自然語言處理、機(jī)器學(xué)習(xí)等技術(shù)充分應(yīng)用到虛擬數(shù)字人的實時交互設(shè)計中，確保其能夠?qū)崟r理解用戶信息，并根據(jù)不同信息做出針對性的響應(yīng)，進(jìn)而提升對話和互動的順暢性。通過應(yīng)用動作捕捉與實時交互設(shè)計，可以有效提升虛擬數(shù)字人的真實感。隨著虛擬數(shù)字人技術(shù)的發(fā)展，這一技術(shù)在廣播電視工程中的應(yīng)用越來越廣泛，并進(jìn)一步拓展了廣播電視工程的發(fā)展路徑，但在虛擬數(shù)字人技術(shù)的具體應(yīng)用中，還需根據(jù)廣播電視工程需求，合理選擇動作捕捉設(shè)備與技術(shù)路線，保證相應(yīng)數(shù)據(jù)的準(zhǔn)確性。為了提升虛擬數(shù)字人的交互性，還應(yīng)采用更加智能的引擎，合理設(shè)計交互框架，針對廣播電視工程提出的實時性、穩(wěn)定性、可靠性要求，還需深入優(yōu)化動作捕捉與交互流程，采用更加科學(xué)的算法，減少數(shù)據(jù)延遲，提高數(shù)據(jù)處理效率，保證虛擬數(shù)字人在更加復(fù)雜的情況下也能實現(xiàn)良好的交互效果。此外，不僅要保證技術(shù)層面的穩(wěn)定性、逼真性，還應(yīng)注意關(guān)注交互過程中的情感設(shè)計，確保虛擬數(shù)字人在交互中能夠精準(zhǔn)傳遞相應(yīng)內(nèi)容的情感，才能給觀眾帶來沉浸式的視聽體驗。

3. 基于人工智能的虛擬數(shù)字人在廣播電視工程中的應(yīng)用

3.1 在新聞節(jié)目中的應(yīng)用

隨著人工智能技術(shù)的發(fā)展，廣播電視工程新聞節(jié)目中可以創(chuàng)造虛擬的主持人、記者或解說員，可以為觀眾帶來更好的交互體驗。虛擬主持人采用了語音合成和面部動畫技術(shù)，對專業(yè)主持人的語言、動作和行為進(jìn)行模擬，虛擬主持人可以自然流暢地與觀眾互動。同時，通過應(yīng)用語音識別技術(shù)，虛擬主持人還能對新聞內(nèi)容進(jìn)行智能化解讀，并實現(xiàn)實時的報道與評論，有效增強(qiáng)與觀眾的互動性[3]。廣播電視工程也可以利用虛擬數(shù)字人技術(shù)創(chuàng)造虛擬記者，在各類新聞事件的報道中，虛擬記者還可以將現(xiàn)場采訪中相關(guān)信息轉(zhuǎn)化為文字或語音，還能對相應(yīng)文本進(jìn)行智能化解讀。通過創(chuàng)造虛擬記者，可以進(jìn)一步提升新聞報道水平，為觀眾呈現(xiàn)更加豐富的新聞內(nèi)容。在新聞節(jié)目中，還可以創(chuàng)造虛擬解說員，利用深度學(xué)習(xí)和情感合成技術(shù)，虛擬解說員可以模擬人類情感和聲音，進(jìn)而給觀眾帶來更好的視聽體驗。比如央視頻所創(chuàng)造的AI虛擬主持人“王冠”，這一虛擬主播是中央廣播電視總臺的首個超仿真主播，在節(jié)目播出過程中，“王冠”有著自然的語音、毫秒級的微表情，還能實現(xiàn)全時態(tài)動作捕捉，實現(xiàn)對主播的超自然仿真。此外，中央廣播電視臺在新聞節(jié)目播出中，還推出了AI手語主播，其中使用了手語翻譯引擎和自然動作引擎，讓AI手語主播可以精準(zhǔn)連貫地呈現(xiàn)手語，有很高的手語表達(dá)能力，隨著技術(shù)的發(fā)展，AI手語主播的手語解說能力將越來越專業(yè)。

3.2 在綜藝節(jié)目中的應(yīng)用

綜藝節(jié)目中虛擬數(shù)字人的應(yīng)用，為保證虛擬數(shù)字人的真實性，需要運(yùn)用動作捕捉技術(shù)，對各類角色的外貌、動作進(jìn)行模擬，同時，借助虛擬現(xiàn)實技術(shù)還能讓虛擬數(shù)字人與真實人物進(jìn)行真實的互動，提升觀眾的互動性。通過對虛擬數(shù)字人的應(yīng)用，能夠有效增強(qiáng)綜藝節(jié)目趣味性，觀眾也能在綜藝節(jié)目中扮演各種角色，充分參與到綜藝游戲中，進(jìn)而推動綜藝節(jié)目創(chuàng)新發(fā)展。同時，在虛擬數(shù)字人中運(yùn)用語音識別和語義分析技術(shù)，虛擬數(shù)字人還能更好地理解和回應(yīng)觀眾指令，能夠與觀眾進(jìn)行實時的互動[4]。觀眾可以通過語音、手勢充分參與到綜藝節(jié)目中，從容獲得更好的互動體驗。虛擬數(shù)字人技術(shù)中運(yùn)用計算機(jī)圖形學(xué)和特效技術(shù)，可以形成更加逼真的畫面效果，模擬真實的場景環(huán)境，進(jìn)一步增強(qiáng)綜藝節(jié)目的視覺沖擊力，從而給觀眾帶來更好的視聽體驗。比如訊飛音樂創(chuàng)造了AI虛擬歌手Luya，這一形象是利用音色解耦模型構(gòu)建了人類音色高維空間，并對其外在形象進(jìn)行了精細(xì)的勾勒，對其音色進(jìn)行了精準(zhǔn)的定位，最終形成了獨一無二的“x-vocal”音色，這一虛擬形象與多個平臺進(jìn)行合作，并登上了廣西衛(wèi)視的春節(jié)聯(lián)歡晚會，給觀眾帶來了良好的視聽體驗。

3.3 在體育節(jié)目中的應(yīng)用

關(guān)于體育節(jié)目中虛擬數(shù)字人的應(yīng)用，可以利用這一技術(shù)在體育節(jié)目中創(chuàng)造虛擬運(yùn)動員，其中還涉及到深度學(xué)習(xí)與機(jī)器學(xué)習(xí)技術(shù)，體育解說員在解說過程中，可以利用虛擬運(yùn)動員真實再現(xiàn)體育比賽中運(yùn)動員的表現(xiàn)和戰(zhàn)術(shù)策略，并直觀地分析比賽數(shù)據(jù)，進(jìn)而給觀眾帶來更加生動的比賽解說。同時，體育節(jié)目中還可以創(chuàng)造虛擬分析員，并創(chuàng)造虛擬圖形，實現(xiàn)數(shù)字的可視化，觀眾可以更加直觀地了解比賽狀況，更好地理解相應(yīng)觀點[5]。通過對計算機(jī)圖形學(xué)與虛擬現(xiàn)實技術(shù)的應(yīng)用，可以再現(xiàn)體育場中的場景、運(yùn)動員、虛擬觀眾，體育節(jié)目播出過程中，能夠為觀眾提供多方位視角，并實現(xiàn)實時重播。觀眾在觀看體育節(jié)目過程中，能夠身臨其境地感受體育現(xiàn)場環(huán)境。由于虛擬數(shù)字人運(yùn)用了姿勢識別和語音交互技術(shù)，觀眾可以與虛擬數(shù)字人進(jìn)行充分的互動交流，能夠有效增強(qiáng)觀眾的參與感，提升體育節(jié)目的趣味性。比如中央廣播電視總臺創(chuàng)造了3D超寫實虛擬數(shù)字人小C，這一虛擬形象采用了語音、自然語言處理、計算機(jī)視覺等技術(shù)，同時，還利用了4D掃描采集了大量人臉數(shù)據(jù)，經(jīng)過大量的訓(xùn)練后，最終形成了“小C”這一形象。關(guān)于虛擬形象“小C”的運(yùn)用，在2022年的北京冬季奧運(yùn)會擔(dān)任過多個體育節(jié)目主持人，節(jié)目播出過程中，通過“小C”這一形象，為廣大觀眾全面呈現(xiàn)了冬奧會賽場情況，其形象新穎活潑，受到了觀眾的一致好評和喜愛。

4. 廣播電視工程中虛擬數(shù)字人的創(chuàng)新發(fā)展

4.1 基于深度學(xué)習(xí)與生成式人工智能技術(shù)的創(chuàng)新發(fā)展

隨著用戶對視聽需求的不斷擴(kuò)大，虛擬數(shù)字人需要引入更加先進(jìn)的技術(shù)，以進(jìn)一步提升虛擬數(shù)字人的制作水平?；谏疃葘W(xué)習(xí)與生成式人工智能技術(shù)的虛擬數(shù)字人是重要的發(fā)展方向，相應(yīng)技術(shù)可以為虛擬數(shù)字人提供更加強(qiáng)大的算法支持，相比真人驅(qū)動的虛擬數(shù)字人，算法驅(qū)動的虛擬數(shù)字人有著更高的逼真度和靈活性，比如廣州臺的虛擬數(shù)字人“小朱”，這一人物形象采用了基于人工智能的圖像合成、唇形匹配等技術(shù)，形象更加逼真。同時，語音合成方面采用的是深度學(xué)習(xí)技術(shù)，包括序列到序列、波形生成、神經(jīng)聲碼器等，通過分析大量真實人聲數(shù)據(jù)，可以從中挖掘出人聲特征與語音變化，播出中，可以根據(jù)不同語言與情感需求生成相應(yīng)的虛擬數(shù)字人，與真人錄制的虛擬數(shù)字人相比，算法驅(qū)動的虛擬數(shù)字人更加自然、豐富。

4.2 虛擬數(shù)字人形象從二維形象轉(zhuǎn)變?yōu)槿S形象

在廣播電視工程的虛擬數(shù)字人發(fā)展中，其形象逐漸從二維形象轉(zhuǎn)變?yōu)槿S形象，與二維形象相比，三維虛擬數(shù)字人的制作成本更高，但可以根據(jù)廣播電視工程節(jié)目制作需要，自由打造三維虛擬數(shù)字人的風(fēng)格、外貌，且隨著相關(guān)技術(shù)的發(fā)展，三維的虛擬數(shù)字人形象也更加地精細(xì)、逼真，借助大模型的能力，在廣播電視節(jié)目中能夠呈現(xiàn)更好的畫面效果。

5. 結(jié)束語

隨著廣播電視行業(yè)的發(fā)展，廣播電視工程技術(shù)水平不斷提升，虛擬數(shù)字人在廣播電視工程中的應(yīng)用越來越廣泛，有效提升了廣播電視服務(wù)水平?；谌斯ぶ悄艿奶摂M數(shù)字人，可被應(yīng)用于廣播電視工程的新聞節(jié)目、綜藝節(jié)目、體育節(jié)目等多種節(jié)目中，為觀眾提供更加豐富、互動和娛樂化的視聽體驗。未來，還應(yīng)進(jìn)一步加強(qiáng)虛擬數(shù)字人技術(shù)研究，積極推動虛擬數(shù)字人技術(shù)的應(yīng)用，從而為觀眾帶來更好的視聽體驗。

參考文獻(xiàn)：

[1]王嘉.虛擬數(shù)字人技術(shù)在傳媒領(lǐng)域中的應(yīng)用研究[J].現(xiàn)代電視技術(shù)，2023（4）：102-105.

[2]張亮.論虛擬數(shù)字人能否取代播音員和主持人[J].中國傳媒科技，2023（12）：25-28.

[3]秦貝貝，傅煥然，周粵婷.數(shù)字虛擬人產(chǎn)業(yè)發(fā)展現(xiàn)狀研究[J].廣播電視網(wǎng)絡(luò)，2023，30（2）：94-96.

[4]公慧，孫年軍.廣播電視領(lǐng)域人工智能技術(shù)應(yīng)用觀察[J].西部廣播電視，2023，44（17）：69-71.

[5]郭偉.虛擬數(shù)字人技術(shù)在廣電新媒體中的應(yīng)用[J].廣播電視信息，2022，29（6）：17-20.