文| 馬 迪

這是一個(gè)2.5 次元的形象設(shè)計(jì)，處于二次元?jiǎng)勇蜗蠛腿卧恼鎸?shí)世界人物形象之間的位置。

不久前，一個(gè)默默無聞的抖音新號(hào)“柳夜熙”發(fā)布了一條題為《現(xiàn)在，我看到的世界，你也能看到了》的視頻。短短兩分鐘的時(shí)間，賽博朋克和奇幻古風(fēng)的場(chǎng)景交叉上演，借著Facebook 改名Meta 的“東風(fēng)”，一下打開了數(shù)百萬觀眾的“元宇宙”想象。

這大概是虛擬人第一次如此高調(diào)地進(jìn)入大眾視野?！傲刮酢笔装l(fā)視頻在當(dāng)晚5 小時(shí)內(nèi)獲贊247.7 萬，創(chuàng)造了兩條視頻漲粉500 萬的“奇跡”。# 柳夜熙 # 柳夜熙是誰 #當(dāng)美妝遇上元宇宙……各種相關(guān)話題在抖音上已有超過10 億次播放，向大眾普及“虛擬人”“元宇宙”可謂功不可沒。

事實(shí)上，虛擬偶像并不是全新概念。最早的虛擬偶像鼻祖要算2007 年出現(xiàn)的“初音未來”。這是由日本雅馬哈公司以語音合成程序?yàn)榛A(chǔ)開發(fā)的虛擬少女偶像，有著官方設(shè)定的水藍(lán)色頭發(fā)和眼睛，穿著水手服，動(dòng)人的聲音能唱無數(shù)首歌曲，在二次元文化盛行的日本社會(huì)可謂家喻戶曉，甚至跟Lady Gaga 同過臺(tái)。

2004 年，雅馬哈開發(fā)出語音合成核心引擎Vocaloid，這就是后來初音未來和中國第一位虛擬歌手“洛天依”的核心。作為目前最主流的語音合成方式，Vocaloid 采用的是“拼接合成”技術(shù)來進(jìn)行電子音樂制作。基礎(chǔ)聲音數(shù)據(jù)則來自于配音演員，使用者只要輸入音符和歌詞即可生成一首歌曲，并且可以通過更改音調(diào)、調(diào)整參數(shù)對(duì)“歌聲”進(jìn)行微調(diào)，模擬出類似人的呼吸、口型甚至顫音。原本破碎的聲音數(shù)據(jù)，就這樣變成了連貫的電子聲音。

采用這種方式來創(chuàng)作，可以實(shí)現(xiàn)對(duì)歌曲最精確的控制，但另一方面，也很需要作者調(diào)整各項(xiàng)參數(shù)的功力。Vocaloid 就像一把樂器，創(chuàng)作者擁有完全的自由。

隨著AI 技術(shù)的進(jìn)步，新一代的“虛擬歌姬”開始了更深的進(jìn)化。比如首位簽約華納、正式發(fā)行單曲的虛擬音樂藝人“哈醬”就是首個(gè)AI 仿真人聲，采用了微軟智能語音定制技術(shù)，背靠強(qiáng)大的神經(jīng)網(wǎng)絡(luò)語音模型，累積、分析了人類語音的各種元素比如音色、年齡、口音、韻律等等。在這樣的一個(gè)“胚子”上精雕細(xì)刻，不斷訓(xùn)練數(shù)據(jù)，最終形成了屬于“哈醬”自己的中文語音音色。雖然“哈醬”擁有敘述、新聞、客服等15種風(fēng)格，可以挑戰(zhàn)真人做不到的音調(diào)和語速，堪稱是一個(gè)十分豐富的人聲模型，但情感演繹仍然是AI 界的超級(jí)難題。

此次迅速出圈的柳夜熙，實(shí)現(xiàn)了仿真虛擬人在短視頻上的首次嘗試。按照出品公司的說法，這是一個(gè)2.5 次元的形象設(shè)計(jì)，處于二次元?jiǎng)勇蜗蠛腿卧恼鎸?shí)世界人物形象之間的位置。

其實(shí)這類“超仿真”形象的后期開發(fā)過程非常漫長，需要高水準(zhǔn)的原畫設(shè)計(jì)、高寫實(shí)的3D 建模、高效率的虛擬人引擎、高精度的動(dòng)作捕捉、高清晰的修幀渲染。每個(gè)步驟都耗時(shí)耗力，幾乎就是用金錢和技術(shù)堆出來的“寶貝”。

柳夜熙的連貫動(dòng)作也和背后的演員分不開。由于純動(dòng)畫的特效制作成本高昂，所以虛擬人普遍采用真人動(dòng)作捕捉技術(shù)，即由行動(dòng)演員穿著包含多個(gè)傳感器節(jié)點(diǎn)的動(dòng)捕服，將他們的動(dòng)作嫁接到角色身上。超高精度的動(dòng)態(tài)捕捉甚至可以捕捉到演員眼球的顫動(dòng)。

AI 技術(shù)甚至還能彌補(bǔ)動(dòng)作捕捉的不足。以面部表情為例，假設(shè)通過攝像頭能夠定位演員面部的150 個(gè)跟蹤點(diǎn)，AI 可以通過面部表情大數(shù)據(jù)訓(xùn)練，由150 個(gè)跟蹤點(diǎn)推導(dǎo)出40000 個(gè)點(diǎn)，從而模擬出更精細(xì)的表情。

從本質(zhì)上講，柳夜熙確實(shí)是一個(gè)出色的后期特效作品，但也僅此而已。作為虛擬人物，柳夜熙類似于游戲、電影中的角色，不能和觀眾互動(dòng)，進(jìn)行有邏輯、有個(gè)性的交互和反饋，更別提像人一樣思考和學(xué)習(xí)了。

這就是虛擬偶像難以走出2.5 次元的原因—能夠?yàn)橛^眾帶來新的視覺、聽覺體驗(yàn)，但刺激過后總讓人感覺到空虛。像人一樣，這四個(gè)字簡(jiǎn)簡(jiǎn)單單，代表的是人們對(duì)下一代AI 的沉重期待和漫長探索。虛擬偶像能否突破次元壁，也將在此一舉。