徐丹瑩
摘要:「虛擬文娛」,正在入侵「現(xiàn)實(shí)文娛」,甚至即將發(fā)動(dòng)傳媒史上一場(chǎng)最大風(fēng)暴的革命。它以未來(lái)之勢(shì),將從「內(nèi)容」「場(chǎng)景」「職業(yè)」「產(chǎn)業(yè)」,全面滲透甚至取代當(dāng)下文娛,最終「虛擬文娛」與「現(xiàn)實(shí)文娛」將會(huì)形成彼此交融又分庭抗禮的兩大文娛陣營(yíng)。
關(guān)鍵詞:虛擬文娛;職業(yè);產(chǎn)業(yè)
談起虛擬偶像、歌姬、模特、主持人等虛擬職業(yè)名人,一襲水藍(lán)色長(zhǎng)發(fā)的「公主殿下」初音未來(lái)肯定榜上有名。
B站一年一度的BML(BILIBILI MACRO LINK)演唱會(huì)在上海梅賽德斯如期舉行,日本超人氣虛擬歌姬初音未來(lái)與國(guó)內(nèi)頂級(jí)虛擬歌姬洛天依首次在線下演唱會(huì)同臺(tái),與B站站娘2233四人共唱《再來(lái)一杯》,臺(tái)下熒光棒的海洋此起彼伏「嗶哩嗶哩干杯」的應(yīng)援,與真人演唱會(huì)并無(wú)差別。
第二屆世界人工智能大會(huì)上,讓包括鄧麗君在內(nèi)的多位已逝歌手、演員重返舞臺(tái)、熒幕的數(shù)字王國(guó)(Digital Domain),同時(shí)也是《復(fù)仇者聯(lián)盟4》《頭號(hào)玩家》等電影的特效制作公司,其華人CEO謝安分享,在最新機(jī)器學(xué)習(xí)與游戲引擎的幫助下,影片中虛擬人角色可實(shí)時(shí)渲染生成,成本下降了三分之二。
虛擬歌姬、虛擬人角色、虛擬偶像等虛擬職業(yè)已成為文娛產(chǎn)業(yè)中不可缺少的一部分,在娛樂(lè)業(yè)近5年趨勢(shì)預(yù)測(cè)報(bào)告中,也一直有這樣一個(gè)認(rèn)知,當(dāng)5G開(kāi)放時(shí),VR會(huì)第一個(gè)再次爆發(fā),謝安亦在前不久舉行的世界人工智能大會(huì)上表示「我們離《頭號(hào)玩家》的世界僅差一個(gè)5G,虛擬時(shí)代已經(jīng)來(lái)臨。 」基于此大勢(shì),本文將帶大家一起總結(jié)目前文娛產(chǎn)業(yè)中的虛擬職業(yè),分為臺(tái)前與幕后上下兩篇,在梳理各個(gè)職業(yè)的同時(shí)對(duì)其以后的升級(jí)迭代展開(kāi)暢想。
一、虛擬人技術(shù)發(fā)展迅猛,演員仍難替代
虛擬歌姬、虛擬現(xiàn)實(shí)等鏈接三次元世界的「虛擬」概念并不是近十年隨著科技的進(jìn)步才誕生的。
早在17世紀(jì),人類就幻想過(guò)用機(jī)器模擬人聲與樂(lè)聲,并嘗試用特質(zhì)的管風(fēng)琴模擬人的元音發(fā)音,19世紀(jì)時(shí),人們開(kāi)始研制Panharmonicon這件可模仿其他音色的自動(dòng)演奏樂(lè)器。
也在同一時(shí)期,蘇格蘭科學(xué)家Davis Brewster發(fā)明了透鏡式立體鏡,讓兩眼感知兩個(gè)不同的平面圖像從而有3D成像效果的手持設(shè)備,后來(lái)受到電影誕生的沖擊,這個(gè)概念便進(jìn)入了休眠,直到近年VR的橫空出世,它才重回視野。同樣,直到計(jì)算機(jī)的問(wèn)世,機(jī)器模擬人聲的幻想才成為夢(mèng)想,并得以實(shí)現(xiàn)。
(一) 二次元世界的虛擬明星
1961年,電腦音樂(lè)大師麥克斯·馬修斯第一次讓電腦成功演唱歌曲,在當(dāng)時(shí)最先進(jìn)的IBM 7094電腦上制作出模擬人聲演唱《Daisy Bell》,可看作為虛擬歌手的初代雛形。https://v.qq.com/x/page/s03971prrsd.html(IBM7094《Daisy Bell試聽(tīng)》)
虛擬歌姬依托的歌聲合成引擎載體Vocaloid 并不是為打造虛擬歌姬誕生的,而是為了使真人歌聲更好聽(tīng)而研制的,該公司當(dāng)時(shí)希望研制出一款幫助「音癡」在KTV變「歌神」的軟件。永遠(yuǎn)16歲的「公主殿下」是在為達(dá)到更好的產(chǎn)品宣傳效果,將軟件「娘化」「擬人形象化」為手持麥克風(fēng)的紅發(fā)姑娘起音美可和穿風(fēng)衣的男孩始音海人大賣后才精心布局的。
2007年,其完美的人設(shè)一經(jīng)問(wèn)世,便迅速在ACG圈走紅,一個(gè)月內(nèi)將公司市場(chǎng)占有率由6%提升到33.9%,隨后依托全息投影技術(shù),初音未來(lái)成為第一個(gè)舉辦演唱會(huì)的虛擬藝人,也是首個(gè)走進(jìn)大眾視野的虛擬歌姬。
五年后的2012年,屬于中國(guó)自己的虛擬歌姬洛天依問(wèn)世,可能許多人不太明白虛擬歌姬與虛擬偶像的差別,在此明確一下,虛擬歌姬是指以初音未來(lái)為代表的依托Vocaloid程序合成聲音的二次元女性歌手角色產(chǎn)品,虛擬偶像則是二次元?jiǎng)勇宋锱枷?,基本有真人聲?yōu)配音。
這類二次元藝人與現(xiàn)實(shí)世界中的藝人一樣,有明確的職業(yè)分工,二次元偶像、二次元模特、二次元演員、二次元樂(lè)隊(duì)、二次元rapper等,二次元偶像產(chǎn)業(yè)的巨大商業(yè)價(jià)值吸引日本最大的男子偶像事務(wù)所,旗下?lián)碛心敬逋卦?、KinKi Kids、嵐、山下智久等人氣偶像的杰尼斯也建立了「虛擬杰尼斯」項(xiàng)目,并于2月19日推出首批二次元虛擬偶像——海堂飛鳥(niǎo)和苺谷星空兩位少年。
除帶著明顯的明星光環(huán)的二次元藝人外,2016年誕生了首個(gè)VTuber虛擬UP主——絆愛(ài),她轉(zhuǎn)變了原有的受眾消費(fèi)模式,將單向欣賞轉(zhuǎn)向如普通YouTuber一樣的實(shí)時(shí)互動(dòng)新模式。她會(huì)直播玩游戲,會(huì)回答問(wèn)題,甚至?xí)凑誫oogle map去游覽東京,并且做出解說(shuō)。
VTuber是通過(guò)實(shí)時(shí)渲染和人物建模等技術(shù)虛擬背后真人的動(dòng)作表演,加之同步聲優(yōu)配音的二次元主播,粉絲們把她背后的表演者稱之為「中之人」。截至目前,絆愛(ài)頻道的訂閱數(shù)已高達(dá)2,673,436, 她的出世也點(diǎn)燃了日本VTuber市場(chǎng),「VTuber」一詞被票選為2018年日本流行語(yǔ)第一位,根據(jù)調(diào)研社User Local統(tǒng)計(jì),2019年5月YouTube虛擬偶像總數(shù)已突破8000大關(guān)。
二次元虛擬藝人在霓虹的熱潮也隨著B(niǎo)站UP主的搬運(yùn)被帶來(lái)了國(guó)內(nèi),在8月初舉行的2019 China Joy盛會(huì),網(wǎng)易伏羲實(shí)驗(yàn)室?guī)?lái)了全球第一個(gè)引入AI技術(shù)的虛擬偶像「曲大師」的升級(jí)版「曲師師」,自稱是具備「完備知識(shí)和感情的芯片」的唱跳愛(ài)豆全新人設(shè),今后曲師師也將逐步開(kāi)展直播。
以上二次元世界的虛擬職業(yè)中,Vocaloid系虛擬歌姬除合成音源數(shù)據(jù)來(lái)源于聲優(yōu)之外,相較于其他虛擬藝人,對(duì)于背后真人的參與度較低。
(二)三次元形象的虛擬名人
回歸到三次元世界,虛擬人在文娛產(chǎn)業(yè)中都有哪些擔(dān)當(dāng)呢?
虛擬歌手活躍在臺(tái)前的多為已逝歌手或搖滾樂(lè)隊(duì)成員:
2012年數(shù)字王國(guó)(Digital Domain)公司用全息投影技術(shù)在Coachella 搖滾音樂(lè)節(jié)上復(fù)活了已去世 的美國(guó)著名饒舌歌手 Tupac Shakur之后,這個(gè)技術(shù)便被廣泛的應(yīng)用于已逝音樂(lè)人的「復(fù)活」;
2013年周杰倫臺(tái)北小巨蛋演唱會(huì)與全息投影鄧麗君跨時(shí)空對(duì)唱《紅塵客?!放c《千里之外》開(kāi)啟了鄧麗君的復(fù)活之路,2017年日本綜藝用AR和全息投影帶來(lái)了更真實(shí)版的《我只在乎你》。
「復(fù)活」已逝名人的技術(shù)不僅被用于舞臺(tái),亦被用于去世演員大熒幕的復(fù)活,如《速度與激情7》中的保羅·沃克與《星球大戰(zhàn)外傳:俠盜一號(hào)》中的彼得·庫(kù)欣。
大熒幕中的虛擬角色,也稱虛擬演員可能是觀眾最為熟悉的虛擬職業(yè),他們幾乎遍布所有好萊塢真人爆米花電影,依靠真人動(dòng)作捕捉生成影片中的虛擬角色是好萊塢電影特效產(chǎn)業(yè)重要的一環(huán),成功跨越「恐怖谷」每一幀都在燒錢(qián)的《阿麗塔》更將該技術(shù)領(lǐng)入新的「表演捕捉」高峰。
在前不久的巴黎時(shí)裝周上,柏林的創(chuàng)意二人組Trashy Muse帶來(lái)了全球首場(chǎng)虛擬時(shí)裝秀,模特中不乏知名虛擬KOL、超模,Shudu就在其中。此次嘗試,或給科技公司與時(shí)尚品牌打開(kāi)了新領(lǐng)域的合作。不夸張的說(shuō),模特極有可能成為首個(gè)完全被虛擬人取代的行業(yè)。
(三)虛擬主持人
最后我們來(lái)談下虛擬主持人,2000年全球首個(gè)虛擬新聞主播Ananova在網(wǎng)絡(luò)誕生,她極具科幻感的面容與機(jī)器聲線,與真人新聞主播的差距很大。真正將新聞主播帶上「像真人」行列的還是在AI主播誕生后,2018年11月,新華社聯(lián)合搜狗將語(yǔ)音合成、唇形合成、表情合成以及深度學(xué)習(xí)融合在一起,發(fā)布了全球首個(gè)AI合成主播,將語(yǔ)音合成、唇形合成、表情合成以及深度學(xué)習(xí)融合在一起,在這之后,撒貝寧的「孿生」AI主持人也在今年的央視春晚亮相。
就上文的梳理來(lái)看,虛擬職業(yè)可以說(shuō)已涉及到整體文娛行業(yè)的臺(tái)前職業(yè),真人職業(yè)是否會(huì)被取代取決于觀眾對(duì)該職業(yè)「像真人」要求的強(qiáng)度。時(shí)尚行業(yè)的需求可能更偏重于外表,目前的CG虛擬技術(shù)極有可能使它成為首個(gè)被虛擬人取代的行業(yè),這也可以很好的解釋,為何人形角色目前不可擺脫真人表演的輔助,因?yàn)橛^眾對(duì)于表演的要求不僅在外貌,更在感情的真實(shí)與感染力,所以真人演員的幕后表演是虛擬角色毫無(wú)違和感存在真人影片中的保障。
虛擬職業(yè)在三次元世界中的最高追求「像真人」,在外表更真實(shí)的基礎(chǔ)之上其智商也要更像人甚至超越人。長(zhǎng)久以來(lái),文娛產(chǎn)業(yè)的臺(tái)前職業(yè)都是有血肉的真人從事的,我們憑過(guò)往歷史與經(jīng)驗(yàn)認(rèn)識(shí)、了解這個(gè)行業(yè),所以都在盡力縮短虛擬人與真人的距離。
二、AI內(nèi)容生產(chǎn),滲透各領(lǐng)域
2017年5月湛廬文化出版了由「微軟小冰」創(chuàng)作的詩(shī)集《陽(yáng)光失了玻璃窗》;同年,「AIVA」為盧森堡國(guó)慶日慶典開(kāi)幕式作曲;2017年雙11,阿里「魯班」制作了4億張海報(bào);2017年底「媒體大腦」10秒寫(xiě)稿…..引號(hào)的名字都是 AI內(nèi)容生產(chǎn)系統(tǒng),在機(jī)器學(xué)習(xí)、深度學(xué)習(xí)與循環(huán)神經(jīng)網(wǎng)絡(luò)等算法進(jìn)步的推動(dòng)下, AI已在文娛產(chǎn)業(yè)各幕后崗位上崗,或具備可以上崗工作的能力,作為讀者的您或許早已看過(guò)它們撰寫(xiě)的新聞和天氣預(yù)報(bào)。文章的下篇,我們就盤(pán)點(diǎn)一下文娛內(nèi)容生產(chǎn)領(lǐng)域的各位在職AI。
幕后虛擬職業(yè)與上篇中提到的虛擬藝人最大的不同便是外形與智能,幕后AI生產(chǎn)者并沒(méi)有具體外形,基本為程序或軟件,但它們有著與人類一樣甚至過(guò)人的工作能力。
(一)文學(xué)創(chuàng)作
AI在內(nèi)容生產(chǎn)領(lǐng)域的應(yīng)用,也就是AI在文娛產(chǎn)業(yè)幕后擔(dān)任的職位,可分為四大類,分別為文字、音頻、圖像和視頻。首先,文字創(chuàng)作方面,詩(shī)歌/詞創(chuàng)作、新聞和天氣預(yù)報(bào)的撰寫(xiě)、劇集編劇、小說(shuō)撰寫(xiě),廣告詞創(chuàng)作等工作均有AI「工作者」任職。希望機(jī)器寫(xiě)出暢銷的文學(xué)作品的想法并不是 AI出現(xiàn)后誕生的,早在上世紀(jì)40年代《1984》的作者George Orwell就想過(guò)此事,AI 讓夢(mèng)想逐漸成為現(xiàn)實(shí)。
AI 寫(xiě)詩(shī),開(kāi)頭提到的「微軟小冰」是現(xiàn)代詩(shī)集的AI創(chuàng)作者,「編詩(shī)姬」等是古典AI詩(shī)人。
AI編劇在2016年創(chuàng)作出首部非人類撰寫(xiě)的科幻劇本《Sunspring》,該劇本被拍成9分鐘的電影,參加了倫敦電影節(jié)48小時(shí)短片挑戰(zhàn)賽。劇本中的每句話都為通順的語(yǔ)句,但整體沒(méi)有邏輯。
AI機(jī)器人寫(xiě)新聞稿應(yīng)該是AI最早涉足的文字創(chuàng)作領(lǐng)域,2014年,《洛杉磯時(shí)報(bào)》的QuakeBot生成地震報(bào)告,美聯(lián)社亦應(yīng)用AI撰寫(xiě)財(cái)經(jīng)新聞;2016年里約奧運(yùn)會(huì),《華盛頓郵報(bào)》運(yùn)用Heliograf進(jìn)行第一時(shí)間的體育新聞報(bào)道。
除文字工作的創(chuàng)作生產(chǎn), AI亦可擔(dān)任上下游的輔助工作,如「GiveMeSport」擔(dān)任體育新聞前期資料收集與分類;根據(jù)過(guò)往電影資料提供編劇方向建議等準(zhǔn)備工作,以及后期擔(dān)任校對(duì)對(duì)文章進(jìn)行糾錯(cuò);為新聞報(bào)道配圖加視頻等工作。
(二)音視頻領(lǐng)域
其次,音頻創(chuàng)作領(lǐng)域,AI可擔(dān)任作曲、編曲、歌曲制作人、模擬人聲等工作。AI 作曲主要有五種方式,第一,Amper Music為代表的選擇樂(lè)曲情緒、風(fēng)格、樂(lè)器、用途等生成樂(lè)曲;第二,根據(jù)照片圖片生成樂(lè)曲的「神經(jīng)卡拉OK」;第三,輸入簡(jiǎn)單旋律,可編寫(xiě)整首曲子的「Google Magenta」;第四,開(kāi)頭提到的AIVA等直接譜曲的AI,多為古典音樂(lè)創(chuàng)作;最后則是「The Seed」,可根據(jù)歌詞譜曲。
編曲與歌曲制作人的工作,Amper Music和Flow Machines目前均有自己的代表作問(wèn)世,前者完成了Taryn Southern歌曲《Break Free》的編曲工作;后者創(chuàng)作了《Daddy’s Car》與《Mister Shadow》兩首風(fēng)格迥異的歌曲。
模擬人聲則是指Adobe的Voco項(xiàng)目,通過(guò)學(xué)習(xí)人聲素材,模擬合成人的講話聲音,從而根據(jù)文字指示,生成新的音頻。
再次,圖像設(shè)計(jì)制作領(lǐng)域,充滿大家較為熟悉的舊照高清修復(fù)、圖片去水印等「黑科技」,AI可擔(dān)任設(shè)計(jì)、圖片后期、繪制照片等工作。設(shè)計(jì)包括海報(bào)設(shè)計(jì)、logo設(shè)計(jì)、配色方案、設(shè)計(jì)提案等AI都可完成;修圖、調(diào)色、去障礙物、手繪等美術(shù)后期工作AI亦可包攬。
最后,視頻制作領(lǐng)域,主要工作分為兩部分,前期拍攝與后期剪輯,「VEO」丹麥創(chuàng)業(yè)公司自主研發(fā)的AI可以進(jìn)行球賽的拍攝;6月11日,全球首款A(yù)I自導(dǎo)演攝像機(jī)——OBSBOT尋影正式亮相2019中國(guó)上海亞洲消費(fèi)電子展,創(chuàng)造性地推出 AI 追蹤、智能構(gòu)圖和手勢(shì)感應(yīng),可為短視頻內(nèi)容創(chuàng)作者帶來(lái)了顛覆性的拍攝體驗(yàn)。
后期剪輯方面,2016年IMBWaston為20世紀(jì)??怂沟捏@悚片《Morgan》剪輯了預(yù)告片,Watson通過(guò)對(duì)電影進(jìn)行視覺(jué)分析,識(shí)別角色、物體和場(chǎng)景,挑選出它認(rèn)為最適合放在預(yù)告片中的高能內(nèi)容再進(jìn)行拼接,今年7月,流媒體巨頭Netflix表示,看到的下一個(gè)電影預(yù)告片可能會(huì)由AI剪輯制作。
除了對(duì)創(chuàng)意要求較高的影視和影視預(yù)告片的剪輯之外,短視頻平臺(tái)對(duì)技術(shù)要求較低的視頻剪輯中,AI參與制作的比重要大得多。尤其是產(chǎn)品展示類視頻,Alibaba Wood可在1分鐘之類制作200個(gè)商品展示短視頻;智影人工智能在線視頻制作,上傳文字腳本后系統(tǒng)會(huì)根據(jù)內(nèi)容的關(guān)鍵字、人名、事件等信息自動(dòng)匹配相關(guān)視頻素材,快速生成視頻。
「邏輯創(chuàng)意」四個(gè)字也成為目前文娛產(chǎn)業(yè)幕后AI工作的最大限制,所以在音頻與圖像兩個(gè)更偏重「感受」的創(chuàng)作領(lǐng)域中,AI的表現(xiàn)要明顯優(yōu)于文字與視頻的內(nèi)容生產(chǎn)。
因此在討論AI或虛擬人與現(xiàn)實(shí)人類的關(guān)系時(shí),李開(kāi)復(fù)提出的「五秒原則」可判斷該職業(yè)的從業(yè)人員是否會(huì)被取代,即一項(xiàng)職業(yè)所從事的工作,如果可以在5秒鐘之內(nèi)對(duì)工作中需要思考和決策的問(wèn)題作出相應(yīng)決定,那么該職業(yè)在未來(lái)基本是會(huì)被取代的。以此原則來(lái)判定文娛產(chǎn)業(yè)中的內(nèi)容生產(chǎn)領(lǐng)域,我們可以說(shuō),在一段時(shí)間內(nèi),這些幕后職業(yè)是不會(huì)被取代的,與AI「同事」的關(guān)系為協(xié)作促進(jìn)的關(guān)系,更多時(shí)候AI扮演輔助工具的角色,從時(shí)間周期上提升內(nèi)容產(chǎn)品的產(chǎn)出速度,從內(nèi)容上提高文娛產(chǎn)業(yè)產(chǎn)品的質(zhì)量。
三、結(jié)束語(yǔ)
在搜集資料的過(guò)程中,筆者看到最多的標(biāo)題便是「XX要失業(yè)了」等一系列的標(biāo)題,《衛(wèi)報(bào)》則在《Deepfake時(shí)代,虛擬演員是否會(huì)將演員取代》一文中為演員站臺(tái),表示現(xiàn)有的人形角色仍離不開(kāi)背后的真人捕捉,可能演員會(huì)不以自己的真是面貌出鏡,但他們的表演是真實(shí)的。
或許未來(lái)是個(gè)眼見(jiàn)耳聽(tīng)均難辨真假的時(shí)代,但我們的感受是真實(shí)的,而這一切的虛擬也是為我們的體驗(yàn)更真實(shí)。
參考文獻(xiàn):
[1]2019 BML全息演唱會(huì)開(kāi)演,初音未來(lái)與洛天依首次同臺(tái)
https://new.qq.com/omn/20190720/20190720A0D2EL00.html
[2]虛擬歌手的歷史和存在的意義——論VOCALOID、UTAU、KONTAKT以及人力VOCALOID的創(chuàng)作
https://www.bilibili.com/read/cv2362211/