視頻生成AI 大模型Sora 的推出,展示了AIGC 技術(shù)在電影領(lǐng)域應(yīng)用的強大潛力,其可理解與電影攝制密切相關(guān)的畫面風(fēng)格、拍攝手法、鏡頭特點等,并能通過輸入文本、圖片、視頻等信息智能生成最長時長為60 秒、分辨率為1080p 的高品質(zhì)逼真視頻,受到行業(yè)廣泛關(guān)注。近年來傳統(tǒng)計算機圖形學(xué)(CG)方法與深度學(xué)習(xí)技術(shù)不斷交匯融合,將現(xiàn)有語言、視覺、聲音等AI大模型垂直應(yīng)用于電影劇本和故事板、視覺預(yù)演、動作和表演捕捉、聲音制作等工藝環(huán)節(jié),已形成新技術(shù)、新算法、新應(yīng)用與新實踐。未來,該領(lǐng)域研究將持續(xù)關(guān)注多模態(tài)大模型、實時渲染和人機交互技術(shù)。人工智能技術(shù)已成為電影攝制創(chuàng)新升級的加速器,為電影攝制實踐帶來了創(chuàng)新性變革和革命性影響,并加快推進形成電影行業(yè)新質(zhì)生產(chǎn)力。本期遴選虛擬數(shù)字人新范式、基于深度學(xué)習(xí)的電影智能化攝制技術(shù)、電影工業(yè)美學(xué)和技術(shù)美學(xué)、技術(shù)革新視野下動畫媒介發(fā)展的機遇與挑戰(zhàn)等論文,論述了電影行業(yè)與智能科技加速融合下的技術(shù)動向和行業(yè)生態(tài)。此外,全國農(nóng)村電影管理平臺數(shù)據(jù)可視化的研發(fā)與實現(xiàn)、基于計量電影學(xué)的電影色彩風(fēng)格可視化方法,展示了數(shù)據(jù)可視化技術(shù)的電影行業(yè)實操應(yīng)用;電影沉浸式音頻碼流規(guī)范及功能特性研究、沉浸式劇場實時粒子特效系統(tǒng)研究則展現(xiàn)了沉浸式視覺、聽覺技術(shù)的最新研究與實踐,歡迎感興趣的讀者予以關(guān)注。
——本期責(zé)編
虛擬數(shù)字人是計算機圖形圖像領(lǐng)域的研究熱點,伴隨智慧時代和元宇宙時代來臨,在新一代信息技術(shù)和現(xiàn)代智能科技迅猛發(fā)展與廣泛應(yīng)用的背景下,虛擬數(shù)字人已成為影視傳媒領(lǐng)域的應(yīng)用熱點。虛擬數(shù)字人的研究與實現(xiàn)關(guān)鍵在于對其幾何造型、材質(zhì)紋理、語義信息等進行精準描述和有效表征,其制作生成涉及掃描、建模、驅(qū)動、渲染等關(guān)鍵核心技術(shù)。從技術(shù)品質(zhì)上看,電影級虛擬數(shù)字人既要在人物真實感方面突破恐怖谷效應(yīng),達到超寫實水準,又要支持與真人和場景的智能實時交互與無縫虛實融合。伴隨人類社會智能化升級的持續(xù)推進和不斷深化,向AI 類人智能體(Agent)發(fā)展演進成為虛擬數(shù)字人迭代升級的重要趨勢和必然要求?!短摂M數(shù)字人新范式:SIGGRAPH ASIA 2023 電影制作相關(guān)研究綜述》一文結(jié)合電影制作發(fā)展需求分析總結(jié)了SIGGRAPH ASIA 2023 會議虛擬數(shù)字人的最新研究成果和技術(shù)發(fā)展趨勢,從幾何造型、運動控制、動作捕捉等方面細致闡述了虛擬數(shù)字人技術(shù)應(yīng)用及其實現(xiàn)方法,并對虛擬數(shù)字人服務(wù)電影創(chuàng)作生產(chǎn)提出了有價值的深層次思考。虛擬數(shù)字人是數(shù)字經(jīng)濟時代的發(fā)展新動能,具有極其廣闊的發(fā)展與應(yīng)用前景。未來,虛擬數(shù)字人技術(shù)應(yīng)充分汲取計算機圖形圖像和人工智能領(lǐng)域的融合創(chuàng)新成果,統(tǒng)籌提升真實感、智能化、交互性、魯棒性、穩(wěn)定性等技術(shù)性能,為服務(wù)電影制作創(chuàng)新升級和產(chǎn)業(yè)提質(zhì)優(yōu)化發(fā)揮積極作用。
——劉達,正高級工程師,中國電影科學(xué)技術(shù)研究所(中央宣傳部電影技術(shù)質(zhì)量檢測所)總工程師,《現(xiàn)代電影技術(shù)》主編
當(dāng)前,我國電影產(chǎn)業(yè)蓬勃發(fā)展,科技正在為電影產(chǎn)業(yè)的發(fā)展進步提供強大助力;深度學(xué)習(xí)技術(shù)在人類社會生產(chǎn)生活的各個領(lǐng)域得到廣泛應(yīng)用,且在效率和性能方面不斷凸顯優(yōu)勢,為深度學(xué)習(xí)技術(shù)在電影產(chǎn)業(yè)的應(yīng)用提供了新思路。與此同時,電影工業(yè)也逐步進入轉(zhuǎn)型階段,進一步催生了深度學(xué)習(xí)與電影產(chǎn)業(yè)結(jié)合的需求。論文《基于深度學(xué)習(xí)的電影智能化攝制技術(shù)研究》以電影攝制流程為主線,介紹了深度學(xué)習(xí)技術(shù)在電影攝制領(lǐng)域的應(yīng)用;從電影前期籌備、中期拍攝到后期制作,詳細梳理介紹了當(dāng)前電影智能化攝制的先進技術(shù)及應(yīng)用情況,同時總結(jié)了電影智能化過程中面臨的相關(guān)問題及技術(shù)挑戰(zhàn),并對深度學(xué)習(xí)與電影攝制結(jié)合的發(fā)展需求和未來趨勢進行了分析與展望。論文通過介紹深度學(xué)習(xí)技術(shù)在電影攝制過程中的研究進展及應(yīng)用,可以拓寬電影從業(yè)人員的技術(shù)視野;通過總結(jié)當(dāng)前電影智能化攝制面臨的技術(shù)挑戰(zhàn),可以為相關(guān)研究提供方向和重點,有助于進一步優(yōu)化完善深度學(xué)習(xí)技術(shù)在電影領(lǐng)域的應(yīng)用;其對于技術(shù)發(fā)展趨勢的展望也有助于激發(fā)電影創(chuàng)新活力。
——季向陽,教授,清華大學(xué)自動化系腦與認知科學(xué)研究所所長,中國人工智能學(xué)會深度學(xué)習(xí)專委會主任
數(shù)據(jù)已成為數(shù)字經(jīng)濟時代的第五大生產(chǎn)要素,隨著人工智能技術(shù)的飛速發(fā)展,數(shù)據(jù)的重要性愈發(fā)凸顯。我國具有海量數(shù)據(jù)資源的獨特優(yōu)勢,電影行業(yè)也不例外。影片從創(chuàng)作到放映的過程中,產(chǎn)生了大量圖像、視頻、音頻、文本等非結(jié)構(gòu)化數(shù)據(jù)和結(jié)構(gòu)化數(shù)據(jù)。在此基礎(chǔ)上,院線市場、二級市場、農(nóng)村公益放映等電影多元化放映體系進一步提升了數(shù)據(jù)的多樣性和海量性。通過對多源、異構(gòu)、海量數(shù)據(jù)進行采集、清洗、預(yù)處理和挖掘,并結(jié)合數(shù)據(jù)可視化技術(shù),利用圖形、圖表、地圖等可視元素,將繁雜的數(shù)據(jù)以動態(tài)、實時、多維度、交互式的方式進行可視化展現(xiàn),將有助于洞察數(shù)據(jù)規(guī)律與趨勢,服務(wù)科學(xué)決策,推動產(chǎn)業(yè)提質(zhì)升級增效?!度珖r(nóng)村電影管理平臺數(shù)據(jù)可視化的研發(fā)與實現(xiàn)》一文基于我國農(nóng)村電影公益放映實際需求,運用數(shù)據(jù)預(yù)處理、數(shù)據(jù)分析、可視化結(jié)果生成等技術(shù)實現(xiàn)全國農(nóng)村電影公益放映數(shù)據(jù)的可視化展現(xiàn),并利用異步通信、分步加載、漸進式渲染等方式解決了海量數(shù)據(jù)加載與更新問題,對于推動我國農(nóng)村電影公益放映優(yōu)化升級與高質(zhì)量發(fā)展具有重要意義。
——王萃,正高級工程師,中國電影科學(xué)技術(shù)研究所(中央宣傳部電影技術(shù)質(zhì)量檢測所)高新技術(shù)研究處副處長