鐘和晏

還是2016年8月里約熱內盧奧運會閉幕式上，令人炫目的“東京八分鐘”讓日本交互設計師真鍋大度（Daito Manabe）和他的Rhizomatiks公司獲得了一次受世界矚目的機會。隨著打扮成超級馬里奧的日本首相安倍晉三手捧紅球出現在交接臺上，CG動畫視頻和AR技術呈現的一系列虛擬形象從空中翩然落下，也就是2020東京夏季奧運會上舉行的33個競技項目。

日本狂言師野村萬齋與真鍋大度在狂言劇《三番叟》中的合作，將千年技藝與新技術融合在一起

在之后的立方體裝置與50名舞者的光影互動表演中，真鍋和他的團隊通過實時感應，把AR與舞蹈編排和閃爍的三維框架結合在一起。為了同步這些元素，他需要一個精確模擬的系統架構。畢竟，奧運會這樣的場合不允許失敗。

“奧運閉幕式是世界各地人們都在觀看的事件，我對只是播放一些已經制作好的CG視頻不感興趣。”他事后這樣解釋他的初衷，“為了創(chuàng)造我們所需的氛圍，它必須實時完成。這不僅僅是關于使用新技術，我想呈現的是能夠打動人心的現場演出感。”

與“東京八分鐘”或者真鍋大度的其他炫酷作品不同，正在杭州舉行的“九個明天”國際科技藝術展上，他展出了一件相對低技術的互動激光裝置《時光褪色》。封閉的全黑空間一側擺放著安裝了紅外照相機的控制臺，你站在控制臺前，從不同風格的濾鏡中選定一種模式，然后按下圓紐拍下一張你的肖像。慢慢地，肖像以綠色光點的形式被繪制在對面幾米遠的墻面上，又在幾分鐘內逐漸褪色消失。

封閉空間里安裝著三臺激光機，從原理上說，被投射的激光點是無法持續(xù)保留下來的。這件作品的奇妙之處在于光點會持續(xù)一段時間，最終完整地合成你的照片?？粗约旱男蜗笠苑峭瑢こ５姆绞匠霈F和消隱是一種難以描述的感覺，像是進入了存在與非存在的中間狀態(tài)。

真鍋大度 “魔術”的秘密，其實在于對面墻上懸掛的帶磷光涂層的屏幕。由于磷光漆的物理特性，激光通過逐點曝光描繪出圖像，它的投射點被延長了很短的時間。所以，轉瞬即逝的肖像必須在光點消失之前完成，只有仔細計算光束的照射時間和方向才能成功。

真鍋大度出現在杭州寶龍藝術中心的展廳里，他還是一頂卷邊針織帽加運動帽衫的慣常打扮。雖然他集合了富有才華的媒體藝術家、軟件工程師、作曲家、DJ等多重身份，他的外表卻是普通到不起眼的程度。

“如果涉及到藝術，你需要考慮它如何成為一種表達形式，從技術的角度來看，你不一定需要做一些很難的事情?！稌r光褪色》是使用從拍賣網站購買的激光器，以相對低成本創(chuàng)建的。它背后的想法并不復雜，困難的部分在于提出別人未曾想到的想法，然后實現它們?！痹谒f話時，臉上幾乎沒有什么表情。

“九個明天”的策展人姚大鈞也是中國美術學院跨媒體學院開放媒體系主任，去年4月，中國美院象山校區(qū)建成了科技藝術實驗中心，VR、AR、未來書法、科幻用戶界面等都是實驗中心長期研究的內容。同為媒體藝術家，他對這件耐人尋味的作品顯然偏愛有加。在他與真鍋大度的對談中，他提出自己的疑問：“你是先想到了這樣的概念，再去尋找磷光紙，還是因為先找到了材料？”

“我是先有了這個創(chuàng)意，然后用兩個月時間去嘗試各種材料，慢慢實現的?！闭驽伌蠖然卮鹫f，“不知從什么時候開始，媒體藝術的互動表現方式變得很相似，大多數是快速反應過程。這一次我做了一種反向選擇，觀眾在拍照之后，需要等待3分鐘來等畫面出現。也可以說，這是一件反社交媒體的作品?！?/p>

真鍋大度1976年出生于東京，高中時開始組建樂隊、做DJ。他從東京科技大學數學系畢業(yè)后，進入國際情報科學藝術學院（IAMAS）學習數字信號處理課程。這是一所自由而有趣的學校，像巖井俊雄（Toshio Iwai）這樣的著名媒體藝術家也參與其中。

也是在IAMAS，他結識了他的長期合作者石橋素（Motoi Ishibashi），兩人合作的第一部作品是在東京一家百貨商店入口處安裝的交互式視頻。屏幕向進出商店的人們展示了他們7秒鐘之前的樣子，這是基于認知科學的觀點，即人們對“當前時刻”的認識包括之前和之后的7秒鐘。那是2004年，7年之后，他與石橋合作的《粒子》在奧地利電子藝術大獎（Prix Ars Electronica）互動藝術類別中獲得了優(yōu)異獎。

2006年，兩人合作創(chuàng)建了Rhizomatiks公司，向客戶提供軟件編程、硬件架構以及互動項目設計等服務，如今發(fā)展為50人左右的公司。從2015年開始，真鍋大度本人專注于大約20人的創(chuàng)意研發(fā)部門Rhizomatiks Research，從激光器、無人機、投影映射到動態(tài)感官編程，著重在媒體領域探索技術的各種藝術可能性。

事實上，奧運閉幕式之前，Rhizomatiks公司已經為娛樂界貢獻了不少引人注目的事件。他們?yōu)楸鶏u歌手Bj？rk的世界首個實時播放360o虛擬現實音樂會提供技術指導，負責視頻工程、照明系統和視覺設計等。作為日本電音組合Perfume背后的技術操縱者，Perfume的演唱會上經常會出現全息影像、激光裝置、虛擬影像與真人互動的現場表演等頗具未來感的技術展示。

Rhizomatiks在Perfume演唱會中使用的全息影像技術往往不是靜態(tài)的，而是在立體物上投影動態(tài)影像。在第60屆戛納國際創(chuàng)意節(jié)上，參與表演的Perfume三位女歌手身上出現了動態(tài)的幾何形狀影像，影像隨著她們的舞蹈動作而變化。紅外線相機和測距相機在現場捕捉著三人的細微動作，后臺程序自動生成實時投影，形成魔法般的幻影。

編舞家Mikilo一直擔任Perfume的編舞指導，她還擁有一個全女性舞蹈團Elevenplay。近些年來，真鍋個人以及Rhizomatiks公司與Elevenplay頻繁合作，進行結合視覺與聲音、軟件編程與人體本身的實驗，無人機、機械臂等被轉換成新的身體表達形式。

用傳感器追蹤記錄舞蹈者的動作，然后再用一系列無人機重現這些動作，一場名為《飛行》的表演是從站立在舞臺上的三位白衣舞者開始的，她們面前飄浮著三個帶白色金字塔尖頂的無人機。隨著她們轉動身體、伸出手臂，無人機也開始向上飛升，跟隨著音樂節(jié)拍和舞者的動作變化飛行角度。

很快，無人機似乎對和諧一致的人機共舞感到厭倦了，想要獲得更多的獨立性。一度平靜的配樂變得激越起來，舞者紛紛散開，無人機開始與投射在舞臺屏幕上的幾何圖形編程影像一起，進行自己的編舞表演。無人機的飛行與影像的變化配合得絲絲入扣。不得不承認，這段極具韻律感的表演遠比人機共舞要有魅力。

“一開始我們只能控制3臺無人機，現在已經可以同時控制24臺了?！闭驽伌蠖日f。

SonarPLANTA是始于2014年巴塞羅那的全球音樂和創(chuàng)意盛會，每年都會邀請有影響力的藝術家創(chuàng)作大型項目，目的是推動新媒體技術和藝術創(chuàng)意領域的研究和實驗。 去年6月份，入選2017 SonarPLANTA首映的就是真鍋大度的互動設計作品《幻閃》，其中同步鏡、煙霧機、聚光燈以及多達24臺視頻投影儀結合在一起，構建出一個由光線來定義空間變化的沉浸式裝置。

“我對光所創(chuàng)造的三維空間概念很感興趣，在研究礦石的自然形狀和結晶過程之后，我們決定把人體運動和技術創(chuàng)造的幾何空間結合在一起。”真鍋大度說。他在同一個平面上結合了兩個不同的空間——真實的物理空間和另一個由數字生成的空間，從所有元素的移動中產生新的視覺體驗。

一開始，3名男女舞者走入其中，撿起地上發(fā)出藍色熒光的5個光球。投影的眾多光束聚集在光球上，他們的每個身體動作都在操縱著這些交錯的光束。最后，舞臺上只剩下了一名女性舞者，她身后的一團光球隨著音樂呼應著她的動作，像是在與之共舞，通過多個視頻投影儀、鏡子和精細的光學計算，兩者被同步了。最后，真實的舞者離開了舞臺，光球代替了她，變化出既清晰又虛幻的影子，將舞蹈繼續(xù)下去。

“我制作藝術的原因是為了聚焦新技術帶來的可能性和危險，并推動社會層面對這些問題的討論。一些開始是純粹的藝術項目，隨著技術進步，在5到10年后被全世界普遍使用，比如在觸摸屏上玩游戲。但是，只依賴于新奇技術的媒體藝術注定會被迅速消費，并在新奇消失之后落入過時的狀態(tài)?！痹谡驽伌蠖瓤磥?，無論計算機和演算法如何進步，你都需要創(chuàng)造性地重新激發(fā)它們，為新的想法服務。與像工匠一樣的產出相比，未來人們對輸入信息的判斷能力會變得更加重要。

對于藝術與技術之間的關系，姚大鈞持有和真鍋大度相似的觀點，他說：“我認為科技與藝術其實是一種煉金術的轉化關系，只有經過高度原創(chuàng)的藝術理念，才能把沒有藝術性的技術轉化為藝術。它是煉金的技術，而不是材料的技術?！?/p>

“科技與藝術結合的創(chuàng)作已經進行了六七十年，過去一度被稱為新媒體藝術，到了一定時間，發(fā)現強調這個新字沒有太大意義，過去的新媒體很快變成了舊媒體。像奧地利Ars Electronica電子藝術中心過去40年來所匯整和記錄的，就是科技與藝術融合創(chuàng)作的當代藝術發(fā)展史。”姚大鈞進一步解釋說。

過去幾年里，真鍋大度一直追求的是讓人們無法確定現實和虛擬之間的界限，盡管他的作品不斷獲得公眾認可。最近，他開始想再次回到當初的藝術根源。早在2008年，他有一件上傳到YouTube的實驗作品《對臉部的電刺激》，他將醫(yī)用電極貼在自己的臉上，用電刺激面部肌肉，允許別人通過傳感器和電流刺激來控制他的面部表情。今年，他在慶應義塾大學舉辦的研習班上，使用了可掃描大腦的功能性磁共振成像醫(yī)療設備，掃描和收集圖像來制作作品。

他還在進行一個可能被稱為“最終游擊隊藝術作品”的實驗：“我很高興地說，我們終于開始嘗試一個我一直感興趣的概念：讓電通過我的大腦。在醫(yī)生的幫助下，我希望使用經顱磁刺激（TMS）來阻止大腦皮層語言中心的活動，觀察它對言語會產生什么樣的影響。某種程度上，我還想嘗試將電子微芯片安裝在我的大腦中。”這時候，他的臉上終于流露出一絲興奮的表情。

天體頻率/Celestial Frequencies，2017年

“《天體頻率》是一件新數據驅動的視聽作品，為英國柴郡焦德雷班克天文臺（Jodrell Bank Observatory）標志性的洛弗爾望遠鏡創(chuàng)作的。像所有人一樣，我對有關宇宙的數據非常感興趣，在焦德雷班克與天體物理學研究人員一起工作期間，我們討論了如何實時接收脈沖星數據，如何轉換從望遠鏡獲得的觀測數據，以及如何以吸引人的方式使用大量現存數據等。

洛弗爾望遠鏡史詩般的結構為我們提供了獨特的畫布，碟形天線指向太空，在地球轉動時接收無線電信號。除了現場采集的實時外太空數據，我們還用到過去從更遠望遠鏡收集的數據，包括普朗克（Planck）太空船的微波觀測數據，它們被轉換為聲景和視覺表現形式，投射到望遠鏡上?！?h3>感知無形無聲的電磁波

Sensing Streams–invisible，inaudible，2015年

“近些年來，坂本龍一把從環(huán)境中提取數據的傾聽過程作為他的主要關注點，《感知電磁波》是我們的第一個合作作品，試圖收集從手機等電子設備發(fā)出的電磁波，并讓它們變得可視化，它的概念源于我們渴望看到實際的生活環(huán)境。

我們在公園安裝了一個7.2米×3.9米的高分辨率顯示器，用于可視化和可聽見的80MHz～5.2GHz之間的電磁波，設置在現場不同位置的天線實時捕捉著手機、Wi-Fi、數字地面廣播和FM收音機的信號。當觀眾在屏幕前方轉動界面來改變頻率時，可以在屏幕上看見不同的電磁波。如果在現場使用手機，聲音和圖像也隨之發(fā)生改變，反映出周圍空間變化的電磁。

在使用無人機等無線技術處理藝術作品時，我們得到了《感知電磁波》的靈感。大量的電磁波正在我們身邊飛舞，已經成為日常生活中的重要基礎設施。它們是當代技術中不可或缺的一部分，尤其在移動技術中。雖然人的感官無法察覺到電磁波的存在，但人們在無意識中嚴重地依賴著它們?！?h3>邊界/Border，2015年

“《邊界》是使用頭戴式顯示器的舞蹈表演，它同時是AR和VR的作品，在真實世界和虛擬世界之間來回移動。我選擇這個名字，是想混淆觀眾與舞臺之間以及真實與虛擬之間的界限。

一開始，我只是出于創(chuàng)建一種AR設備體驗的好奇心，從而避免VR中固有的抑制因素和不完整性。但是，如果觀眾自由地四處走動，表演就不可能成立，恰巧我們遇到了Whill電動輪椅公司的人，使用可以向任意方向移動的Omniwheel，我們就能夠自由地改變位置，也能遠程控制舞臺設置。

觀眾戴著顯示器，坐在電腦控制的輪椅里，因此他們對作品的體驗完全由系統控制。這種體驗不僅包括圖像和聲音，還包括地板的震動、香水的氣味、被舞者觸摸等等，觀眾與表演者、現實與虛擬世界之間的界限變得模糊。在這件作品的制作過程中，概念始終是第一位的。當然你可以產生很多分支想法，采用一些想要使用的技術，但是概念必須保持不變，所有的創(chuàng)作動機都來自于此。”