朱洪萱 韓帆

摘要：傳播體驗(yàn)的逐步升級(jí)讓大眾對(duì)媒體藝術(shù)的審美水平顯著提高。TouchDesigner（視覺(jué)設(shè)計(jì)工具）的出現(xiàn)迎合了目前大眾市場(chǎng)的需求，它的高互通性、高集成性等優(yōu)勢(shì)讓其成為目前最受歡迎的多媒體藝術(shù)編程創(chuàng)作工具之一。運(yùn)用TouchDesigner生成互動(dòng)裝置，給予了互動(dòng)裝置藝術(shù)更多的創(chuàng)新形式與發(fā)展空間，有利于傳播新型交互式編程技術(shù)，讓我國(guó)在數(shù)字媒體與交互式編程設(shè)計(jì)領(lǐng)域的國(guó)際競(jìng)爭(zhēng)力得到顯著提升。本文通過(guò)分析TouchDesigner生成的互動(dòng)裝置案例，探討互動(dòng)技術(shù)的進(jìn)步為裝置藝術(shù)帶來(lái)的影響與意義。

關(guān)鍵詞：TouchDesigner;互動(dòng)裝置藝術(shù);創(chuàng)新應(yīng)用

中圖分類號(hào)：G206 文獻(xiàn)標(biāo)識(shí)碼：A 文章編號(hào)：1004-9436（2021）15-000-02

互動(dòng)裝置藝術(shù)在數(shù)字媒體藝術(shù)范疇內(nèi)，順應(yīng)了現(xiàn)代數(shù)字媒體藝術(shù)的發(fā)展趨勢(shì)。早期的裝置藝術(shù)在空間、材料、體驗(yàn)感、受眾群體、創(chuàng)作者等多方面受限，而將互動(dòng)性融入裝置藝術(shù)中，在拉近觀眾與作品距離的同時(shí)，也讓作品本身在藝術(shù)與情感的表達(dá)上發(fā)揮得淋漓盡致，藝術(shù)從原來(lái)的單向信息傳遞轉(zhuǎn)變?yōu)橛^眾與藝術(shù)家之間的雙向信息傳遞。互動(dòng)裝置藝術(shù)的出現(xiàn)，突破了傳統(tǒng)藝術(shù)的靜態(tài)美學(xué)，觀眾可以親身體驗(yàn)與觸摸作品，無(wú)論是從視覺(jué)上、體感上，還是情感上，都為人們帶來(lái)了全新的體驗(yàn)[1]。而科技的疾速發(fā)展和大眾審美水平的大幅提高，使互動(dòng)裝置藝術(shù)的實(shí)現(xiàn)方式成為我們需要探討的重要話題。

1 互動(dòng)裝置藝術(shù)與TouchDesigner（視覺(jué)設(shè)計(jì)工具）

互動(dòng)裝置藝術(shù)是跨界融合多媒體等現(xiàn)代技術(shù)的藝術(shù)表現(xiàn)形式，突破了傳統(tǒng)藝術(shù)的單一形式，結(jié)合生物學(xué)、光學(xué)、物理學(xué)、聲學(xué)、心理學(xué)、信息傳播學(xué)、美學(xué)等多門學(xué)科，并涵蓋計(jì)算機(jī)編程和動(dòng)畫制作等[2]。同時(shí)為加強(qiáng)作品與觀者的互動(dòng)，還涉及一些感應(yīng)系統(tǒng)和輸出設(shè)備等。其中相關(guān)硬件設(shè)備及數(shù)字媒介材料不僅是創(chuàng)作的媒介材料，也是創(chuàng)作和傳播的工具。通過(guò)數(shù)字媒介和數(shù)字技術(shù)的介入，互動(dòng)裝置藝術(shù)的交互性更強(qiáng)，其呈現(xiàn)方式也更多樣化。

TouchDesigner的誕生為互動(dòng)裝置藝術(shù)提供了更加高效、便利的創(chuàng)作平臺(tái)，它是由加拿大Derivative（衍生物）公司在2001年開(kāi)始打造的一款節(jié)點(diǎn)式可視化創(chuàng)作軟件。不同于傳統(tǒng)的復(fù)雜編程工具，TouchDesigner提供了一種利用可視化節(jié)點(diǎn)作為制作手段的全新創(chuàng)作方式，用戶通過(guò)COMP（Components，容器元件）、TOP（Texture Operators，圖像元件）、CHOP（Channel Operators，通道元件）、SOP（Surface Operators，形狀元件）、DAT（Data Operators，文本元件）、MAT（Material Operators，材質(zhì)元件）六種基本功能元件進(jìn)行創(chuàng)作。整個(gè)編程過(guò)程中，軟件將代碼的結(jié)構(gòu)和函數(shù)變成無(wú)數(shù)個(gè)模塊，通過(guò)連線的方式任意拖動(dòng)控制器組合動(dòng)作就能達(dá)到理想的創(chuàng)作效果[3]。創(chuàng)作者和設(shè)計(jì)師們無(wú)須擔(dān)心底層的編程開(kāi)發(fā)，可以把更多的精力投入將不同的媒介裝置整合起來(lái)創(chuàng)造更有想象力的跨領(lǐng)域新媒體作品中。

2 TouchDesigner生成的互動(dòng)裝置藝術(shù)

2.1 TouchDesigner技術(shù)分析模型

2.1.1 特點(diǎn)

作為計(jì)算機(jī)生成藝術(shù)的實(shí)現(xiàn)工具，TouchDesigner的隨機(jī)性是其最主要的特點(diǎn)之一，相同的程序并不能出現(xiàn)同樣的效果，觀眾包括作者都無(wú)法預(yù)測(cè)作品的最終效果，這賦予了創(chuàng)作本身無(wú)盡的可能。除此之外，TouchDesigner的高互通性、高集成性、實(shí)時(shí)性、數(shù)據(jù)可視化等特點(diǎn)讓越來(lái)越多的藝術(shù)家和設(shè)計(jì)師摒棄傳統(tǒng)的制式化制作工具，轉(zhuǎn)而利用TouchDesigner制作藝術(shù)作品、商業(yè)項(xiàng)目等。

2.1.2 功能

利用Python（計(jì)算機(jī)編程語(yǔ)言）作為內(nèi)嵌編程語(yǔ)言，與AI（Artificial Intelligence，人工智能）的結(jié)合讓人們對(duì)TouchDesigner創(chuàng)作的當(dāng)下最熱門的人工智能有了更多的想象。TouchDesigner的實(shí)時(shí)控制界面功能讓它可運(yùn)用在各個(gè)大型的商業(yè)項(xiàng)目和展演現(xiàn)場(chǎng)，行業(yè)內(nèi)高級(jí)別的穩(wěn)定性讓它被各個(gè)世界知名工作室和團(tuán)隊(duì)采用。TouchDesigner軟件的內(nèi)置包括Kinect TOP（3D體感攝影機(jī)圖像元件）、Kinect Azure TOP（空間計(jì)算開(kāi)發(fā)人員工具包圖像元件）、RealSense TOP（實(shí)感計(jì)算圖像元件）等硬件讀取元件，這讓它能夠與各種傳感器設(shè)備相結(jié)合，達(dá)到人機(jī)交互的效果。除了直接讀取外設(shè)數(shù)據(jù)進(jìn)行通信外，豐富的協(xié)議接口也是讓TouchDesigner變得無(wú)所不能的一個(gè)重要原因，它可以根據(jù)不同硬件設(shè)施、超文本傳輸協(xié)議、全球廣域網(wǎng)系統(tǒng)以及軟件匹配操作選項(xiàng)，集成各種環(huán)境。

2.1.3 應(yīng)用領(lǐng)域

面對(duì)目前變化多端的市場(chǎng)環(huán)境，TouchDesigner敏捷的部署及架構(gòu)方式讓它擁有極強(qiáng)的適應(yīng)能力，特別是在數(shù)據(jù)處理上能夠滿足現(xiàn)代數(shù)字媒體藝術(shù)作品種類繁多的需求，越來(lái)越多的設(shè)計(jì)師及藝術(shù)家運(yùn)用TouchDesigner完成自己的項(xiàng)目，在交互式媒體系統(tǒng)、建筑投影、現(xiàn)場(chǎng)視覺(jué)及音樂(lè)表演、虛擬現(xiàn)實(shí)、機(jī)械硬件控制等多個(gè)領(lǐng)域都能看見(jiàn)它的身影。

2.1.4 感知體驗(yàn)

應(yīng)用TouchDesigner創(chuàng)作互動(dòng)裝置藝術(shù)，在聽(tīng)覺(jué)、視覺(jué)、味覺(jué)、觸覺(jué)、嗅覺(jué)五個(gè)方面充分調(diào)動(dòng)觀眾獲取信息的感知體驗(yàn)，觀眾與作品之間的互動(dòng)達(dá)到了最佳效果，充分展現(xiàn)了觀眾與作者之間的雙向信息傳遞與交流。

TouchDesigner技術(shù)分析模型見(jiàn)下表，它分析與研究了TouchDesigner的特點(diǎn)與功能，以及目前市場(chǎng)上利用此軟件實(shí)現(xiàn)的專業(yè)領(lǐng)域，為利用TouchDesigner設(shè)計(jì)藝術(shù)作品提供參考。

2.2 應(yīng)用TouchDesigner生成互動(dòng)裝置藝術(shù)的優(yōu)勢(shì)與意義

互動(dòng)裝置分為建立數(shù)據(jù)庫(kù)、信號(hào)采集、信號(hào)處理、成像處理以及其他輔助設(shè)備，而信號(hào)處理是互動(dòng)裝置設(shè)計(jì)中的關(guān)鍵節(jié)點(diǎn)，作品信號(hào)的輸出、輸入以及轉(zhuǎn)換都需要編程來(lái)實(shí)現(xiàn)，編程軟件是實(shí)現(xiàn)互動(dòng)裝置作品的必要手段[4]。相較于運(yùn)用AS3（ActionScript 3.0，面向?qū)ο缶幊陶Z(yǔ)言）、C++（計(jì)算機(jī)編程語(yǔ)言）、Processing（圖形設(shè)計(jì)語(yǔ)言）等編程語(yǔ)言創(chuàng)作互動(dòng)裝置藝術(shù)，TouchDesigner的可視化編程環(huán)境讓設(shè)計(jì)師們無(wú)須傳統(tǒng)的文本式代碼，高集成化的元件讓編程零基礎(chǔ)的用戶都能夠輕松使用[5]，在搭建好的初始模塊上延展出豐富的視覺(jué)創(chuàng)意效果。無(wú)論是實(shí)驗(yàn)室級(jí)別的Arduino（開(kāi)源電子原型平臺(tái)）、Kinect（3D體感攝影機(jī)）、Leap Motion（體感控制器），還是專業(yè)級(jí)別的舞臺(tái)燈光、雷達(dá)追蹤、人體捕捉系統(tǒng)，TouchDesigner強(qiáng)大的數(shù)據(jù)接口都能和它們無(wú)縫對(duì)接。清晰的界面、便捷的操作以及強(qiáng)大的API（Application Programming Interface，應(yīng)用程序編程接口）接口讓TouchDesigner促使新媒體藝術(shù)工作者創(chuàng)作更多優(yōu)秀的互動(dòng)裝置藝術(shù)作品。

3 TouchDesigner互動(dòng)裝置藝術(shù)的創(chuàng)新應(yīng)用

3.1 TouchDesigner在互動(dòng)燈光裝置中的創(chuàng)新應(yīng)用

隨著經(jīng)濟(jì)實(shí)力與文化建設(shè)的飛速進(jìn)步，人們對(duì)于藝術(shù)的審美體驗(yàn)要求不斷提升，互動(dòng)燈光裝置藝術(shù)在這樣的背景下走進(jìn)大眾視野?；?dòng)燈光裝置藝術(shù)利用光的語(yǔ)言進(jìn)行創(chuàng)作，與基于純視覺(jué)感受的傳統(tǒng)藝術(shù)形式不同，互動(dòng)燈光裝置藝術(shù)以新型交互技術(shù)為媒介，利用聲、光、電等元素給予觀者視覺(jué)與聽(tīng)覺(jué)的雙重感知體驗(yàn)[6]，讓作品與觀者間產(chǎn)生情感共鳴，增強(qiáng)大眾參與性，同時(shí)賦予藝術(shù)作品更高的社會(huì)價(jià)值。

WhiteVoid（白色空隙）是一家來(lái)自柏林的著名互動(dòng)燈光雕塑設(shè)計(jì)工作室，其Kinetic lighting（動(dòng)態(tài)照明）項(xiàng)目遍及全世界，是使用TouchDesigner的先驅(qū)團(tuán)隊(duì)。同時(shí)其交互裝置與產(chǎn)品被廣泛運(yùn)用于博物館、展覽會(huì)、展銷會(huì)及音樂(lè)會(huì)中?！禨KALAR（斯克拉）》是由WhiteVoid（白色空隙）工作室的創(chuàng)作者Christopher Bauder（克里斯托弗·波特）和Kangding Ray（康定·雷）結(jié)合TouchDesigner制作設(shè)計(jì)的大型聲視互動(dòng)燈光裝置，探索了聲音和光線對(duì)人類情緒的影響。Kraftwerk Berlin（柏林電廠）的漆黑工業(yè)空間內(nèi)，大量動(dòng)力鏡面裝置運(yùn)用TouchDesigner進(jìn)行現(xiàn)場(chǎng)實(shí)時(shí)控制，通過(guò)對(duì)光的折射形成了絢麗奪目的迷人光線，結(jié)合多維聲音的試聽(tīng)敘述，呈現(xiàn)出移動(dòng)的燈光和復(fù)雜的多聲道音響系統(tǒng)。TouchDesigner的高穩(wěn)定性讓它可以在現(xiàn)場(chǎng)對(duì)燈光、聲效進(jìn)行實(shí)時(shí)控制，當(dāng)觀眾身處裝置中，在視覺(jué)、聽(tīng)覺(jué)與觸覺(jué)的多重感官刺激下激發(fā)多樣的情緒，觀眾在融入作品的同時(shí)也能夠賦予作品本身更深層次的含義。

3.2 TouchDesigner在互動(dòng)影像裝置中的創(chuàng)新應(yīng)用

相較于傳統(tǒng)影像裝置，互動(dòng)性是互動(dòng)影像裝置區(qū)別于兩者的一大特點(diǎn)。將互動(dòng)性融入影像裝置藝術(shù)，不僅完善了傳統(tǒng)影像裝置技術(shù)層面的缺陷，也在一定程度上改變了觀者與作品間的交流與表達(dá)方式[7]，觀者在欣賞作品的同時(shí)與作品互動(dòng)，從而在情感上加深對(duì)藝術(shù)作品的認(rèn)同?；?dòng)影像裝置在創(chuàng)作過(guò)程中需要運(yùn)用特定的傳感器來(lái)進(jìn)行信息采集，并及時(shí)傳輸?shù)綄?duì)應(yīng)設(shè)備。通過(guò)現(xiàn)有的電腦語(yǔ)言鏈接程序來(lái)判斷傳感器傳輸?shù)碾娦盘?hào)，并完成數(shù)據(jù)的處理，接著用指令的形式將其傳輸?shù)讲シ努F(xiàn)實(shí)終端，實(shí)時(shí)反饋特定的影像或圖像[8]。而TouchDesigner的高互通性為互動(dòng)影像裝置的創(chuàng)作提供了更多的便利與藝術(shù)可能性，其出色的硬件交互性能讓其區(qū)別于其他類似的交互軟件，在創(chuàng)作互動(dòng)影像裝置時(shí)可以直接利用TouchDesigner與傳感器相連接，并在TouchDesigner平臺(tái)編寫程序完成數(shù)據(jù)處理，從而反饋影像畫面。同時(shí)，可視化的節(jié)點(diǎn)式創(chuàng)作形式讓更多在編程方面零基礎(chǔ)的藝術(shù)家及設(shè)計(jì)師依然可以運(yùn)用TouchDesigner設(shè)計(jì)出令人驚艷的互動(dòng)影像裝置作品。

VolvoxLabs（團(tuán)藻實(shí)驗(yàn)室）設(shè)計(jì)團(tuán)隊(duì)來(lái)自紐約，他們?yōu)槲④浰囆g(shù)長(zhǎng)廊影劇院設(shè)計(jì)制作的互動(dòng)屏幕墻就是由TouchDesigner生成，設(shè)計(jì)者在墻上安裝好可以移動(dòng)的木板，并在木板后面固定攝像頭與燈光裝置，通過(guò)TouchDesigner進(jìn)行相應(yīng)的數(shù)據(jù)處理，并結(jié)合攝像頭實(shí)時(shí)捕捉人物動(dòng)態(tài)，從而控制燈光的明暗與走向，每個(gè)觀眾通過(guò)自身運(yùn)動(dòng)的形態(tài)對(duì)屏幕上的影像進(jìn)行控制，從而創(chuàng)造出獨(dú)特的感官體驗(yàn)。

3.3 TouchDesigner在互動(dòng)視聽(tīng)裝置中的創(chuàng)新應(yīng)用

互動(dòng)視聽(tīng)裝置是將聲音與畫面相結(jié)合，通過(guò)人機(jī)互動(dòng)而產(chǎn)生的藝術(shù)表現(xiàn)形式。聲音是現(xiàn)代社會(huì)的重要媒介傳播方式，是增強(qiáng)人們感知體驗(yàn)的重要部分?；?dòng)藝術(shù)作品在有形或無(wú)形的裝置空間實(shí)體內(nèi)，與聲音碰撞產(chǎn)生特定的藝術(shù)形態(tài)[9]。在設(shè)計(jì)互動(dòng)視聽(tīng)裝置作品時(shí)，作品與觀者互動(dòng)時(shí)產(chǎn)生的生理、心理及精神感受是創(chuàng)作的重要組成部分，通過(guò)聽(tīng)覺(jué)和視覺(jué)的雙重感官刺激，能夠引導(dǎo)觀者更為充分地理解作品的深意和內(nèi)涵，讓作品與觀者達(dá)到強(qiáng)烈的情感共鳴。

鄒麓陽(yáng)的互動(dòng)視聽(tīng)裝置《聲子記憶》由TouchDesigner生成，體驗(yàn)者進(jìn)入一個(gè)密閉空間，整個(gè)空間通過(guò)投影裝置將視覺(jué)畫面投射到空間中的每個(gè)平面上，運(yùn)用幾何形體將畫面營(yíng)造出一種無(wú)邊界感，通過(guò)沉浸式視覺(jué)畫面以及音頻與觀眾互動(dòng)，挑戰(zhàn)實(shí)際空間和感知空間的邊界，從而開(kāi)放一個(gè)虛擬的記憶時(shí)間。作品只有在人的參與之下才會(huì)生成它獨(dú)特的意義，“聲子”是最小的聲粒子，而“聲子記憶”則是歌頌沉靜與緩慢的一個(gè)視聽(tīng)景觀。相較于一滑動(dòng)就會(huì)被忘記的具有消耗性的視聽(tīng)信息，《聲子記憶》互動(dòng)視聽(tīng)裝置是通過(guò)參與者用自己的方式去體驗(yàn)與感受這個(gè)環(huán)境。

4 結(jié)語(yǔ)

TouchDesigner的應(yīng)用迎合了互動(dòng)裝置藝術(shù)的傳播需求，在TouchDesigner平臺(tái)的支持下，互動(dòng)裝置藝術(shù)的展示效果及互動(dòng)體驗(yàn)都得到了提高。TouchDesigner強(qiáng)大的功能需要被更多的設(shè)計(jì)師及藝術(shù)家熟知并掌握，它將作為未來(lái)使藝術(shù)和技術(shù)實(shí)現(xiàn)跨界融合的紐帶之一，引領(lǐng)藝術(shù)和各學(xué)科交叉發(fā)展新趨勢(shì)，并適用于其他新媒體領(lǐng)域，產(chǎn)生更高的社會(huì)價(jià)值。如今，TouchDesigner已經(jīng)開(kāi)發(fā)到了第三代產(chǎn)品，眾多的新媒體團(tuán)隊(duì)和藝術(shù)工作者在國(guó)際舞臺(tái)上創(chuàng)作出了不計(jì)其數(shù)的經(jīng)典作品。隨著國(guó)內(nèi)技術(shù)社區(qū)、論壇以及各類相關(guān)活動(dòng)的興起，TouchDesigner的國(guó)內(nèi)用戶量呈爆發(fā)式增長(zhǎng)，其強(qiáng)大的生命力和廣闊的發(fā)展前景為國(guó)家的經(jīng)濟(jì)、文化建設(shè)提供了強(qiáng)有力的支持，未來(lái)TouchDesigner將會(huì)為我國(guó)的新媒體領(lǐng)域創(chuàng)造更多的可能性。

參考文獻(xiàn)：

[1] 孫藝桐，史立新.裝置藝術(shù)創(chuàng)作中的交互體驗(yàn)設(shè)計(jì)應(yīng)用研究[J].藝術(shù)教育，2020（02）：215-218.

[2] 達(dá)妮莎，鄭海期.眼動(dòng)技術(shù)在互動(dòng)裝置藝術(shù)中的應(yīng)用[J].藝術(shù)與設(shè)計(jì)（理論），2020，2（08）：108-110.

[3] 蘇鏡如. TouchDesigner在新媒體藝術(shù)中的運(yùn)用[J].新媒體研究，2020，6（14）：9-10.

[4] 劉桂華，張梅芳，王盈舒.多媒體互動(dòng)裝置作品特征及其影響分析——以米蘭世博會(huì)日本館《DIVERSITY》為例[J].設(shè)計(jì)，2018（22）：130-132.

[5] 郭開(kāi)鶴.計(jì)算機(jī)生成藝術(shù)在圖形世界中的意義[J].美術(shù)觀察，2012（12）：124-129.

[6] 張澤方.試論可視化編程在數(shù)字媒體藝術(shù)中的運(yùn)用——以TouchDesigner為例[J].時(shí)代報(bào)告，2019（06）：140-141.

[7] 方芳.互動(dòng)裝置藝術(shù)在數(shù)字展示中的特性研究[J].美術(shù)大觀，2017（07）：136-137.

[8] 亓國(guó)梁.新媒體語(yǔ)境下互動(dòng)影像裝置的藝術(shù)特征與類型辨析[J].視聽(tīng)，2019（12）：82-83.

[9] 陳思洋.淺析在互動(dòng)裝置藝術(shù)中聲音裝置交互的情感體驗(yàn)[J].西部皮革，2019，41（12）：155-156.

作者簡(jiǎn)介：朱洪萱（1998—），女，江蘇鹽城人，碩士在讀，研究方向：數(shù)字媒體藝術(shù)。

韓帆（1962—），女，江蘇南京人，博士，教授，系本文通訊作者，研究方向：計(jì)算機(jī)圖形學(xué)。