基于TouchDesigner的互動(dòng)裝置藝術(shù)應(yīng)用研究

1、基于TouchDesigner的互動(dòng)裝置藝術(shù)應(yīng)用研究基于TouchDesigner的互動(dòng)裝置藝術(shù)應(yīng)用討論9436202115-000-02 互動(dòng)裝置藝術(shù)在數(shù)字媒體藝術(shù)范疇內(nèi)，順應(yīng)了現(xiàn)代數(shù)字媒體藝術(shù)的進(jìn)展趨勢(shì)。早期的裝置藝術(shù)在空間、材料、體驗(yàn)感、受眾群體、創(chuàng)等多方面受限，而將互動(dòng)性融入裝置藝術(shù)中，在拉近觀眾與作品距離的同時(shí)，也讓作品本身在藝術(shù)與情感的表達(dá)上發(fā)揮得淋漓盡致，藝術(shù)從原來(lái)的單向信息傳遞轉(zhuǎn)變?yōu)橛^眾與藝術(shù)家之間的雙向信息傳遞?；?dòng)裝置藝術(shù)的出現(xiàn)，突破了傳統(tǒng)藝術(shù)的靜態(tài)美學(xué)，觀眾可以親身體驗(yàn)與觸摸作品，無(wú)論是從視覺(jué)上、體感上，還是情感上，都為人們帶來(lái)了全新的體驗(yàn)1。而科技的疾速進(jìn)展和群眾審美水

2、平的大幅提高，使互動(dòng)裝置藝術(shù)的實(shí)現(xiàn)方式成為我們需要探討的重要話題。 1 互動(dòng)裝置藝術(shù)與TouchDesigner視覺(jué)設(shè)計(jì)工具 互動(dòng)裝置藝術(shù)是跨界融合多媒體等現(xiàn)代技術(shù)的藝術(shù)表現(xiàn)形式，突破了傳統(tǒng)藝術(shù)的單一形式，結(jié)合生物學(xué)、光學(xué)、物理學(xué)、聲學(xué)、心理學(xué)、信息傳播學(xué)、美學(xué)等多門學(xué)科，并涵蓋計(jì)算機(jī)編程和動(dòng)畫制作等2。同時(shí)為加強(qiáng)作品與觀者的互動(dòng)，還涉及一些感應(yīng)系統(tǒng)和輸出設(shè)備等。其中相關(guān)硬件設(shè)備及數(shù)字媒介材料不僅是創(chuàng)作的媒介材料，也是創(chuàng)作和傳播的工具。通過(guò)數(shù)字媒介和數(shù)字技術(shù)的介入，互動(dòng)裝置藝術(shù)的交互性更強(qiáng)，其呈現(xiàn)方式也更多樣化。 TouchDesigner的誕生為互動(dòng)裝置藝術(shù)提供了更加高效、便利的創(chuàng)作平臺(tái)，它

3、是由加拿大Derivative衍生物公司在2021年開始打造的一款節(jié)點(diǎn)式可視化創(chuàng)作軟件。不同于傳統(tǒng)的冗雜編程工具，TouchDesigner提供了一種利用可視化節(jié)點(diǎn)作為制作手段的全新創(chuàng)作方式，用戶通過(guò)COMPComponents，容器元件、TOPTexture Operators，圖像元件、CHOPChannel Operators，通道元件、SOPSurface Operators，樣子元件、DATData Operators，文本元件、MATMaterial Operators，材質(zhì)元件六種基本功能元件進(jìn)行創(chuàng)作。整個(gè)編程過(guò)程中，軟件將代碼的結(jié)構(gòu)和函數(shù)變成很多個(gè)模塊，通過(guò)連線的方式任意拖動(dòng)操

4、縱器組合動(dòng)作就能到達(dá)理想的創(chuàng)作效果3。創(chuàng)和設(shè)計(jì)師們無(wú)須擔(dān)憂底層的編程開發(fā)，可以把更多的精力投入將不同的媒介裝置整合起來(lái)制造更有想象力的跨領(lǐng)域新媒體作品中。 2 TouchDesigner生成的互動(dòng)裝置藝術(shù) 2.1 TouchDesigner技術(shù)分析模型 2.1.1 特點(diǎn) 作為計(jì)算機(jī)生成藝術(shù)的實(shí)現(xiàn)工具，TouchDesigner的隨機(jī)性是其最主要的特點(diǎn)之一，相同的程序并不能出現(xiàn)同樣的效果，觀眾包括都無(wú)法預(yù)報(bào)作品的最終效果，這給予了創(chuàng)作本身無(wú)盡的可能。除此之外，TouchDesigner的高互通性、高集成性、實(shí)時(shí)性、數(shù)據(jù)可視化等特點(diǎn)讓越來(lái)越多的藝術(shù)家和設(shè)計(jì)師摒棄傳統(tǒng)的制式化制作工具，轉(zhuǎn)而利用Tou

5、chDesigner制作藝術(shù)作品、商業(yè)項(xiàng)目等。 2.1.2 功能 利用Python計(jì)算機(jī)編程語(yǔ)言作為內(nèi)嵌編程語(yǔ)言，與AIArtificial Intelligence，人工智能的結(jié)合讓人們對(duì)TouchDesigner創(chuàng)作的當(dāng)下最熱門的人工智能有了更多的想象。TouchDesigner的實(shí)時(shí)操縱界面功能讓它可運(yùn)用在各個(gè)大型的商業(yè)項(xiàng)目和展演現(xiàn)場(chǎng)，行業(yè)內(nèi)高級(jí)別的穩(wěn)定性讓它被各個(gè)世界知名工作室和團(tuán)隊(duì)接受。TouchDesigner軟件的內(nèi)置包括Kinect TOP3D體感攝影機(jī)圖像元件、Kinect Azure TOP空間計(jì)算開發(fā)人員工具包圖像元件、RealSense TOP實(shí)感計(jì)算圖像元件等硬件讀取

6、元件，這讓它能夠與各種傳感器設(shè)備相結(jié)合，到達(dá)人機(jī)交互的效果。除了直接讀取外設(shè)數(shù)據(jù)進(jìn)行通信外，豐富的協(xié)議接口也是讓TouchDesigner變得無(wú)所不能的一個(gè)重要緣由，它可以依據(jù)不同硬件設(shè)施、超文本傳輸協(xié)議、全球廣域網(wǎng)系統(tǒng)以及軟件匹配操作選項(xiàng)，集成各種環(huán)境。 2.1.3 應(yīng)用領(lǐng)域 面對(duì)目前改變多端的市場(chǎng)環(huán)境，TouchDesigner靈敏的部署及架構(gòu)方式讓它擁有極強(qiáng)的適應(yīng)能力，特殊是在數(shù)據(jù)處理上能夠滿足現(xiàn)代數(shù)字媒體藝術(shù)作品種類繁多的需求，越來(lái)越多的設(shè)計(jì)師及藝術(shù)家運(yùn)用TouchDesigner完成自己的項(xiàng)目，在交互式媒體系統(tǒng)、建筑投影、現(xiàn)場(chǎng)視覺(jué)及音樂(lè)表演、虛擬現(xiàn)實(shí)、機(jī)械硬件操縱等多個(gè)領(lǐng)域都能觀察它

7、的身影。 2.1.4 感知體驗(yàn) 應(yīng)用TouchDesigner創(chuàng)作互動(dòng)裝置藝術(shù)，在聽(tīng)覺(jué)、視覺(jué)、味覺(jué)、觸覺(jué)、嗅覺(jué)五個(gè)方面充分調(diào)動(dòng)觀眾獵取信息的感知體驗(yàn)，觀眾與作品之間的互動(dòng)到達(dá)了最正確效果，充分呈現(xiàn)了觀眾與之間的雙向信息傳遞與溝通。 TouchDesigner技術(shù)分析模型見(jiàn)下表，它分析與討論了TouchDesigner的特點(diǎn)與功能，以及目前市場(chǎng)上利用此軟件實(shí)現(xiàn)的專業(yè)領(lǐng)域，為利用TouchDesigner設(shè)計(jì)藝術(shù)作品提供參考。 2.2 應(yīng)用TouchDesigner生成互動(dòng)裝置藝術(shù)的優(yōu)勢(shì)與意義 互動(dòng)裝置分為建立數(shù)據(jù)庫(kù)、信號(hào)采集、信號(hào)處理、成像處理以及其他幫助設(shè)備，而信號(hào)處理是互動(dòng)裝置設(shè)計(jì)中的關(guān)鍵節(jié)

8、點(diǎn)，作品信號(hào)的輸出、輸入以及轉(zhuǎn)換都需要編程來(lái)實(shí)現(xiàn)，編程軟件是實(shí)現(xiàn)互動(dòng)裝置作品的必要手段4。相較于運(yùn)用AS3ActionScript 3.0，面向?qū)ο缶幊陶Z(yǔ)言、C+計(jì)算機(jī)編程語(yǔ)言、Processing圖形設(shè)計(jì)語(yǔ)言等編程語(yǔ)言創(chuàng)作互動(dòng)裝置藝術(shù)，TouchDesigner的可視化編程環(huán)境讓設(shè)計(jì)師們無(wú)須傳統(tǒng)的文本式代碼，高集成化的元件讓編程零基礎(chǔ)的用戶都能夠輕松使用5，在搭建好的初始模塊上延展出豐富的視覺(jué)創(chuàng)意效果。無(wú)論是試驗(yàn)室級(jí)別的Arduino開源電子原型平臺(tái)、Kinect3D體感攝影機(jī)、Leap Motion體感操縱器，還是專業(yè)級(jí)別的舞臺(tái)燈光、雷達(dá)追蹤、人體捕捉系統(tǒng)，TouchDesigner強(qiáng)大的

9、數(shù)據(jù)接口都能和它們無(wú)縫對(duì)接。清晰的界面、便捷的操作以及強(qiáng)大的APIApplication Programming Interface，應(yīng)用程序編程接口接口讓TouchDesigner促使新媒體藝術(shù)工創(chuàng)作更多優(yōu)秀的互動(dòng)裝置藝術(shù)作品。 3 TouchDesigner互動(dòng)裝置藝術(shù)的創(chuàng)新應(yīng)用 3.1 TouchDesigner在互動(dòng)燈光裝置中的創(chuàng)新應(yīng)用 隨著經(jīng)濟(jì)實(shí)力與文化建設(shè)的飛速進(jìn)步，人們對(duì)于藝術(shù)的審美體驗(yàn)要求不斷提升，互動(dòng)燈光裝置藝術(shù)在這樣的背景下走進(jìn)群眾視野。互動(dòng)燈光裝置藝術(shù)利用光的語(yǔ)言進(jìn)行創(chuàng)作，與基于純視覺(jué)感受的傳統(tǒng)藝術(shù)形式不同，互動(dòng)燈光裝置藝術(shù)以新型交互技術(shù)為媒介，利用聲、光、電等元素給予觀

10、者視覺(jué)與聽(tīng)覺(jué)的雙重感知體驗(yàn)6，讓作品與觀者間產(chǎn)生情感共鳴，增添群眾參加性，同時(shí)給予藝術(shù)作品更高的社會(huì)價(jià)值。 WhiteVoid白色空隙是一家來(lái)自柏林的有名互動(dòng)燈光雕塑設(shè)計(jì)工作室，其Kinetic lighting動(dòng)態(tài)照明項(xiàng)目普及全世界，是使用TouchDesigner的先驅(qū)團(tuán)隊(duì)。同時(shí)其交互裝置與產(chǎn)品被廣泛運(yùn)用于博物館、展覽會(huì)、展銷會(huì)及音樂(lè)會(huì)中。SKALAR斯克拉是由WhiteVoid白色空隙工作室的創(chuàng)Christopher Bauder克里斯托弗·波特和Kangding Ray康定·雷結(jié)合TouchDesigner制作設(shè)計(jì)的大型聲視互動(dòng)燈光裝置，探究了聲音和光線對(duì)人類心情的

11、影響。Kraftwerk Berlin柏林電廠的漆黑工業(yè)空間內(nèi)，大量動(dòng)力鏡面裝置運(yùn)用TouchDesigner進(jìn)行現(xiàn)場(chǎng)實(shí)時(shí)操縱，通過(guò)對(duì)光的折射形成了絢麗奪目的迷人光線，結(jié)合多維聲音的試聽(tīng)表達(dá)，呈現(xiàn)出移動(dòng)的燈光和冗雜的多聲道音響系統(tǒng)。TouchDesigner的高穩(wěn)定性讓它可以在現(xiàn)場(chǎng)對(duì)燈光、聲效進(jìn)行實(shí)時(shí)操縱，當(dāng)觀眾身處裝置中，在視覺(jué)、聽(tīng)覺(jué)與觸覺(jué)的多重感官刺激下激發(fā)多樣的心情，觀眾在融入作品的同時(shí)也能夠給予作品本身更深層次的含義。 3.2 TouchDesigner在互動(dòng)影像裝置中的創(chuàng)新應(yīng)用 相較于傳統(tǒng)影像裝置，互動(dòng)性是互動(dòng)影像裝置區(qū)分于兩者的一大特點(diǎn)。將互動(dòng)性融入影像裝置藝術(shù)，不僅完善了傳統(tǒng)影像

12、裝置技術(shù)層面的缺陷，也在肯定程度上轉(zhuǎn)變了觀者與作品間的溝通與表達(dá)方式7，觀者在欣賞作品的同時(shí)與作品互動(dòng)，從而在情感上加深對(duì)藝術(shù)作品的認(rèn)同。互動(dòng)影像裝置在創(chuàng)作過(guò)程中需要運(yùn)用特定的傳感器來(lái)進(jìn)行信息采集，并準(zhǔn)時(shí)傳輸?shù)綄?duì)應(yīng)設(shè)備。通過(guò)現(xiàn)有的電腦語(yǔ)言鏈接程序來(lái)推斷傳感器傳輸?shù)碾娦盘?hào)，并完成數(shù)據(jù)的處理，接著用指令的形式將其傳輸?shù)讲シ努F(xiàn)實(shí)終端，實(shí)時(shí)反饋特定的影像或圖像8。而TouchDesigner的高互通性為互動(dòng)影像裝置的創(chuàng)作提供了更多的便利與藝術(shù)可能性，其杰出的硬件交互性能讓其區(qū)分于其他類似的交互軟件，在創(chuàng)作互動(dòng)影像裝置時(shí)可以直接利用TouchDesigner與傳感器相連接，并在TouchDesigner

13、平臺(tái)編寫程序完成數(shù)據(jù)處理，從而反饋影像畫面。同時(shí)，可視化的節(jié)點(diǎn)式創(chuàng)作形式讓更多在編程方面零基礎(chǔ)的藝術(shù)家及設(shè)計(jì)師照舊可以運(yùn)用TouchDesigner設(shè)計(jì)出令人驚艷的互動(dòng)影像裝置作品。 VolvoxLabs團(tuán)藻試驗(yàn)室設(shè)計(jì)團(tuán)隊(duì)來(lái)自紐約，他們?yōu)槲④浰囆g(shù)長(zhǎng)廊影劇院設(shè)計(jì)制作的互動(dòng)屏幕墻就是由TouchDesigner生成，設(shè)計(jì)者在墻上安裝好可以移動(dòng)的木板，并在木板后面固定攝像頭與燈光裝置，通過(guò)TouchDesigner進(jìn)行相應(yīng)的數(shù)據(jù)處理，并結(jié)合攝像頭實(shí)時(shí)捕捉人物動(dòng)態(tài)，從而操縱燈光的明暗與走向，每個(gè)觀眾通過(guò)自身運(yùn)動(dòng)的形態(tài)對(duì)屏幕上的影像進(jìn)行操縱，從而制造出獨(dú)特的感官體驗(yàn)。 3.3 TouchDesigner

14、在互動(dòng)視聽(tīng)裝置中的創(chuàng)新應(yīng)用 互動(dòng)視聽(tīng)裝置是將聲音與畫面相結(jié)合，通過(guò)人機(jī)互動(dòng)而產(chǎn)生的藝術(shù)表現(xiàn)形式。聲音是現(xiàn)代社會(huì)的重要媒介傳播方式，是增添人們感知體驗(yàn)的重要部分。互動(dòng)藝術(shù)作品在有形或無(wú)形的裝置空間實(shí)體內(nèi)，與聲音碰撞產(chǎn)生特定的藝術(shù)形態(tài)9。在設(shè)計(jì)互動(dòng)視聽(tīng)裝置作品時(shí)，作品與觀者互動(dòng)時(shí)產(chǎn)生的生理、心理及精神感受是創(chuàng)作的重要組成部分，通過(guò)聽(tīng)覺(jué)和視覺(jué)的雙重感官刺激，能夠引導(dǎo)觀者更為充分地理解作品的深意和內(nèi)涵，讓作品與觀者到達(dá)劇烈的情感共鳴。 鄒麓陽(yáng)的互動(dòng)視聽(tīng)裝置聲子記憶由TouchDesigner生成，體驗(yàn)者進(jìn)入一個(gè)密閉空間，整個(gè)空間通過(guò)投影裝置將視覺(jué)畫面投射到空間中的每個(gè)平面上，運(yùn)用幾何形體將畫面營(yíng)造出一種無(wú)邊界感，通過(guò)沉醉式視覺(jué)畫面以及音頻與觀眾互動(dòng)，挑戰(zhàn)實(shí)際空間和感知空間的邊界，從而開放一個(gè)虛擬的記憶時(shí)間。作品只有在人的參加之下才會(huì)生成它獨(dú)特的意義，“聲子是最小的聲粒子，而“聲子記憶則是歌頌沉靜與緩慢的一個(gè)視聽(tīng)景觀。相較于一滑動(dòng)就會(huì)被遺忘的具有消耗性的視聽(tīng)信息，聲子記憶互動(dòng)視聽(tīng)裝置是通過(guò)參加者用自己的方式去體驗(yàn)與感受這個(gè)環(huán)境。 4 結(jié)語(yǔ) TouchDesigner的應(yīng)用迎合了互動(dòng)裝置藝術(shù)的傳播需求，在TouchDesigner平臺(tái)的支持下，互動(dòng)裝置藝術(shù)的展示效果及互動(dòng)體驗(yàn)都得到了提高。TouchDesigner強(qiáng)大的功能需要被更多的設(shè)計(jì)師及藝術(shù)家熟知并把握，它將作為將來(lái)使藝術(shù)和技術(shù)