谷曉

（遼寧對(duì)外經(jīng)貿(mào)學(xué)院，遼寧 大連 116052）

通感體驗(yàn)下的新媒體交互藝術(shù)

谷曉

（遼寧對(duì)外經(jīng)貿(mào)學(xué)院，遼寧 大連 116052）

藝術(shù)與現(xiàn)代科技的結(jié)合產(chǎn)生了新媒體交互藝術(shù)，它改變了傳統(tǒng)藝術(shù)線性敘事的方式，為觀眾提供了“參與其中”的沉浸式的通感體驗(yàn)，讓觀眾通過(guò)視覺(jué)、觸覺(jué)、聽(tīng)覺(jué)、味覺(jué)、嗅覺(jué)等全方位的、立體的“混感官”感知方式，參與到作品中，成為作品的一部分，繼而主動(dòng)地接受傳遞信息并完成藝術(shù)理念的交融。

交互；沉浸式；通感體驗(yàn)

一、交互藝術(shù)的“場(chǎng)”

“交互藝術(shù)”能夠理解為空間、人、設(shè)備、交互關(guān)系的藝術(shù)，交互藝術(shù)一頭連著藝術(shù)家和工程師，另一頭連著參與者，由此，發(fā)生在人—機(jī)器—界面之間的空間關(guān)系，產(chǎn)生了一種新的藝術(shù)邏輯，這種存在于藝術(shù)家和觀眾之間的關(guān)系是一種新的藝術(shù)形式，它以人機(jī)相互作用為基礎(chǔ)，通過(guò)多感官的感知方式和動(dòng)覺(jué)紐帶，鏈接藝術(shù)家和觀眾，讓觀眾參與到作品中，并且與作品和藝術(shù)家形成“場(chǎng)”的關(guān)系，通過(guò)交流，觀眾獲得愉悅和共鳴，而藝術(shù)家則引導(dǎo)觀眾更好地認(rèn)知所要傳達(dá)的信息并且做出反饋，交互藝術(shù)強(qiáng)調(diào)人和機(jī)器間的相互影響，強(qiáng)調(diào)觀眾的能動(dòng)性，它要求受眾能動(dòng)地參與到藝術(shù)中并通過(guò)交互使作品發(fā)生變化，從而產(chǎn)生實(shí)時(shí)的、可變的藝術(shù)效果，交互藝術(shù)的“場(chǎng)”融合了多重的感官體驗(yàn)，將傳統(tǒng)的二維平面轉(zhuǎn)變?yōu)橐粋€(gè)基于時(shí)空框架的多感官交互場(chǎng)，在這個(gè)“場(chǎng)”中，觀眾也會(huì)與環(huán)境產(chǎn)生互動(dòng)，調(diào)整環(huán)境，營(yíng)造出強(qiáng)烈的沉浸感。

二、沉浸式的通感體驗(yàn)

當(dāng)生活變得越來(lái)越“按鈕化”“點(diǎn)擊化”“觸摸化”之后，單純的通過(guò)點(diǎn)擊鼠標(biāo)和敲擊鍵盤(pán)進(jìn)行的交互已經(jīng)滿足不了用戶的需求，用戶希望有更加多元化的交互的體驗(yàn)，由此，催生出五感相通的沉浸式交互藝術(shù)，沉浸式交互藝術(shù)通過(guò)受眾參與來(lái)完成作品，讓受眾在觸碰作品時(shí)候有所觸動(dòng)，繼而完成物理——事理——情理這一情感逐漸升華的過(guò)程（感覺(jué)生成情感），沉浸式交互藝術(shù)以人與人之間、人與機(jī)器之間的情感雙向共存，通過(guò)用戶的體驗(yàn)參與到信息傳達(dá)的過(guò)程中，參與到完整作品的寓意過(guò)程中。早期電子讀物出版時(shí)，紙質(zhì)書(shū)籍被不加改動(dòng)地直接轉(zhuǎn)化為電子版書(shū)籍，并沒(méi)有注重交互設(shè)計(jì)中的感知覺(jué)體驗(yàn)設(shè)計(jì)，當(dāng)下用戶已經(jīng)不止有讀字和看圖的簡(jiǎn)單需求，而要強(qiáng)調(diào)與交互產(chǎn)品的融合度，在Ipad中閱讀電子讀物，應(yīng)用系統(tǒng)可以模擬書(shū)籍翻頁(yè)，甚至真實(shí)到讓書(shū)頁(yè)能夠跟著用戶猶豫的手指而前后翻動(dòng)；看到封底時(shí)會(huì)發(fā)生書(shū)頁(yè)反彈行為；模擬卷軸滾動(dòng)時(shí)的慣性動(dòng)作，觸感細(xì)膩；在觸碰同時(shí)搭配書(shū)頁(yè)翻動(dòng)的聲音，這種體驗(yàn)不僅是視覺(jué)、觸覺(jué)、聽(tīng)覺(jué)的體驗(yàn)，而是關(guān)注用戶感受，多感官的綜合體驗(yàn)。

設(shè)計(jì)，造物為謀事，有事之后才會(huì)有物，有物之后才會(huì)有情，設(shè)計(jì)的實(shí)質(zhì)是要研究人、事、物的聯(lián)系，是解決三者間的問(wèn)題，或解決三者問(wèn)題的這一過(guò)程。從電氣設(shè)備按鈕時(shí)代，到鍵盤(pán)鼠標(biāo)時(shí)代，成就了英特爾、微軟這樣的公司，再到觸屏智能手機(jī)時(shí)代，蘋(píng)果改變了人們的需求和生活方式，從CLI命令行界面到GUI圖形界面，再到語(yǔ)音手勢(shì)交互等NUI自然用戶界面。那么下一輪的探索是什么？接下來(lái)應(yīng)該是一個(gè)人機(jī)平等對(duì)話的時(shí)代。以前的人機(jī)交互，人看到的是圖形和文字，但是計(jì)算機(jī)看到的只是光標(biāo)，所以人和機(jī)器是不平等的，而接下來(lái)的人機(jī)交互是平等的，你用文字，機(jī)器就會(huì)用文字回答，你用圖片，機(jī)器就用圖片回答，這時(shí)候用戶意識(shí)不到人機(jī)交互和信息交換間技術(shù)的存在，機(jī)器和人一樣溝通交流，身邊的所有設(shè)備不斷學(xué)習(xí)用戶的使用習(xí)慣，潛移默化地理解預(yù)測(cè)用戶的需求，后臺(tái)全景感知計(jì)算無(wú)處不在，前端全自動(dòng)智能服務(wù)聯(lián)動(dòng)推送，最終實(shí)現(xiàn)環(huán)抱式的智能化場(chǎng)景。

圖1 林書(shū)民的互動(dòng)裝置作品《內(nèi)功》

圖2 Loop.pH 光裝置Vel02

圖3 Osmo星光房

研究交互藝術(shù)會(huì)同時(shí)涉及到藝術(shù)理論、計(jì)算機(jī)編程、裝置藝術(shù)，科學(xué)技術(shù)，甚至音樂(lè)等各類學(xué)科領(lǐng)域，是典型的交叉藝術(shù)設(shè)計(jì)。加拿大交互藝術(shù)家賽克拉·斯福斯特創(chuàng)作的交互影像裝置《身體地圖》，它的交互硬件由數(shù)據(jù)系統(tǒng)、電池音頻卡、立體聲話筒、擴(kuò)音器和電場(chǎng)傳感器等組成，它將人體影像以俯視的角度投影到一塊特質(zhì)的白色天鵝絨表面上。這個(gè)表面就是參與者的交互介質(zhì)，人們用手觸摸、甚至愛(ài)撫影像中的身體，隨之而來(lái)的是影像中身體或戰(zhàn)栗，或無(wú)聲地蠕動(dòng)，使得整個(gè)作品彌漫著迷人的氣息。身體是一個(gè)自然性的生命互動(dòng)體，同時(shí)也是一個(gè)敘事體，該互動(dòng)裝置藝術(shù)借用身體傳達(dá)所要表達(dá)的社會(huì)信息，通過(guò)受眾的碰觸表達(dá)觀念，在人的所有行為中，沒(méi)有比觸摸更細(xì)膩、更容易觸及脆弱的本質(zhì)，人與人之間，人與機(jī)器之間那微妙、復(fù)雜的關(guān)系在觸摸與反應(yīng)的過(guò)程中蔓延，以身體為媒介去感知，在豐富交互裝置藝術(shù)作品內(nèi)涵同時(shí)也能讓受眾更加投入的完成作品。

臺(tái)灣藝術(shù)家林書(shū)民的互動(dòng)裝置作品《內(nèi)功》展示了人的“心念”與設(shè)計(jì)作品間的場(chǎng)的關(guān)系（圖1）。為了使展覽現(xiàn)場(chǎng)達(dá)到最佳的體驗(yàn)效果，量身打造了磚墻、光線、室內(nèi)顏色、搭配的儀器，甚至整體的空間布局，布展時(shí)對(duì)各個(gè)部件以及如何排除故障都標(biāo)注了明確說(shuō)明。在接近20平方米的展廳內(nèi)，中廳一面是影像屏幕，一個(gè)角落里是兩臺(tái)電腦、一臺(tái)腦波儀，地面投影出一個(gè)水池，水池兩邊各放置了一把山石形狀的白色座椅，座椅頂上各有一盞路燈，體驗(yàn)者坐到垂釣的白色椅子上，頭部佩戴著可掃描腦電波的數(shù)字頻率分析儀器，腦電波掃描儀每隔5秒對(duì)體驗(yàn)者在觀看時(shí)腦波活動(dòng)狀況進(jìn)行捕捉、分析，進(jìn)而影像中會(huì)出現(xiàn)不同的景象，當(dāng)體驗(yàn)者越放松，腦內(nèi)的α波就越多，探測(cè)燈檢測(cè)后就會(huì)越亮，之后通過(guò)儀器傳輸信息，呈現(xiàn)不同影像內(nèi)容。由于腦部活動(dòng)的不同，水池中的魚(yú)會(huì)慢慢游向一方的垂釣者的缸中，接著，水池會(huì)演變?yōu)椴紳M荷花的池塘，再接著，荷塘上會(huì)盛開(kāi)起一朵接著一朵的白色蓮花。人的感覺(jué)器官是相通的，看到檸檬時(shí)，會(huì)感覺(jué)酸；身處暖色調(diào)房間時(shí)，會(huì)感覺(jué)溫暖舒適；聽(tīng)到搖滾樂(lè)時(shí)，會(huì)跟隨舞動(dòng)；觸摸著毛皮時(shí)，感覺(jué)溫暖，觸摸玻璃時(shí)，感覺(jué)冰冷；聞到臭味，腦子里有出現(xiàn)惡心的畫(huà)面等，全身心的通感體驗(yàn)構(gòu)成了交互設(shè)計(jì)的核心價(jià)值。這個(gè)交互作品與中國(guó)的佛學(xué)和禪學(xué)有著內(nèi)在的聯(lián)系，“萬(wàn)法唯心造”“欲速則不達(dá)”，人的情緒、心境具有場(chǎng)量，因而會(huì)形成不同的影像內(nèi)容。

三、交互藝術(shù)在現(xiàn)實(shí)中的應(yīng)用

Loop.ph開(kāi)啟了一個(gè)公共的交互藝術(shù)項(xiàng)目，它不僅起到藝術(shù)展覽的作用，也具有一定的實(shí)用性（圖2）。裝置由兩個(gè)循環(huán)自行車賽道組成，賽道的兩頭是通過(guò)特定形狀的細(xì)玻璃纖維片連接起來(lái)的，玻璃纖維復(fù)合成“肺部”的形狀，底部安裝有感應(yīng)器和多彩LED照明設(shè)備，互動(dòng)裝置根據(jù)空氣質(zhì)量的好壞顯示不同的顏色，裝置上配有自行車，以便讓市民通過(guò)明顯的顏色變化體驗(yàn)綠色出行，宣傳綠色出行的理念，以便讓市民減少汽車出行，減少對(duì)大氣的污染 。

通感是五感之間的互相感通，五感互通，不僅是感覺(jué)，更是情感，因而通感體驗(yàn)下的交互藝術(shù)不一定非要解決受眾剛需之痛點(diǎn)，但一定要觸及受眾的“爽點(diǎn)”。而交互的意義就在于，把受眾并不關(guān)心的高深技術(shù)優(yōu)雅且感性地轉(zhuǎn)化到受眾最基本的需求上去。Osmo是一個(gè)圓形的房體，銀色遮光膜覆蓋做了點(diǎn)狀透光和局部擦薄的效果，用戶進(jìn)入黑暗的球體后，從外面透進(jìn)來(lái)的光讓穹頂猛然看起來(lái)像無(wú)限的星空，撩撥著用戶的內(nèi)心，仿佛又回到童年。（圖3）

總結(jié)

交互媒體藝術(shù)是技術(shù)和藝術(shù)緊密結(jié)合的典范，隨著智能環(huán)境、立體成像、三維實(shí)景和多感官技術(shù)的介入，通感體驗(yàn)式的交互藝術(shù)將以更加自然、和諧的交互方式讓創(chuàng)作主體和受眾間的溝通更直接。通感體驗(yàn)下的藝術(shù)作品不再是單向的線性的信息傳達(dá)，這種非線型的創(chuàng)意表述，改變了以往的視覺(jué)經(jīng)驗(yàn)，營(yíng)造出能讓受眾參與的“場(chǎng)”，是多維度的體驗(yàn)，受眾身臨其境，在接收信息的過(guò)程中通過(guò)參與和反饋，操控并沉浸于作品中。因而，相對(duì)于傳統(tǒng)界面式交互藝術(shù)，通感體驗(yàn)式的交互藝術(shù)可以使受眾獲得更高的參與度和體驗(yàn)程度，實(shí)現(xiàn)作品與觀眾間的互動(dòng)，“自由對(duì)話”和實(shí)時(shí)的情感交流?！?/p>

[1]趙璐，史金玉，鄭童.UI點(diǎn)擊愉悅——情感體驗(yàn)介入的界面編輯設(shè)計(jì)[M].北京：人民美術(shù)出版社，2015.

[2] 劉姝銘，侯玥.數(shù)字媒體交互元素設(shè)計(jì)[M].北京：高等教育出版社，2014.

[3] 柴秋霞.數(shù)字媒體交互藝術(shù)的沉浸式體驗(yàn)[J].裝飾，2012（2）：73-75.

The New Media Interactive Art of Synaesthesia Experience

GU Xiao
(Liaoning University of International Business and Economics, Dalian 116052, China)

The combination of art and modern science and technology creates new media interactive art, the way has changed the traditional linear narrative art, provides "involved" immersive experience synaesthesia, lets the audience by sight, touch, hearing, taste, smell, etc, three-dimensional way of "mix sensory perception", to participate in the work, become a part of the work, then initiative to accept the transfer information and complete the concept of art blends.

interaction; Immersion; Synaesthesia experience

檢 索 :www.artdesign.org.cn

J0-J5;J045;TP37

A

1008-2832（2017）11-0097-02

Internet :www.artdesign.org.cn

項(xiàng)目編號(hào)：2014XJTD02 項(xiàng)目名稱：互聯(lián)網(wǎng)背景下的圖形用戶界面設(shè)計(jì)研究