達妮莎,鄭海期
(大連理工大學(xué) 建筑與藝術(shù)學(xué)院,遼寧 大連 116024)
“裝置藝術(shù)”是西方當(dāng)代藝術(shù)中的一個流派,這一藝術(shù)流派從20世紀70年代開始被人們所熟知,逐漸引起人們的廣泛關(guān)注和研究①。裝置藝術(shù)是指在特定時空環(huán)境、材料的象征意義、藝術(shù)家的個人情感、目的性的創(chuàng)作和實驗下的綜合展示藝術(shù)。無論在創(chuàng)作觀念上,還是表現(xiàn)形式及材料應(yīng)用等方面都表現(xiàn)出開放性和包容性,多媒體和互動是裝置藝術(shù)總的發(fā)展方向②。新媒體互動裝置藝術(shù),就是在裝置藝術(shù)的創(chuàng)作中可以跨界融合多媒體等現(xiàn)代技術(shù)的藝術(shù)。其中數(shù)字媒介材料及其產(chǎn)品設(shè)備既是創(chuàng)作的媒介材料,也是創(chuàng)作和傳播展示的工具。在數(shù)字技術(shù)與數(shù)字媒介的參與和支持下,互動裝置藝術(shù)更具交互性,其呈現(xiàn)方式也更具多樣化。
海德格爾曾言:“每個時代都有一個時代的命題?!痹谛旅襟w與各領(lǐng)域不斷碰撞與融合的今天,新媒體的概念相對于舊媒體而言發(fā)生眾多變化,其內(nèi)涵更加豐富,具有交互性、數(shù)字化、虛擬化和非線性等特點。交互性賦予了新媒體裝置藝術(shù)實驗性,這與眼動技術(shù)所提倡的實驗精神有異曲同工之處。眼動技術(shù)及其相關(guān)實驗的研究視角為新媒體互動裝置的創(chuàng)作提供了寶貴的信息,這是可用性測試、問卷調(diào)查、后臺數(shù)據(jù)挖掘等研究手段難以實現(xiàn)的,同時眼動技術(shù)還為互動裝置藝術(shù)提供了更準確的效果預(yù)估,讓觀眾能夠與裝置更好地實現(xiàn)人機互動,充分享受沉浸式交互體驗。
眼動技術(shù)研究在20世紀60年代由荊其誠教授從國外介紹引入中國,90年代后隨著數(shù)字媒體技術(shù)迅速發(fā)展,國內(nèi)開始利用眼動技術(shù)進行閱讀研究。直至21世紀,在新媒體背景下眼動技術(shù)以其無干擾性、適用范圍廣、時間精度和空間分辨率高、采集信息多樣等優(yōu)勢受到國內(nèi)傳媒業(yè)的關(guān)注并開始通過視覺行為來預(yù)測受眾的交互意圖,其應(yīng)用范圍也逐漸擴展至多學(xué)科、多領(lǐng)域并形成跨界融合的發(fā)展趨勢。
新媒體交互藝術(shù)的發(fā)展依附于人與機的基礎(chǔ)之上,其與眼動技術(shù)的融合意味著“跨界”,在藝術(shù)領(lǐng)域即為“交叉”與“超越”。跨界使內(nèi)容各異的文化和理念相互交錯、碰撞,歸納整合為新的質(zhì)點。目前,國內(nèi)外的互動裝置藝術(shù)案例中,眾多新穎的視覺效果以及多感官的交互體驗的產(chǎn)生得益于打破了固化的藝術(shù)傳統(tǒng)思維和常規(guī)思維定式。
近年來,國內(nèi)外對于眼動技術(shù)的研究已經(jīng)有了一定的理論基礎(chǔ)和實踐作品,形成了較為完備的設(shè)計體系。眼動技術(shù)在新媒體領(lǐng)域的研究主要集中在利用眼動技術(shù)歸納總結(jié)受眾在接受和反饋信息過程中的認知模式、交互行為以及審美心理,借以優(yōu)化網(wǎng)頁設(shè)計、人機交互界面及相關(guān)視覺化應(yīng)用。但研究內(nèi)容多停留于平面設(shè)計方向,涉及互動和沉浸式界面的研究有限,尚未充分利用眼動技術(shù)相關(guān)理論進行融合,這意味著在新媒體交互藝術(shù)創(chuàng)作中有待于進一步發(fā)揮眼動技術(shù)優(yōu)勢,從而,為新媒體藝術(shù)領(lǐng)域提供更廣闊的設(shè)計空間。
交互性是互動裝置藝術(shù)區(qū)別于傳統(tǒng)裝置藝術(shù)與非互動裝置藝術(shù)的最主要特征,改變了單向傳達模式,在受眾對作品給予反饋過程中分析出受眾對新媒體裝置藝術(shù)的認知模式并把其提升為參與者。受眾通過感知、注意、記憶和情緒等認知行為獲取信息、加工信息、貯存信息及使用信息的高級心理歷程。在與裝置藝術(shù)互動的過程中常借助感知系統(tǒng)來“感知”藝術(shù)中的色彩、聲音,或作品中的某些互動內(nèi)容。
首先,眼動技術(shù)與新媒體藝術(shù)認知模式里的視覺刺激感知有著密切的聯(lián)系。新媒體裝置藝術(shù)作品需要視覺感官的參與,受眾首先通過眼睛觀察,捕捉裝置交互界面中的顏色、形狀、大小等信息,經(jīng)由整個視知覺過程,對藝術(shù)作品留下初步的視覺審美體驗。眼動技術(shù)可以利用熱區(qū)、注視時長、注視點數(shù)等數(shù)據(jù)進行分類統(tǒng)計整理,基于視覺感知通過不同裝置界面區(qū)域的趨近或回避反應(yīng)來對裝置進行改進。
其次,眼動技術(shù)與新媒體藝術(shù)認知模式里的“集中注意”這一特點也有著重要聯(lián)系。一切心理活動都離不開注意,它代表有選擇性地感知事物,只有引起觀眾視覺注意力的裝置才能更好地和觀眾互動從而達到設(shè)計目的。受眾在與裝置進行互動過程中會主觀地選擇感興趣且符合需求的內(nèi)容,并能夠長時間、持續(xù)性地集中視覺注意力。眼動技術(shù)可以進一步分析受眾的注意力,利用眼動儀可以清晰地看到受眾的視線軌跡,眼睛先大致瀏覽裝置,然后觀察眼睛集中于裝置的哪個區(qū)域。眼動技術(shù)還可以分析出受眾視線停留的熱區(qū),通過熱點圖中不同顏色來辨別裝置中引起注意力集中或分散的區(qū)域。眼動技術(shù)在互動裝置藝術(shù)中的運用有利于滿足受眾的需求,尋求最佳關(guān)注點、興趣點并引起受眾對裝置相對長時間的注意,從而更好地使受眾在互動中感受藝術(shù)家所傳達的設(shè)計理念。
最后,人們在與裝置產(chǎn)生互動的過程中需要處理記憶并最終實現(xiàn)與互動裝置之間的情感共鳴。眼動技術(shù)可以通過記錄一次完整的裝置互動體驗來抽取交互體驗樣本數(shù)據(jù),與受眾感興趣的記憶點進行對比分析,例如注視時間長短與興趣記憶點的關(guān)系等,最終產(chǎn)生裝置交互界面與受眾的交互情況、喜好程度的反饋評價。
新媒體藝術(shù)交互特性在多通道交互③、虛擬現(xiàn)實④、全息投影⑤、體感交互⑥等技術(shù)的支持下,開始通過攝像頭、觸摸屏等手段突破單一的視覺感官體驗,不再局限于常規(guī)的交互模式。藝術(shù)家在新時代背景下創(chuàng)作了一系列具有多感性、反饋性、多元性、虛擬性、沉浸性等交互特性的互動裝置,而眼動技術(shù)恰為這些交互特性提供了可用性測試途徑。
眼動技術(shù)實驗的可用性,包括有效性、效率和滿意度三個指標(biāo),可以幫助藝術(shù)家在創(chuàng)作新媒體裝置時處理交互信息。眼動實驗中的卡爾曼濾波預(yù)測原理,類似于視線跟蹤人機交互中頭部運動引起視線估計誤差的特點,可根據(jù)此特點判斷視線追蹤互動裝置系統(tǒng)是否需要重新標(biāo)定,來提升裝置藝術(shù)的創(chuàng)作效率及其有效性和交互性。
再如,眼動技術(shù)中的光流特征追蹤原理對運用運動的物體為表現(xiàn)媒介的交互裝置有很大幫助,運動對象在人眼視網(wǎng)膜上形成一系列連續(xù)變化的圖像信息。這種圖像如“光流”一般賦予每一個像素點一個速度矢量,這樣便形成了一個圖像光流場。光流計算是研究利用圖像系列中像素強度信息的時域變化和相關(guān)性來確定各像素位置的“運動”,即研究圖像灰度在時間上的變化與景象中物體結(jié)構(gòu)及其運動的關(guān)系。同時光流特征追蹤原理采用紅外光源避免圖像質(zhì)量受自然環(huán)境光的影響,增強了普爾欽斑點更易于追蹤的眼動軌跡,有利于受眾更好體驗裝置中的人機交互過程,提升受眾對裝置的滿意度。
新媒體交互藝術(shù)顛覆了傳統(tǒng)藝術(shù)作品的靜態(tài)之美,賦予了裝置藝術(shù)可操作性,將美感置于受眾與裝置藝術(shù)互動所產(chǎn)生的不同層級的愉悅情感體驗之中?;友b置藝術(shù)所傳達的跨領(lǐng)域化、去疆域化的情感美學(xué)特征要求我們在創(chuàng)作中與不同的領(lǐng)域進行合作,形成多領(lǐng)域合作的趨勢。眼動技術(shù)作為科學(xué)性研究手段,通過與新媒體藝術(shù)的碰撞與融合,創(chuàng)造了新的美學(xué)觀并產(chǎn)生新的藝術(shù)創(chuàng)作形式。
眼動技術(shù)在審美范疇內(nèi)為藝術(shù)家從審美角度抽取被試對象樣本,比較出吸引注視的區(qū)域、獲得被試對象的審美偏好,以及圍繞不同媒介構(gòu)建審美概念模型等方面做出了一定的貢獻。同時使眼動技術(shù)在互動裝置中的應(yīng)用從認知心理拓展到設(shè)計的審美心理研究,致力于審美與情感的融合。通過眼動技術(shù)所呈現(xiàn)出的實驗數(shù)據(jù),對互動裝置的審美評價進行量化分析,去測量受眾對互動裝置的情感化審美體驗,從而改善藝術(shù)家對藝術(shù)創(chuàng)作的美學(xué)視角。
互動裝置藝術(shù)在其發(fā)展過程中,從單純的材料組合和對現(xiàn)成品的利用,發(fā)展到以各種光學(xué)、電子、動力、聲音、互動、氣味和溫度等新媒介和新技術(shù)的數(shù)字手段及感應(yīng)技術(shù)來呈現(xiàn)更加多樣化的變化⑦。由于大量數(shù)字媒體和數(shù)字技術(shù)出現(xiàn),當(dāng)代互動裝置常常體現(xiàn)出數(shù)字技術(shù)與媒介的互動性與網(wǎng)絡(luò)化特性。無論在藝術(shù)觀念上,還是媒介材料特性的應(yīng)用和實驗上,以及在藝術(shù)語言的表達方式上,眼動技術(shù)都迎合了互動裝置藝術(shù)的要求,并拓展了其藝術(shù)表現(xiàn)領(lǐng)域和呈現(xiàn)空間。不僅如此,互動裝置藝術(shù)在呈現(xiàn)形態(tài)和空間體量等方面也日趨龐大和復(fù)雜,這也意味著互動裝置藝術(shù)中亟需多學(xué)科之間的交叉,來實現(xiàn)技術(shù)與藝術(shù)之間的跨界融合。
互動裝置藝術(shù)在呈現(xiàn)形態(tài)和空間技術(shù)等方面的復(fù)雜性還表現(xiàn)在科學(xué)技術(shù)與觀眾的互動所產(chǎn)生的能動作用。眼動技術(shù)不僅被廣泛應(yīng)用于廣告的效果評估及視覺界面的設(shè)計和傳播,也可運用到受眾對互動裝置藝術(shù)的認知行為實驗中。例如眼動儀通過采集注視、眼跳在時間、空間維度上的指標(biāo),呈現(xiàn)追隨眼動的軌跡,以此來分析調(diào)動參與者與裝置互動的能動因素,讓裝置創(chuàng)作更為嚴謹,更加便利地獲取互動信息。
互動裝置與交互體驗緊密相關(guān),設(shè)計師不僅要衡量互動裝置在情感或體驗上能對受眾產(chǎn)生多少共鳴,還要思索互動體驗的構(gòu)成。對于受眾體驗結(jié)構(gòu)的理解,最簡潔也最廣為引述的描述來自Jodi Forlizzi和Shannon Ford,前者來自卡內(nèi)基·梅隆大學(xué)設(shè)計學(xué)院和人機交互學(xué)院,后者是前Scient Corporation成員⑧。兩位作者表明:所謂一次體驗,少了一些來自人自身的掌控,因為人本身參與到體驗過程中;而作為故事的體驗又把控制權(quán)交給人,因為當(dāng)體驗結(jié)束后,是由人來把握如何分享其體驗。這意味著創(chuàng)造精妙的交互體驗不僅依賴于體驗本身,并且需要設(shè)計師把關(guān)注點放到創(chuàng)建“體驗發(fā)生的場景”的結(jié)構(gòu)上,通過構(gòu)建良好的交互場景及運用合適的交互模式來增強參與者對互動裝置的代入感。
在以新媒介為主的互動裝置中,受眾作為交互的主體,有起著觸發(fā)人機交互的作用。藝術(shù)的內(nèi)在邏輯就是藝術(shù)家與受眾的交互聯(lián)系,在進行藝術(shù)創(chuàng)作時,需考慮受眾的認知心理、行為特點、情感需求等,讓受眾由被動地接受裝置所傳遞的信息轉(zhuǎn)為雙方信息的交換與互動,并在欣賞藝術(shù)作品時有更加流暢的體驗,更好地與藝術(shù)家展開情感交流。眼動技術(shù)可以通過數(shù)據(jù)客觀反映受眾的感知響應(yīng)力、注意力、參與度,并辨別裝置可操作性以及是否與認知相符。如新媒體互動藝術(shù)家鄭達創(chuàng)作的《虛擬的肖像—入侵計劃》(Virtual Portrait—Invasion Project)是一個采用虛實交互和視聽交互兩種形式,從而讓受眾身體與虛實空間互動的電子影像裝置。認知模式由刺激受眾的視覺和聽覺系統(tǒng)開始,使受眾的注意力集中于爆炸的建筑物以產(chǎn)生興趣并更好地更換動作參與互動。眼動數(shù)據(jù)可以分析出最佳的建筑物爆炸區(qū)域讓觀眾產(chǎn)生強烈沉浸感并把爆炸反應(yīng)的震撼感最大化,增強受眾與裝置之間的互動體驗。
信息化的高度發(fā)展促進了新媒體藝術(shù)的發(fā)展,藝術(shù)家不再是單一的主體,審美的客體也不再是單一的媒體,而是實現(xiàn)了多種媒體的整合和主客體的統(tǒng)一?;友b置藝術(shù)中的審美主體性逐漸升華為主體間性,客體的多媒體性多角度地刺激了審美主體的感覺器官,賦予審美的主體更多參與的可能性。在眾多衡量互動裝置藝術(shù)的方法和指標(biāo)中,眼動技術(shù)的應(yīng)用愈加普遍,這與其自身優(yōu)勢是分不開的。
眼動技術(shù)與目前心理學(xué)實驗原理相結(jié)合,從審美和心理層面實現(xiàn)受眾對互動裝置藝術(shù)參與體驗的效果的預(yù)測。兩者結(jié)合有助于互動裝置藝術(shù)更好地實現(xiàn)心理旋轉(zhuǎn)、調(diào)控、視覺搜索、預(yù)視效應(yīng)等效果。同時,眼動技術(shù)可以根據(jù)研究目的和研究需要將被試視覺對象劃分成不同的興趣區(qū)(Area of Interest,AOI),并由此得出每個興趣區(qū)內(nèi)的眼動數(shù)據(jù)⑨。也可利用眼動儀記錄被試對象在參考外部框架時的眼動特征來實現(xiàn)興趣區(qū)域的心理預(yù)測,使現(xiàn)場審美過程具備強大的吸引力,以此削弱受眾與互動裝置之間的距離感。
目前眼動技術(shù)所需要的Eyelink系列眼動儀及Tobii系列眼動儀被廣泛應(yīng)用于廣告效果評估、視覺傳播等研究,但針對互動裝置藝術(shù)適配的眼動測試儀器數(shù)量較少且適用的情境較為單一,在數(shù)據(jù)的測量精度和實驗的生態(tài)效率、設(shè)備的性能等方面仍存在較大的提升和拓展空間。隨著藝術(shù)邊界日趨模糊,藝術(shù)通過跨界研究形成了多種交叉模式。對于互動裝置中交互體驗的增強,仍需結(jié)合眼動技術(shù)開發(fā)將人機互動置于新高度,進行多學(xué)科、多領(lǐng)域的跨界融合,進一步探索技術(shù)與藝術(shù)作品之間的相互作用、相互影響與相互關(guān)聯(lián)。
威爾伯·施拉姆認為,“對我們來說,傳播是一種自然而然的、必須的、無所不在的活動。我們建立傳播關(guān)系是因為我們要同環(huán)境、特別是我們周圍的人類環(huán)境相聯(lián)系?!雹?/p>
眼動技術(shù)的應(yīng)用迎合了互動裝置藝術(shù)的傳播需求,在對自然建立與受眾及其所處互動空間的聯(lián)系及推廣藝術(shù)家的設(shè)計理念上起到關(guān)鍵作用,使受眾不僅從思想上,還能從行為上去揣摩作品表達的內(nèi)涵,達到體驗、思索和升華的目的。但眼動技術(shù)若能克服設(shè)備缺陷且不局限于平面視覺傳播范疇,則將在未來成為連接技術(shù)與藝術(shù)跨界融合的紐帶之一,引領(lǐng)藝術(shù)與多學(xué)科交叉發(fā)展新趨向,并適用于更多新媒體領(lǐng)域,創(chuàng)造更大的價值!
注釋:
①趙明杰,胡維平.新媒體時代交互藝術(shù)的本質(zhì)——以裝置媒體藝術(shù)為例[J].美與時代(上).2014(1):25-27.
②許江,吳美純.非線性敘事(新媒體藝術(shù)與媒體文化)[M].杭州:中國美術(shù)學(xué)院出版社,2006.
③多通道交互:多通道交互(Multi-channel user interface,MCUI),是指綜合使用多種輸入通道和輸出通道,用最恰當(dāng)?shù)姆绞絺鬟f服務(wù),滿足用戶需求,具備實現(xiàn)多設(shè)備協(xié)同和跨設(shè)備場景遷移的價值特征。
④虛擬現(xiàn)實:虛擬現(xiàn)實技術(shù)(Virtual Reality,縮寫為VR),又稱靈境技術(shù),是20世紀發(fā)展起來的一項全新的實用技術(shù)。虛擬現(xiàn)實技術(shù)囊括計算機、電子信息、仿真技術(shù)于一體,其基本實現(xiàn)方式是計算機模擬虛擬環(huán)境從而給人以環(huán)境沉浸感。
⑤全息投影技術(shù):全息投影技術(shù)(front-projected holographic display)屬于3D技術(shù)的一種,原指利用干涉原理記錄并再現(xiàn)物體真實的三維圖像的技術(shù)。
⑥體感交互:作為一種新型的人機互動體感控制系統(tǒng),能夠?qū)⑦\動與娛樂融入生活。操作者可以用自己的肢體去控制系統(tǒng),并且實現(xiàn)與互聯(lián)網(wǎng)玩家互動,分享圖片、影音信息。
⑦宮林,欒偉麗.虛擬構(gòu)象(下)·創(chuàng)意與表達[M].北京:人民郵電出版社,2017.3.
⑧〔美〕科爾科(Kolko,J.).交互設(shè)計沉思錄[M].方舟,譯.北京:機械工業(yè)出版社,2018.12.
⑨李文清,張珊珊,徐琨鵬.眼動儀在認知行為實驗中的應(yīng)用及選擇[J].軟件導(dǎo)刊,2020(2):80-83.
⑩威爾伯·施拉姆.傳播學(xué)概論[M].北京:新華出版社,1984:168.