王麗君,北京理工大學(xué)設(shè)計(jì)與藝術(shù)學(xué)院教授,博士生導(dǎo)師,數(shù)字媒體藝術(shù)研究中心主任,兼任澳大利亞皇家墨爾本理工大學(xué)藝術(shù)學(xué)院客座教授、美國(guó)加州大學(xué)伯克利分校訪問學(xué)者、北京交通大學(xué)教授(曾為北京交通大學(xué)數(shù)字媒體藝術(shù)專業(yè)創(chuàng)始人和負(fù)責(zé)人)、中國(guó)電影家協(xié)會(huì)理論評(píng)論委員會(huì)理事,主要研究領(lǐng)域?yàn)殡娪懊佬g(shù)、數(shù)字媒體藝術(shù)。發(fā)表學(xué)術(shù)文章60余篇,其中CSSCI期刊論文20余篇,出版有《物之銀幕狂歡——當(dāng)代電影美術(shù)先鋒設(shè)計(jì)及其美學(xué)思維》《城市景觀藝術(shù)設(shè)計(jì)與精神生態(tài)》《造型創(chuàng)意思維》《數(shù)字媒體影像視聽語言》等學(xué)術(shù)專著9本,主持完成教育部人文社科基金青年項(xiàng)目和規(guī)劃項(xiàng)目、北京市社科基金等課題,以及2013、2020年國(guó)家留學(xué)基金委藝術(shù)類人才培養(yǎng)特別項(xiàng)目,參加完成國(guó)家自然基金面上項(xiàng)目等多項(xiàng)交叉學(xué)科課題。
王麗君教授認(rèn)為,當(dāng)代的信息設(shè)計(jì)正處在體系性變革階段,她更加關(guān)注信息設(shè)計(jì)中的數(shù)字信息跨平臺(tái)應(yīng)用、多感官通道中的信息傳達(dá),以及滿足用戶多種維度的復(fù)雜需求等。能夠勝任當(dāng)代信息設(shè)計(jì)的人才,在具備技術(shù)技能的基礎(chǔ)上,對(duì)設(shè)計(jì)師的非技術(shù)技能提出了更高的要求,相應(yīng)就需要在藝術(shù)、工學(xué)、文學(xué)等多學(xué)科領(lǐng)域一專而多能,學(xué)科交叉互涉的知識(shí)體系是實(shí)現(xiàn)信息設(shè)計(jì)系統(tǒng)化和生態(tài)化的必然構(gòu)架。
《設(shè)計(jì)》:北京理工大學(xué)設(shè)計(jì)與藝術(shù)學(xué)院以及您的學(xué)術(shù)研究在信息設(shè)計(jì)方面有哪些探索?
王麗君:北京理工大學(xué)設(shè)計(jì)與藝術(shù)學(xué)院在信息設(shè)計(jì)方面的探索,主要是在視覺傳達(dá)設(shè)計(jì)、工業(yè)設(shè)計(jì)和產(chǎn)品設(shè)計(jì)等專業(yè)開設(shè)了信息設(shè)計(jì)、信息可視化、界面設(shè)計(jì)及交互設(shè)計(jì)等相關(guān)課程,依托不同的設(shè)計(jì)領(lǐng)域進(jìn)行了針對(duì)性的學(xué)術(shù)研究和人才培養(yǎng)。我在信息設(shè)計(jì)方面的研究主要是以我們的數(shù)字媒體藝術(shù)研究中心為依托,擴(kuò)展信息設(shè)計(jì)的廣泛載體,聯(lián)合北京理工大學(xué)的一些強(qiáng)勢(shì)工科專業(yè),進(jìn)行了信息藝術(shù)和信息技術(shù)交叉領(lǐng)域?qū)W術(shù)前沿研究和橫向設(shè)計(jì)合作,重點(diǎn)在“智能網(wǎng)聯(lián)汽車交互”、“虛擬現(xiàn)實(shí)媒體娛樂”、“智能媒體與數(shù)字表演”這三大應(yīng)用系統(tǒng)中對(duì)信息設(shè)計(jì)的方法及應(yīng)用進(jìn)行研究探索,致力于在數(shù)字媒體創(chuàng)意和設(shè)計(jì)相關(guān)領(lǐng)域內(nèi)的建設(shè)和研究中取得開拓性研究成果,為相關(guān)產(chǎn)業(yè)提供創(chuàng)意系統(tǒng)化的方案和服務(wù)。同時(shí),我們力爭(zhēng)建構(gòu)開放式的交叉學(xué)科體系以及復(fù)合型學(xué)術(shù)研究和人才培養(yǎng)的模式。我的團(tuán)隊(duì)在“智能網(wǎng)聯(lián)汽車交互系統(tǒng)”、“虛擬現(xiàn)實(shí)媒體娛樂系統(tǒng)”、“智能媒體與數(shù)字表演系統(tǒng)”平臺(tái)中的信息設(shè)計(jì)研究,最大的特點(diǎn)是將特定系統(tǒng)的內(nèi)在狀態(tài)通過視、聽、觸等信息載體在人的多感官通道中整合呈現(xiàn),以滿足不同應(yīng)用領(lǐng)域中用戶的多種維度復(fù)雜需求。
《設(shè)計(jì)》:請(qǐng)您詳細(xì)介紹一下您在“智能網(wǎng)聯(lián)汽車交互系統(tǒng)”的信息設(shè)計(jì)方面所做的研究。
王麗君:我們?cè)凇爸悄芫W(wǎng)聯(lián)汽車交互系統(tǒng)”的信息設(shè)計(jì)方面的研究主要是與我校的機(jī)械與車輛學(xué)院電動(dòng)汽車院士團(tuán)隊(duì)合作,針對(duì)“未來車聯(lián)網(wǎng)環(huán)境下智慧座艙交互和車輛云端服務(wù)”進(jìn)行信息設(shè)計(jì)。目前我和電動(dòng)汽車院士團(tuán)隊(duì)的孫超教授聯(lián)合培養(yǎng)博士后一名,杜衣杭博士后2013年曾在我的指導(dǎo)下獲得了設(shè)計(jì)藝術(shù)學(xué)碩士學(xué)位,2020年他獲得了機(jī)械工程專業(yè)工學(xué)博士學(xué)位,復(fù)合型學(xué)科背景對(duì)于交叉性研究有相當(dāng)?shù)膬?yōu)勢(shì),目前他負(fù)責(zé)專攻相關(guān)研究國(guó)家自然基金項(xiàng)目的申報(bào)和完成。
此外,由孫超教授指導(dǎo)的車輛工程專業(yè)的研究生和我指導(dǎo)的數(shù)字媒體藝術(shù)方向的研究生共同組團(tuán)參加了2021年第四屆“東風(fēng)夢(mèng)想車”中國(guó)青年汽車創(chuàng)意設(shè)計(jì)大賽,團(tuán)隊(duì)所設(shè)計(jì)的概念汽車應(yīng)用了智能網(wǎng)聯(lián)汽車自動(dòng)駕駛信息系統(tǒng),作品最終獲得了“全國(guó)優(yōu)秀作品獎(jiǎng)”和“最佳院校組織獎(jiǎng)”獎(jiǎng)項(xiàng)。智能網(wǎng)聯(lián)汽車自動(dòng)駕駛系統(tǒng)的應(yīng)用能夠有效降低駕駛?cè)说墓ぷ髫?fù)荷,使駕駛者在一定程度上釋放車輛的控制權(quán),而系統(tǒng)信息的可視化設(shè)計(jì)是實(shí)現(xiàn)智能網(wǎng)聯(lián)汽車系統(tǒng)透明度與駕駛者功能狀態(tài)相匹配的關(guān)鍵。我們根據(jù)智慧座艙中信息設(shè)計(jì)和駕駛者認(rèn)知資源之間的耦合規(guī)律,從多感知通道整合的角度優(yōu)化系統(tǒng)狀態(tài)信息在交互媒介中的傳達(dá),并在動(dòng)態(tài)駕駛監(jiān)控作業(yè)任務(wù)下對(duì)駕駛者行為進(jìn)行校準(zhǔn)。傳統(tǒng)車載交互媒體的設(shè)計(jì)更多的是從系統(tǒng)功能出發(fā),所傳達(dá)的信息傾向于理性而客觀的系統(tǒng)信息,缺乏個(gè)性化和情感化。隨著人工智能技術(shù)的進(jìn)步和5G通信技術(shù)的興起,智慧座艙中的車載媒體為駕駛者提供了沉浸式駕駛空間。
智能網(wǎng)聯(lián)汽車的優(yōu)勢(shì)在于車聯(lián)網(wǎng)系統(tǒng),我們?cè)O(shè)計(jì)的“ Y O U RCockpit智慧座艙”可以隨駕駛者的行為習(xí)慣和人格特質(zhì)形成車的自感狀態(tài)下的個(gè)性,同時(shí)車的“個(gè)性”數(shù)據(jù)能夠同步被儲(chǔ)存在智能化數(shù)據(jù)云端,當(dāng)駕駛者換到其他車輛駕駛時(shí),能夠做到“換車不換心”。智能網(wǎng)聯(lián)汽車交互系統(tǒng)中的“云”是一個(gè)能將駕駛?cè)似?、車輛情感模型和海量情景信息存儲(chǔ)在云端的信息系統(tǒng),在存儲(chǔ)功能以外還包括了信息分類、信息分析和信息重構(gòu),既是“儲(chǔ)存云”,更是“智慧云”。硬件上采用可變阻尼技術(shù),輔以可自定義角度的座椅和后視鏡等,提供完整的個(gè)性化體驗(yàn),軟件上貫徹將車視為“伴侶”的設(shè)計(jì)理念,根據(jù)平時(shí)使用傳感器獲取的駕駛者信息進(jìn)行大數(shù)據(jù)分析,不再被動(dòng)式地聽取指令,而是主動(dòng)地進(jìn)行優(yōu)化和建議,為駕駛者提供更為豐富的個(gè)性化駕乘體驗(yàn)。車窗被設(shè)計(jì)為AI增強(qiáng)現(xiàn)實(shí)的智能顯示終端,涵蓋了社交、瀏覽、溝通、分享和互動(dòng)等功能,車窗的“汽車社交”模式為車聯(lián)網(wǎng)時(shí)代的智慧座艙提供更好的駕乘體驗(yàn)。我們和機(jī)械與車輛學(xué)院的合作將“智能媒體設(shè)計(jì)”與“車輛系統(tǒng)工程”相結(jié)合,以“智能網(wǎng)聯(lián)汽車智慧座艙”的信息設(shè)計(jì)方案為依托,提出了“未來車載媒體”的概念,并將這一概念應(yīng)用到“未來車聯(lián)網(wǎng)環(huán)境下智慧座艙交互和車輛云端服務(wù)”系統(tǒng)中去。
《設(shè)計(jì)》:您在“虛擬現(xiàn)實(shí)媒體娛樂系統(tǒng)”的信息設(shè)計(jì)方面的探索是如何進(jìn)行的?
王麗君:“虛擬現(xiàn)實(shí)媒體娛樂系統(tǒng)”信息設(shè)計(jì)的研究工作主要是在與我校光電學(xué)院翁冬冬教授的VR技術(shù)團(tuán)隊(duì)合作中開展,翁教授的VR技術(shù)在國(guó)內(nèi)居于頂尖地位,可以應(yīng)用在國(guó)防、醫(yī)療和文化等不同領(lǐng)域,而我們數(shù)字媒體藝術(shù)研究中心的重點(diǎn)是VR娛樂產(chǎn)品的敘事和藝術(shù)創(chuàng)作研究。在VR娛樂產(chǎn)品設(shè)計(jì)中,虛擬現(xiàn)實(shí)系統(tǒng)以新型顯示及人機(jī)交互技術(shù)為基礎(chǔ),通過數(shù)字虛擬空間中的藝術(shù)信息設(shè)計(jì),為用戶提供關(guān)于視覺、聽覺和觸覺等感官在敘事空間中的體驗(yàn)。虛擬現(xiàn)實(shí)技術(shù)可以將多幅圖像合成到一個(gè)共同的敘事空間中,采用不同的平面變換模型,如仿射變換模型、透視變換模型和三次立方變化模型進(jìn)行匹配,然后再利用全方位平面和圖像坐標(biāo)之間的估算幾何關(guān)系,將虛擬影像融合在一個(gè)全方位空間中。
首先,VR媒介顛覆了以平面景框?yàn)槠瘘c(diǎn)的構(gòu)圖、景別和蒙太奇等傳統(tǒng)影像媒介的封閉式語境,轉(zhuǎn)向了場(chǎng)域式開放性動(dòng)態(tài)全景空間,敘事的話語權(quán)從作為敘事主體的創(chuàng)作者轉(zhuǎn)向了原本作為敘事客體的體驗(yàn)者,蒙太奇語法被沉浸者的主觀認(rèn)知和視點(diǎn)調(diào)度的順序所取代,凸顯出影像媒介敘事語言需要更新替代的問題。詩性和藝術(shù)性是VR媒介創(chuàng)作的靈魂,也是其敘事語言修辭服務(wù)的對(duì)象,我們從敘事學(xué)的角度開展VR媒介語言本體論和方法論的研究,試圖消除VR媒介在人文藝術(shù)學(xué)領(lǐng)域中的盲區(qū),以彌補(bǔ)其藝術(shù)表現(xiàn)性在基礎(chǔ)理論和實(shí)踐理論上的欠缺,為數(shù)字時(shí)代新媒介理論奠定一定的學(xué)術(shù)基礎(chǔ),就此項(xiàng)研究我申報(bào)了2021年國(guó)家社科基金項(xiàng)目《VR媒介敘事研究》。
其次,VR娛樂產(chǎn)品用戶的信息選擇性大都注意機(jī)能、覺醒水平及認(rèn)知資源容量,但可能會(huì)限制交互體驗(yàn)任務(wù)中的沉浸度和交互任務(wù)的績(jī)效。在“虛擬現(xiàn)實(shí)媒體娛樂系統(tǒng)”的信息設(shè)計(jì)中,我們尤其拓展了虛擬現(xiàn)實(shí)媒體系統(tǒng)的人因工效學(xué)研究范圍。數(shù)字虛擬空間中的多通道信息設(shè)計(jì)正是利用了人的多感覺整合機(jī)理,將來自不同感知通道的信息相互作用并整合為統(tǒng)一的、連貫的和有意義的知覺。虛擬系統(tǒng)所提供的動(dòng)態(tài)場(chǎng)景中的信息設(shè)計(jì),需要滿足用戶在信息加工過程中的輸入、編碼、儲(chǔ)存和提取,并在認(rèn)知核團(tuán)中形成注意回路。當(dāng)數(shù)字虛擬空間中多源非一致性信息并發(fā),面對(duì)相互疊加的信息,編碼的有效性將有助于在感知通道中消除由信息過載而引起的疲勞感和消極情緒。在虛擬現(xiàn)實(shí)媒體交互任務(wù)中,遵循績(jī)效與信息整合的內(nèi)在本質(zhì)關(guān)系,根據(jù)最優(yōu)匹配的沉浸度校準(zhǔn)策略,我們提出與用戶認(rèn)知資源相匹配的數(shù)字虛擬空間信息表達(dá)的方法及理論,利用多模態(tài)時(shí)空同步沉浸式媒體開展多感知通道的虛擬空間信息優(yōu)化,實(shí)現(xiàn)虛擬系統(tǒng)信息與用戶認(rèn)知資源相耦合的設(shè)計(jì)目標(biāo)。相關(guān)研究我主持申報(bào)了自然基金項(xiàng)目《虛擬現(xiàn)實(shí)媒體沉浸度的生成計(jì)算與多通道表達(dá)》,在“輕型大視場(chǎng)頭盔式顯示裝置”、“移動(dòng)增強(qiáng)現(xiàn)實(shí)”、“三維顯示機(jī)理以及舒適度評(píng)測(cè)”方面的大量成果基礎(chǔ)之上,推動(dòng)虛擬現(xiàn)實(shí)媒體設(shè)計(jì)與人因工效學(xué)的交叉研究,更深入地進(jìn)入三維顯示及虛擬現(xiàn)實(shí)計(jì)算系統(tǒng)領(lǐng)域,推動(dòng)虛擬現(xiàn)實(shí)系統(tǒng)的技術(shù)進(jìn)步,將其研究特色發(fā)揮出更大的應(yīng)用價(jià)值。
在虛擬現(xiàn)實(shí)媒體娛樂產(chǎn)品中,高度擬真的第一人稱觀看模式和完全自由的移動(dòng)系統(tǒng)會(huì)為使用者帶來極度強(qiáng)大的沉浸式體驗(yàn),但是由于配套操作產(chǎn)品的缺失和使用者自身作為“本體”的概念被弱化,使用者的恐懼感會(huì)隨之增強(qiáng),尤其是空間中的過度自由和無實(shí)際引導(dǎo)的環(huán)境也可能導(dǎo)致使用者本身的目標(biāo)信息模糊。除了重視視覺性的畫面仿真以外,構(gòu)成沉浸感的“交互仿真”與為玩家提供目標(biāo)的“行為引導(dǎo)”信息也尤為重要,這些成為VR產(chǎn)品發(fā)展中需要重點(diǎn)解決的問題。在我們數(shù)字媒體藝術(shù)研究中心的核心成員徐凡設(shè)計(jì)的VR游戲《魔法學(xué)社》中就針對(duì)以上提到的兩個(gè)信息設(shè)計(jì)問題進(jìn)行了嘗試。除了傳統(tǒng)的VR眼鏡外,他在設(shè)計(jì)中追加了可視化的“手勢(shì)感應(yīng)信息系統(tǒng)”,并為了防止操作上的沖突將傳統(tǒng)手柄改為了單手手柄,將雙手的行為分離為兩種概念:“控制”與“運(yùn)動(dòng)”,人們的慣用手作為增強(qiáng)體驗(yàn)的“控制主軸”,而非慣用手則用于傳統(tǒng)媒介的“底層運(yùn)動(dòng)”。在游戲行為中,移動(dòng)和互換系統(tǒng)信息界面都會(huì)作為玩家的本能存在,于是將這種本能行為歸于傳統(tǒng)媒介,而正式的游玩“解謎/戰(zhàn)斗”則由手勢(shì)感應(yīng)去構(gòu)成,并且在環(huán)境規(guī)劃中加強(qiáng)符合游戲內(nèi)在審美的信息引導(dǎo)系統(tǒng),從而提高玩家的沉浸感和清晰感。
《設(shè)計(jì)》:聽說您在北京理工大學(xué)不僅是設(shè)計(jì)學(xué)一級(jí)學(xué)科的研究生導(dǎo)師,還是數(shù)字表演一級(jí)交叉學(xué)科的研究生導(dǎo)師,那在數(shù)字表演這方面的信息設(shè)計(jì)又是如何進(jìn)行的?
王麗君:“智能媒體與數(shù)字表演系統(tǒng)”的信息設(shè)計(jì)主要與我校計(jì)算機(jī)學(xué)院合作,計(jì)算機(jī)學(xué)院的丁剛毅教授2008年主導(dǎo)申報(bào)成立了數(shù)字表演一級(jí)交叉學(xué)科,多年來和設(shè)計(jì)與藝術(shù)學(xué)院聯(lián)合培養(yǎng)數(shù)字表演專業(yè)數(shù)字智能媒體創(chuàng)意方向的博士生和碩士生,其專業(yè)特色是通過數(shù)字化的虛擬演示達(dá)到表演信息管理,為大型文藝匯演等數(shù)字文化產(chǎn)業(yè)提供創(chuàng)意系統(tǒng)化的方案和服務(wù)。在我們數(shù)字媒體藝術(shù)研究中心,我名下目前有四名數(shù)字表演專業(yè)的研究生,他們大多為本科藝術(shù)類專業(yè)背景,但在研究生階段要學(xué)習(xí)數(shù)值分析、矩陣分析、圖形引擎、人群建模、智能媒體計(jì)算和仿真技術(shù)等多門計(jì)算機(jī)類相關(guān)課程。
基于智能媒體的數(shù)字表演系統(tǒng)是將現(xiàn)代計(jì)算機(jī)仿真技術(shù)與表演藝術(shù)相結(jié)合,將“表演空間—表演實(shí)體—表演行為”的數(shù)字建模、大規(guī)模人群仿真計(jì)算、實(shí)時(shí)并行渲染、表演過程仿真、表演和諧人機(jī)界面、協(xié)同表演等方法,用于解決大型文藝排演、輔助創(chuàng)意編排、三維全景展示、交互式指揮排練及其信息管理的系統(tǒng)性和效率性。“智能媒體與數(shù)字表演系統(tǒng)”能夠?qū)崿F(xiàn)交互式智能表演創(chuàng)意及自動(dòng)智能創(chuàng)意的生成,在面對(duì)個(gè)性化、服務(wù)化、智能化和綠色化的演出需求時(shí),提高文化創(chuàng)意產(chǎn)業(yè)中表演創(chuàng)意的信息傳達(dá)和信息管理的效能。
大型表演中導(dǎo)演的創(chuàng)意策劃是形成表演視覺盛宴的精髓所在,而其創(chuàng)意策劃是導(dǎo)演特定藝術(shù)風(fēng)格和針對(duì)特定表演藝術(shù)家及表演目標(biāo)的框架性體現(xiàn)。北京理工大學(xué)首創(chuàng)性地將導(dǎo)演創(chuàng)意與數(shù)字化仿真技術(shù)相結(jié)合,使導(dǎo)演創(chuàng)意能夠根據(jù)特定表演目標(biāo)和特定表演形式形成預(yù)演框架,根據(jù)視聽信息的表達(dá)需要進(jìn)行創(chuàng)意延展和模塊編排,最終形成導(dǎo)演的創(chuàng)意策劃在數(shù)字化虛擬仿真系統(tǒng)中的表達(dá)。創(chuàng)意信息的設(shè)計(jì)與管理包括表演策劃流程、表演結(jié)構(gòu)、形式分工、節(jié)點(diǎn)劃分、內(nèi)容關(guān)聯(lián)表現(xiàn)及層次知識(shí)應(yīng)用,利用機(jī)器系統(tǒng)認(rèn)知學(xué)習(xí)及強(qiáng)化學(xué)習(xí)等技術(shù),實(shí)時(shí)動(dòng)態(tài)預(yù)覽導(dǎo)演表演方案在先期表演素材中的創(chuàng)意思維模式架構(gòu),研究實(shí)現(xiàn)導(dǎo)演在特定表演目標(biāo)下,對(duì)知識(shí)、素材、表演邏輯的創(chuàng)意策劃組織模式建模,為表演創(chuàng)意提供框架性和知識(shí)關(guān)聯(lián)性的支持,實(shí)現(xiàn)創(chuàng)意智能評(píng)估和選擇,并對(duì)舞臺(tái)空間建模與動(dòng)態(tài)仿真以及舞臺(tái)表演的準(zhǔn)確與順利實(shí)施提供技術(shù)支持和保障。文藝表演的數(shù)字化信息設(shè)計(jì)與管理,也是信息設(shè)計(jì)和人工智能在文化領(lǐng)域的特殊應(yīng)用,對(duì)文化創(chuàng)意產(chǎn)業(yè)的科學(xué)化和智能化起到了重要的作用。
《設(shè)計(jì)》:您關(guān)注當(dāng)今的信息設(shè)計(jì)有哪些前沿性特點(diǎn)?信息設(shè)計(jì)交叉融合了哪些學(xué)科的知識(shí)?對(duì)設(shè)計(jì)人在知識(shí)儲(chǔ)備、技術(shù)能力等方面有哪些具體的要求?
王麗君:當(dāng)代的信息設(shè)計(jì)正處在體系性變革階段,我更加關(guān)注信息設(shè)計(jì)中的數(shù)字信息跨平臺(tái)應(yīng)用、多感官通道中的信息傳達(dá),以及滿足用戶多種維度的復(fù)雜需求等。
信息設(shè)計(jì)需要融合設(shè)計(jì)學(xué)、計(jì)算機(jī)科學(xué)、工程學(xué)類、戲劇影視學(xué)、傳播學(xué)、哲學(xué)、文學(xué)和心理學(xué)等多種學(xué)科門類的知識(shí),將產(chǎn)品設(shè)計(jì)放置在以用戶為中心、以問題為導(dǎo)向的思維框架下,最大限度地攫取各類學(xué)科的知識(shí)和技能,最終實(shí)現(xiàn)有效的信息表達(dá)途徑。
能夠勝任當(dāng)代信息設(shè)計(jì)的人才,在具備技術(shù)技能的基礎(chǔ)上,對(duì)設(shè)計(jì)師的非技術(shù)技能提出了更高的要求,相應(yīng)就需要在藝術(shù)、工學(xué)、文學(xué)等多學(xué)科領(lǐng)域一專而多能,學(xué)科交叉互涉的知識(shí)體系是實(shí)現(xiàn)信息設(shè)計(jì)系統(tǒng)化和生態(tài)化的必然構(gòu)架。