朱玉文 李子政 齊景仲 謝帛庭 付昊瑩
摘 要:現(xiàn)如今,穿戴設(shè)備正成為各大科技公司研究的熱門,隨著越來越多的可穿戴設(shè)備投入市場(chǎng),可穿戴設(shè)備正逐步為社會(huì)大眾所接受,也頻繁得到資本的青睞。微軟公司于2015年推出的Hololens對(duì)于可穿戴設(shè)備可謂有著劃時(shí)代的意義。其運(yùn)用的MR技術(shù)(Mix Reality)不同于完全虛擬的VR,MR是一種將虛擬與現(xiàn)實(shí)真正的結(jié)合起來的科技,實(shí)現(xiàn)了很多年來人們?cè)诳苹弥械幕孟?。因此,我們希望總結(jié)Hololens平臺(tái)的特性,探討Hololens在數(shù)字媒體領(lǐng)域的可能性,整理出一些基于Hololens平臺(tái)的應(yīng)用開發(fā)方向。
關(guān)鍵詞:Hololens平臺(tái);特性;開發(fā)方向;可能性
1特性
手勢(shì)識(shí)別:Hololens可以通過攝像頭識(shí)別用戶的手勢(shì),從而做出相應(yīng)的操作反饋,極大地改變了人機(jī)交互的方式。
語音識(shí)別:Hololens可以通過麥克風(fēng)收集用戶的語音信息并通過算法進(jìn)行精度較高的識(shí)別,這使用戶通過語音這一直接的方式與系統(tǒng)進(jìn)行交互成為可能。
視線跟蹤:通過Hololens內(nèi)置的傳感器,用戶可以使用視線來移動(dòng)光標(biāo),從而實(shí)現(xiàn)對(duì)全息圖像的選擇。
環(huán)境掃描:Hololens擁有四臺(tái)攝像頭,通過其拍攝到的畫面以及其特定的圖像算法,Hololens可以計(jì)算出場(chǎng)景深度圖,通過對(duì)場(chǎng)景深度圖的再次處理,就可以構(gòu)建出當(dāng)前使用者所處的實(shí)時(shí)三維場(chǎng)景,通過構(gòu)建出來的三維場(chǎng)景。當(dāng)Hololens內(nèi)部存儲(chǔ)有用戶當(dāng)前所處環(huán)境信息后,就可以很輕易地對(duì)其進(jìn)行虛擬處理。
2 Hololens平臺(tái)的應(yīng)用開發(fā)方向可能性
游戲:游戲的本質(zhì)是提供體驗(yàn),而Hololens在此處的優(yōu)勢(shì)是通過環(huán)境掃描實(shí)現(xiàn)的實(shí)時(shí)三維場(chǎng)景構(gòu)建,可以使游戲場(chǎng)景與現(xiàn)實(shí)的聯(lián)系更為緊密,從而加強(qiáng)游戲的沉浸感,比如在墻上開鑿一個(gè)小洞,或者為四周環(huán)境賦予不同尋常的材質(zhì)來適應(yīng)游戲的場(chǎng)景需求;此外,因?yàn)槿S場(chǎng)景的構(gòu)建,游戲開發(fā)者可以讓虛擬角色、玩家與真實(shí)的環(huán)境進(jìn)行交互,這也是其他平臺(tái)無法企及的優(yōu)勢(shì)。
此外,Hololens可以通過手勢(shì)、語音識(shí)別系統(tǒng)來極大地提升玩家的參與度,玩家不需要通過多余的操作控制器,如手柄、鼠標(biāo)、鍵盤等,就可以直接與游戲產(chǎn)生交互。這也為游戲設(shè)計(jì)師們對(duì)更自然的交互方式設(shè)計(jì)提供了基礎(chǔ)。
影視:通過環(huán)境掃描技術(shù),Hololens可以輕松實(shí)現(xiàn)將虛擬屏幕投射在真實(shí)空間中的效果,給用戶提供全新的觀看體驗(yàn):用戶不再需要手持電子設(shè)備或者面對(duì)在需要走動(dòng)時(shí)無法將屏幕移走的窘境,在觀看便利性上有了極大的提升。而影視應(yīng)用的另一個(gè)開發(fā)方向則是利用其虛擬環(huán)境構(gòu)建能力,在真實(shí)環(huán)境中搭建起舞臺(tái),讓觀影者置身其中,并且隨時(shí)用自己想要的角度,來進(jìn)行影片的觀看。
新媒體:信息資訊類應(yīng)用在Hololens平臺(tái)上可以充分利用的是其交互方式,應(yīng)用可以將信息以全息影像的方式呈現(xiàn)在用戶面前或投射在墻壁上,之后,用戶可以直接通過視線、語音、手勢(shì)等方式來選取自己感興趣的信息并進(jìn)行閱讀。
綜合來看,Hololens在數(shù)字媒體技術(shù)領(lǐng)域 應(yīng)用的潛能還是極大的,尤其是游戲、影視、新媒體方向。Hololens的意義在于通過人機(jī)交互方式、虛擬與現(xiàn)實(shí)環(huán)境關(guān)系上的創(chuàng)新,來給人們帶來前所未有的全新體驗(yàn),而在此平臺(tái)上進(jìn)行應(yīng)用開發(fā)時(shí),也需要開發(fā)者們大膽打破常規(guī),并且用心思考應(yīng)用與平臺(tái)特性的結(jié)合方式,使整個(gè)應(yīng)用兼具易用性與實(shí)用性。
基金項(xiàng)目:北京工業(yè)大學(xué)"星火基金"資助課題(XH-2018-02-27)