嚴子淇 雷雨欣
(1.天津師范大學教育學部,天津 300000;2.天津師范大學計算機與信息工程學院,天津 300000)
增強現(xiàn)實技術(shù)是指通過在真實物體上疊加虛擬影像進而達到虛實融合等特點的技術(shù)[1],實現(xiàn)了在使用者的同一視野中虛擬事物與現(xiàn)實世界的融合與互動[2],能夠增強用戶對真實環(huán)境的感覺和認識[3]。而移動增強現(xiàn)實技術(shù)則是在傳統(tǒng)增強現(xiàn)實技術(shù)基礎(chǔ)上衍生出來的一個分支,是借助于智能移動端將屏幕上的虛擬世界與現(xiàn)實世界融合并進行互動的一種新興技術(shù)[4]。這種技術(shù)能夠?qū)⒃驹诂F(xiàn)實世界的一定時間空間范圍內(nèi)很難體驗到的視覺、聲音等多種實體信息通過計算機技術(shù)模擬仿真后融合,使用者感受到各種與現(xiàn)實世界融合的虛擬信息,產(chǎn)生超現(xiàn)實感的體驗[5]。相比于傳統(tǒng)增強現(xiàn)實技術(shù),移動增強現(xiàn)實技術(shù)實現(xiàn)成本較低,使用方便,具有良好的實用價值,在教育、娛樂、醫(yī)療等多個領(lǐng)域得到了更為廣泛的應(yīng)用。
移動增強現(xiàn)實技術(shù)具有以下特點:一是交互性強。移動增強現(xiàn)實技術(shù)實現(xiàn)交互的方式不再只是借助于鼠標鍵盤等設(shè)備,而是由精確的位置輸入擴展到整個環(huán)境,從單一的人機交互發(fā)展到用戶與對象的融合[5]。數(shù)字信息不再只是在屏幕上簡單呈現(xiàn),而是與用戶所處的環(huán)境實時結(jié)合起來,極大地提高了用戶的沉浸式體驗感。二是配合了移動終端的使用。隨著移動互聯(lián)網(wǎng)、高性能處理器的發(fā)展,以及各類軟硬件設(shè)備環(huán)境的不斷完備,移動增強現(xiàn)實技術(shù)常常以智能手持設(shè)備作為應(yīng)用平臺,如手機、平板等,在技術(shù)使用上擺脫了頭顯設(shè)備、手持設(shè)備等高經(jīng)濟成本的局限,實現(xiàn)了增強現(xiàn)實系統(tǒng)的小型化和便攜化。
隨著移動增強現(xiàn)實技術(shù)的成熟,移動增強現(xiàn)實技術(shù)越來越多地應(yīng)用于各個行業(yè),在人們的日常生活中也越來越常見,虛實融合的優(yōu)勢也讓其在教育領(lǐng)域中也逐漸擁有了重要地位。移動增強現(xiàn)實技術(shù)在教育領(lǐng)域中常以移動增強現(xiàn)實教育游戲的類型出現(xiàn)。如田元等開發(fā)的面向?qū)W齡前兒童的移動增強現(xiàn)實教育游戲ARTeddyMath[6],再如由喜訊無限公司開發(fā)的生物自然課學習軟件“蝶千尋游戲”[7]。移動增強現(xiàn)實教育游戲能夠通過創(chuàng)造現(xiàn)實世界與虛擬事物相融合的環(huán)境,適應(yīng)多種形式的課外學習,為學習者提供身臨其境的體驗,使得學習者能夠感受到高度的虛實結(jié)合性與交互性,極大地激發(fā)學習者自主學習的興趣[8]。除此之外,移動增強現(xiàn)實技術(shù)在教育領(lǐng)域中的使用能實現(xiàn)學習者對復雜空間關(guān)系和抽象概念的可視化,幫助學生更好地發(fā)展高階思維能力[1]。
在“科教興國”戰(zhàn)略和建設(shè)創(chuàng)新型國家的大背景下,科普教育與學??茖W教育不斷融合,科技館、科普讀物大量出現(xiàn),使得科普教育逐漸走入我國青少年的學習生活中?!翱破铡庇址Q大眾科學或普及科學,是一種社會教育形式[9]。在這種社會教育形式逐漸普及的大背景下,也有學者于2011年提出,我國中小學,特別是農(nóng)村中小學在科普教育中的主渠道作用沒有得到應(yīng)有的發(fā)揮[10]。這主要是因為在當時科普教育對教學資源的要求較高,比較具有創(chuàng)新性的科普教育形式,如大型科技館等,大多僅在較為發(fā)達的城市可以見到。而對于一些經(jīng)濟比較落后的農(nóng)村地區(qū),科普教育形式較為單一,缺乏有效模式,在培養(yǎng)學生的科學方法、科學精神、科學思想方面,顯得疲軟無力[10]。
一直以來,城鄉(xiāng)教育非均衡化發(fā)展都是困擾我國教育改革與發(fā)展的重大問題[11]。黨的十九大報告提出,要推動城鄉(xiāng)教育一體化發(fā)展,努力讓每個孩子都能享有公平而有質(zhì)量的教育[12]。城鄉(xiāng)教育一體化是指統(tǒng)籌城鄉(xiāng)教育發(fā)展,整合城鄉(xiāng)教育資源,打破城鄉(xiāng)二元經(jīng)濟結(jié)構(gòu)和社會結(jié)構(gòu)的束縛,構(gòu)建動態(tài)均衡、雙向溝通、良性互動的教育體系和機制,促進城鄉(xiāng)教育資源共享、優(yōu)勢互補,推動城鄉(xiāng)教育相互支持、相互促進,縮小城鄉(xiāng)之間的教育差距,有效消除地域、經(jīng)濟等原因?qū)е碌慕逃还剑淖冝r(nóng)村地區(qū)教育的落后狀況,使均衡化的公共教育服務(wù)覆蓋城鄉(xiāng)全體居民,實現(xiàn)城鄉(xiāng)教育均衡發(fā)展、協(xié)調(diào)發(fā)展、共同發(fā)展[13]。因此,城鄉(xiāng)教育一體化的實質(zhì)是教育的城鄉(xiāng)一體化,在不斷追求教育平衡發(fā)展的時代背景下,城鄉(xiāng)教育一體化能夠?qū)Τ鞘小⑥r(nóng)村之間的教育資源進行有效的、科學的整合,進而逐漸縮小兩者之間的差距。現(xiàn)如今,隨著互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展,在新媒體技術(shù)的推動下,農(nóng)村兒童教育逐漸應(yīng)用了現(xiàn)代遠程資源,使得教育突破了時空的限制,優(yōu)質(zhì)的教育資源在城鄉(xiāng)之間實現(xiàn)了共享,促進了教育公平,對于學生的未來發(fā)展起到了重要作用,也因此成為了城鄉(xiāng)教育一體化的重要手段之一[14]。
基于此,本研究設(shè)計并開發(fā)了一個基于移動增強現(xiàn)實技術(shù)的城鄉(xiāng)一體化自然科普游戲“自然探險家”,適合于學生在課外進行自然科普知識的學習。該游戲?qū)⒁苿釉鰪姮F(xiàn)實技術(shù)與教育游戲相結(jié)合,以較低的成本創(chuàng)設(shè)相對真實的自然科學學習環(huán)境,培養(yǎng)學習者的科學探究能力,拉近和提高城鄉(xiāng)學生的生態(tài)保護知識水平并塑造正確對待自然的情感態(tài)度價值觀,最終實現(xiàn)寓教于樂、自然探索與教育公平。
“自然探險家”是一款基于移動增強現(xiàn)實技術(shù)的教育游戲。參與者在進行游戲前需要選擇不同的自然主題,如柳樹、海棠等,每一個主題都有相應(yīng)的游戲內(nèi)容。參與者需要在虛實結(jié)合的交互環(huán)境下通過尋找任務(wù)、回答問題,完成對某一自然主題“探險”的活動,更為真切地感受到自然的魅力,進而學習到某一主題的自然科普知識,塑造正確對待自然的情感態(tài)度價值觀。
2.2.1 游戲總體設(shè)計
結(jié)合自然科普主題的教學內(nèi)容與教育游戲設(shè)計的一般模式,將教育游戲總體設(shè)計分為游戲主題設(shè)計、游戲規(guī)則設(shè)計、游戲任務(wù)設(shè)計、游戲邏輯設(shè)計、學習資源設(shè)計、游戲界面設(shè)計、游戲交互設(shè)計七個方面。其中具體功能設(shè)計上包括四個部分內(nèi)容,分別是用戶登錄模塊、概念認知模塊、自主探究模塊、關(guān)卡小結(jié)模塊。案例開發(fā)的整體框架模型如圖1所示。
圖1 自然探險家案例開發(fā)整體框架
2.2.2 功能模塊設(shè)計
①用戶登錄
參與者進入用戶登錄頁面,注冊用戶成功后可以選擇開始游戲。在開始游戲前系統(tǒng)會對游戲流程及操作進行導讀,用戶需要觀看游戲規(guī)則并選擇想要參與的游戲主題。
②主題背景呈現(xiàn)
主題背景呈現(xiàn)這一功能是以動畫微課來給用戶呈現(xiàn)的。微課內(nèi)容為自然科學故事導入,以用戶所選擇的自然主題為背景,提出一個與該主題相關(guān)的問題,用戶需要帶著問題進入到游戲中。這一功能的設(shè)計主要是為了引發(fā)兒童的思考,同時激發(fā)兒童對自然科學、生態(tài)保護的興趣。除此之外,任務(wù)驅(qū)動及時驗收兒童學習情況,提高兒童成就感、激發(fā)興趣、提高兒童的思維能力和科學素養(yǎng)。建立反饋機制,為兒童量身定做合適的學習方法及安排學習進度,提高學習效率。
③增強現(xiàn)實呈現(xiàn)
該游戲主要是基于移動增強現(xiàn)實技術(shù)設(shè)計的,游戲打破環(huán)境限制,將生態(tài)保護知識直觀呈現(xiàn),使得用戶可以在更為真實的環(huán)境中進行游戲,感受到更為生動的自然現(xiàn)象。沉浸式的游戲模式也更加能夠激發(fā)兒童學習興趣。
④交互式練習
用戶在游戲活動結(jié)束后,會進入到交互式練習模塊,用戶需要完成幾道與游戲主題相對應(yīng)的練習,通過用戶對不同答案的選擇分析用戶的學習情況,找出其知識薄弱點,給予不同的反饋并提供針對性的查缺補漏。同時也幫助用戶進行歸納、類比、整理、總結(jié),提高教學質(zhì)量和鞏固用戶的學習成果。
本項目采用Unity3d引擎。Unity 3d是現(xiàn)今游戲開發(fā)行業(yè)的主要開發(fā)引擎之一,可以支持多平臺,擁有插件支持豐富的特點,相較于Unreal、OGRE等引擎而言學習入門難度適中,平臺兼容性好,適合移動端開發(fā)[15]。增強現(xiàn)實模塊采用ARCoreSDK增強現(xiàn)實開發(fā)工具包,同樣支持多平臺使用,并提供圖片識別、平面檢測識別等功能??紤]到使用群體中Android用戶多于iOS用戶,在開發(fā)完畢后,項目最后被打包成安卓安裝包(.apk),即可在安卓手機上使用。
3.2.1 用戶注冊與登錄模塊
本項目具有云端存儲數(shù)據(jù)的功能。用戶進行注冊后,就可以在其他設(shè)備上使用同一賬戶。用戶數(shù)據(jù)存儲于云端服務(wù)器,服務(wù)器采用MySQL 數(shù)據(jù)庫對用戶數(shù)據(jù)進行存儲。MySQL 數(shù)據(jù)庫是一種輕量級的數(shù)據(jù)庫,采用完全的多線程編程,它的權(quán)限及口令系統(tǒng)十分靈活且安全,可以為用戶提供強大的備份功能,保證用戶數(shù)據(jù)的安全。
3.2.2 主題背景實現(xiàn)
當用戶登錄游戲,界面會出現(xiàn)以自然科普有關(guān)的動畫微課,引導用戶進入既定的場景中。Unity支持.mov、.mp4、.avi、.mpeg等多種視頻格式,并為開發(fā)者提供兩種視頻的播放方式,分別是在游戲?qū)ο笾胁シ藕驮贕UI 層面上播放。本項目采用第二種方式加入視頻,直接將腳本綁定在對象中,在GUI 中調(diào)用DrawTexture方法,并修改newRect以調(diào)整視頻大小。
3.2.3 用戶交互實現(xiàn)
當用戶打開攝像機與虛擬動植物進行交互時,軟件會自動出現(xiàn)提示框發(fā)布任務(wù)或介紹自然科普知識,幫助用戶完成自主學習。其中的提示框、任務(wù)清單等的呈現(xiàn)利用Unity 3d自帶的UI,嵌入在啟動、AR交互、學習任務(wù)選擇界面中,給予用戶操作指導,并且方便進行知識點總結(jié)。自主學習模塊中使用的彈窗主要包括消息框、提示框等,分為需要用戶點擊和自動消失不同類型等,分別適用于不同場景。
3.3.1 ARCore軟件開發(fā)包
本項目的增強現(xiàn)實模塊實現(xiàn)采用Google 發(fā)布的ARCore增強現(xiàn)實軟件開發(fā)工具包(SDK),可以支持多個平臺上的AR體驗。其主要技術(shù)原理是通過設(shè)備相機來識別一系列特征點,利用跟蹤手勢和分析傳感器檢測到的坐標位移來實現(xiàn)真實世界與虛擬物體的映射。ARCore除了可以識別特征點,還可以檢測平面,使用者只需要用手機攝像頭對準某一平面,即可在屏幕上與虛擬動植物進行交互。在開發(fā)方面,ARCore提供Unity3d平臺的API,實現(xiàn)系統(tǒng)開發(fā)需求。
3.3.2 平面檢測功能實現(xiàn)
本游戲主要利用ARCore的環(huán)境理解功能實現(xiàn)對平面的檢測,讓手機可以檢測平坦水平表面的位置和大小,使用戶只需要打開手機攝像頭,識別到平面后即可出現(xiàn)AR效果,進而根據(jù)界面提示完成后續(xù)操作,主要的開發(fā)流程如圖2所示。
圖2 平面檢測功能實現(xiàn)
首先需要在Unity3d 引擎中創(chuàng)建場景,刪除MainCamera及DirectionalLight,隨后將ARCore 的Prefabs 加入場景。Prefabs 的預制件主要包含GameObjects 及其相關(guān)聯(lián)的模塊,復用方便。在場景中添加時間系統(tǒng)后即可導入模型,其中模型來自Unity3d 自帶的資源庫AssetStore。其次是創(chuàng)建C#類AppController作為控制器,添加ARCore命名空間,緊接著創(chuàng)建三個方法,主要功能如下:一是檢查用戶的設(shè)備情況,比如相機有無權(quán)限,手機是否支持ARCore等;二是在用戶屏幕上顯示信息;三是檢查用戶的設(shè)備是否被有效追蹤,如果沒有就要設(shè)置將應(yīng)用暫停,則被追蹤狀態(tài)將繼續(xù)保持。接著是制作平面Prefabs,首先給平面賦予一個材質(zhì)紋理,方便實例化以后用戶可以直接看到這個平面,隨后添加渲染器來渲染檢測到的平面,ARCore中已經(jīng)含有渲染器,只需要將其附加到平面上即可。在以上的操作下,打開Unity 3d的Hierarchy窗口,將平面拖動到Prefabs文件夾中,設(shè)置好平面的預置。隨后更新AppController 控制器來實現(xiàn)最終的對平面的視覺檢測。最后,在其中引用它的命名空間,并將新檢測到的平面和已檢測到的所有平面放置到兩個list 表中,并修改Update方法中的代碼即可[16]。
3.3.3 虛擬交互實現(xiàn)
用戶可以通過拖拽手機屏幕上的模型實現(xiàn)動植物模型的放大、縮小操作,這個功能可以利用Unity 3D 中的FingerGestures插件實現(xiàn)。在PackageManager中導入FingerGestures 插件包,并將FingerGestures 加入場景中,添加監(jiān)聽器,通過OnPich獲取手指放大和縮小的路徑,并相應(yīng)更改物體尺寸,再利用OnTwist 事件中獲取到的角度變化更改物體的大小即可[17]。
由于本游戲包括動物模型和植物模型,在模擬真實動物時,需要模型進行一定的運動,因此在選擇動物模型時著重選擇AssetStore中帶有動作的模型,并利用Unity 3d中的Animatior組件編輯模型的動作變化。
在Unity 3d 游戲引擎中選擇edit->preferences,將安裝好的sdk 和jdk 的路徑填入相應(yīng)位置,在file->build setting->play setting中設(shè)置軟件圖標、版本號、名稱后,即可點擊build發(fā)布,生成.apk文件。
測試時,在移動終端(Android設(shè)備)中安裝apk即可運行游戲。經(jīng)過測試,發(fā)現(xiàn)本游戲可以流暢地進行,用戶注冊與登錄達到預期,場景提示沒有缺失,設(shè)備相機檢測平面速度正常,動植物的增強現(xiàn)實效果較好,游戲整體具有一定穩(wěn)定性、趣味性,基本滿足設(shè)計需求。測試結(jié)果如表1所示。
表1 游戲測試結(jié)果
移動增強現(xiàn)實教育游戲通過真實環(huán)境與虛擬模型的融合,為學習者提供了身臨其境的體驗,使得學習者能夠感受到高度的虛實結(jié)合性與交互性,極大地激發(fā)了自主學習的興趣。
本研究基于移動增強現(xiàn)實技術(shù)開發(fā)了一個自然科普游戲,該游戲具有用戶登錄、動畫播放、增強現(xiàn)實、環(huán)境感受、問題回答等功能模塊,以較低的成本創(chuàng)設(shè)相對真實的、具有交互性的自然科學學習環(huán)境,培養(yǎng)學習者的科學探究能力,拉近和提高城鄉(xiāng)學生的生態(tài)保護知識水平并塑造正確對待自然的情感態(tài)度價值觀,在不斷追求教育平衡發(fā)展的時代背景下,為城鄉(xiāng)教育一體化提供了思路。