安徽大學(xué)新聞傳播學(xué)院 童 云
全民閱讀被列為我國(guó)“國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展第十三個(gè)五年規(guī)劃”的重大工程之一,并提升到國(guó)家戰(zhàn)略高度。國(guó)家廣播電視總局(原國(guó)家新聞出版廣電總局)發(fā)布的《新聞出版廣播影視“十三五”發(fā)展規(guī)劃》提出要打造有聲讀物精品出版工程,加強(qiáng)有聲讀物精品的創(chuàng)作生產(chǎn)。中國(guó)新聞出版研究院發(fā)布的《2015~2016中國(guó)數(shù)字出版產(chǎn)業(yè)年度報(bào)告》提出,出版業(yè)需要注重內(nèi)容創(chuàng)新,運(yùn)用先進(jìn)技術(shù),對(duì)內(nèi)容進(jìn)行解構(gòu)重組;加強(qiáng)產(chǎn)品創(chuàng)新,著力加強(qiáng)產(chǎn)品的可視化、多維化創(chuàng)新。
有聲書(shū)(Audio Books,Talking Books or Narrated Books),即有聲故事、“聽(tīng)書(shū)”,指以實(shí)物存儲(chǔ)或數(shù)字存儲(chǔ)形式公開(kāi)發(fā)行和銷(xiāo)售的有聲出版物。有聲書(shū)包括小說(shuō)、評(píng)書(shū)、散文、詩(shī)歌、故事、外語(yǔ)、知識(shí)教育等有聲語(yǔ)言產(chǎn)品和服務(wù),其中有文字依據(jù)的語(yǔ)音內(nèi)容不低于51%。聲音具有極強(qiáng)的可嵌入性,可以與畫(huà)面結(jié)合制作影視作品,與人工智能結(jié)合產(chǎn)生語(yǔ)音交互應(yīng)用,與虛擬或增強(qiáng)現(xiàn)實(shí)技術(shù)結(jié)合可以創(chuàng)造一個(gè)向現(xiàn)實(shí)空間延伸的故事世界。
有聲書(shū)成為繼電子書(shū)后增長(zhǎng)最快的出版物。美國(guó)出版商協(xié)會(huì)發(fā)布的主流出版單位銷(xiāo)售數(shù)據(jù)顯示,2016年美國(guó)電子書(shū)收入同比下降15.6%,但有聲書(shū)收入同比增長(zhǎng)25.8%,銷(xiāo)售額達(dá)21億美元。中國(guó)的有聲書(shū)市場(chǎng)在2000年后發(fā)展迅速,聽(tīng)書(shū)網(wǎng)站和手機(jī)客戶端、微信公眾號(hào)等為有聲書(shū)提供了傳播渠道。聽(tīng)書(shū)網(wǎng)站有天方聽(tīng)書(shū)網(wǎng)、聽(tīng)中國(guó)、酷聽(tīng)網(wǎng)、暢想聽(tīng)吧、惠天聽(tīng)書(shū)網(wǎng)等;手機(jī)客戶端有“懶人聽(tīng)書(shū)”“喜馬拉雅FM”“荔枝FM”“蜻蜓.fm”“考拉FM”“酷我聽(tīng)書(shū)”“聽(tīng)書(shū)閣”“天天評(píng)書(shū)”等;廣播電臺(tái)手機(jī)客戶端中也包含有聲書(shū)內(nèi)容,如“中國(guó)廣播”“聽(tīng)聽(tīng)FM”“阿基米德FM”“達(dá)耳聞”“大藍(lán)鯨”等;自媒體微信公眾號(hào)如“青音”“凱叔講故事”等。
虛擬現(xiàn)實(shí)技術(shù)(Virtual Reality Technique,簡(jiǎn)稱(chēng)VR)是以計(jì)算機(jī)技術(shù)為核心,結(jié)合相關(guān)科技,生成與一定范圍真實(shí)環(huán)境在視覺(jué)、聽(tīng)覺(jué)、觸感等方面高度近似的數(shù)字化環(huán)境。增強(qiáng)現(xiàn)實(shí)技術(shù)(Augmented Reality Technique,簡(jiǎn)稱(chēng)AR)是在虛擬現(xiàn)實(shí)基礎(chǔ)上發(fā)展起來(lái)的新技術(shù),是將計(jì)算機(jī)生成的虛擬物體、場(chǎng)景或系統(tǒng)提示信息疊加到真實(shí)場(chǎng)景中,從而實(shí)現(xiàn)對(duì)現(xiàn)實(shí)的“增強(qiáng)”,增加用戶對(duì)現(xiàn)實(shí)世界的感知。由于用戶與真實(shí)世界的聯(lián)系并未被切斷,交互方式也就顯得更加自然。
增強(qiáng)現(xiàn)實(shí)技術(shù)的有聲讀物(以下簡(jiǎn)稱(chēng)AR有聲書(shū))是指在傳統(tǒng)紙質(zhì)圖書(shū)的基礎(chǔ)上,將計(jì)算機(jī)制作的視頻、音頻、三維動(dòng)畫(huà)、虛擬模型、虛擬場(chǎng)景或系統(tǒng)提示信息疊加到真實(shí)環(huán)境中,實(shí)時(shí)交互,增強(qiáng)讀者對(duì)閱讀內(nèi)容的感知和理解。AR有聲書(shū)是一種有聲版增強(qiáng)現(xiàn)實(shí)圖書(shū),是聲音藝術(shù)與增強(qiáng)現(xiàn)實(shí)技術(shù)結(jié)合,在靜態(tài)平面圖書(shū)上創(chuàng)作的動(dòng)態(tài)、立體、交互性可視化讀物。圖書(shū)由平面媒介變?yōu)榭臻g媒介,由平面閱讀延伸到空間閱讀,具有立體感、動(dòng)態(tài)性、交互性、沉浸感、構(gòu)想性、娛樂(lè)性特點(diǎn)。
《消失的世界》是中國(guó)科學(xué)技術(shù)大學(xué)新媒體研究院周榮庭教授帶領(lǐng)師生團(tuán)隊(duì),以法國(guó)兒童科普作家亨利·德斯梅(Henry Desmet)作品《消失的大陸》為藍(lán)本而打造的增強(qiáng)現(xiàn)實(shí)有聲讀本。亨利·德斯梅在豐富的科普資料基礎(chǔ)上,以生物誕生時(shí)間為順序、以講故事的方式介紹遠(yuǎn)古滅絕的生物,為孩子們創(chuàng)作了一本奇幻瑰麗的繪本。研發(fā)團(tuán)隊(duì)從2015年10月開(kāi)始,歷經(jīng)2個(gè)月的開(kāi)發(fā),用計(jì)算機(jī)3D建模方法還原古生物外形,將語(yǔ)音、音樂(lè)、音效、動(dòng)態(tài)視頻和虛擬模型嵌入繪本,聘請(qǐng)南京古生物地質(zhì)博物館專(zhuān)家對(duì)3D形態(tài)進(jìn)行專(zhuān)業(yè)指導(dǎo)。讀者用手機(jī)掃描封面二維碼下載“科學(xué)薈”客戶端,對(duì)準(zhǔn)書(shū)中有標(biāo)識(shí)的地方掃一掃,就能讓古生物活起來(lái),圖書(shū)變成可以看、可以聽(tīng)、可以玩、可以拍照的神奇繪本,不但增長(zhǎng)知識(shí),還培養(yǎng)孩子的學(xué)習(xí)興趣。
研發(fā)團(tuán)隊(duì)經(jīng)過(guò)21天的策劃和籌備,在“浮世云書(shū)”眾籌出版平臺(tái)上以986元的價(jià)格售賣(mài),讀者參與眾籌的同時(shí)也參與到創(chuàng)作過(guò)程中。2016年初,《消失的世界》上市不到2個(gè)月便售罄,并再次印刷。這本AR繪本深受讀者好評(píng),獲得中國(guó)科協(xié)主辦、果殼網(wǎng)承辦的高科技創(chuàng)意大賽一等獎(jiǎng)。
目前,基于智能手機(jī)的增強(qiáng)現(xiàn)實(shí)出版物正迅速發(fā)展。AR有聲書(shū)將計(jì)算機(jī)制作的動(dòng)態(tài)模型疊加到現(xiàn)實(shí)中,虛擬立體影像與真實(shí)生活環(huán)境交融,形成虛實(shí)疊加場(chǎng)景。AR系統(tǒng)的基本技術(shù)包括顯示技術(shù)、三維注冊(cè)技術(shù)、交互技術(shù)以及虛實(shí)場(chǎng)景之間的融合技術(shù)。其中三維注冊(cè)是指系統(tǒng)實(shí)時(shí)、精準(zhǔn)計(jì)算攝像機(jī)相對(duì)于真實(shí)世界的位置和姿態(tài),以便將虛擬場(chǎng)景正確地安置到它應(yīng)處的位置,這是AR系統(tǒng)的關(guān)鍵技術(shù)。在技術(shù)支持下,增強(qiáng)現(xiàn)實(shí)的目標(biāo)是給用戶提供更豐富有效的增強(qiáng)信息,以提高用戶對(duì)世界的認(rèn)知能力。
AR有聲書(shū)復(fù)原消失數(shù)億年的恐龍時(shí)代,再現(xiàn)太空星云、星球、黑洞,模擬火箭、飛船升空?qǐng)鼍埃饺梭w自身視聽(tīng)極限,增添無(wú)限遐想?!断У氖澜纭稟R有聲書(shū)將始祖鳥(niǎo)、冠龍、蛇頸龍、劍齒虎、大角鹿、渡渡鳥(niǎo)、巨脈蜻蜓等約30種已經(jīng)滅絕的動(dòng)物模型嵌入書(shū)中,掃描圖書(shū)就能使它們來(lái)到讀者身邊,栩栩如生,令人著迷。
有聲書(shū)在20世紀(jì)30年代誕生之初的服務(wù)對(duì)象是視障人群,歐美國(guó)家早期的有聲書(shū)庫(kù)主要面向圖書(shū)館和學(xué)校。在教育領(lǐng)域,有聲讀物能夠幫助低齡兒童增加閱讀量,提升理解力和語(yǔ)言應(yīng)用能力;有聲書(shū)深受老年群體的喜愛(ài),可以減輕視力負(fù)擔(dān),伴隨性閱讀讓人感到輕松愉悅。在移動(dòng)互聯(lián)時(shí)代,更多熱衷于聲音的人們?cè)陂_(kāi)車(chē)、健身、行走途中聽(tīng)書(shū),有聲故事用聲音敘述情節(jié)、描述細(xì)節(jié)、塑造形象、勾畫(huà)場(chǎng)景、營(yíng)造意境,使聽(tīng)者產(chǎn)生想象的空間。有聲書(shū)在收聽(tīng)的情感性、娛樂(lè)性、知識(shí)性、伴隨性等方面優(yōu)勢(shì)明顯。
AR有聲書(shū)是聲音與增強(qiáng)現(xiàn)實(shí)空間交融的藝術(shù)。聲音嵌入故事模塊,讀者點(diǎn)擊模塊,自主選擇即將播出的內(nèi)容。如《消失的世界》中掃描圖片出現(xiàn)大角鹿模型,它一會(huì)兒低頭吃草,一會(huì)兒行走奔跑。讀者一邊觀看3D動(dòng)畫(huà),一邊聆聽(tīng)語(yǔ)音解說(shuō):“它也被叫做愛(ài)爾蘭麋鹿或泥炭沼澤鹿。它頭上的角超過(guò)3.5米長(zhǎng),重40多千克……在一年中,大角鹿只有半年是有角的,它的角只有在交配季節(jié)才會(huì)生長(zhǎng)?!鄙鷦?dòng)有趣的講述,輕松的音樂(lè)配合動(dòng)態(tài)虛擬影像,如同走進(jìn)立體的電影,沉浸在遠(yuǎn)古時(shí)代。語(yǔ)音解說(shuō)讓孩子們?cè)跊](méi)有家長(zhǎng)的陪伴下也可以獨(dú)自探索遠(yuǎn)古大陸,了解滅絕動(dòng)物的生活習(xí)性、滅絕原因及過(guò)程,激發(fā)他們學(xué)習(xí)的興趣和對(duì)大自然的熱愛(ài)與保護(hù)意識(shí)。
AR有聲故事的音樂(lè)和音效根據(jù)內(nèi)容、情感、意境進(jìn)行設(shè)計(jì),如在《消失的世界》中古生物出現(xiàn)的剎那,用光束配合音樂(lè)和音效來(lái)吸引人們走進(jìn)故事。
AR有聲書(shū)的沉浸體驗(yàn)可從以下三方面獲得:一是虛實(shí)交融,計(jì)算機(jī)模型疊加到真實(shí)場(chǎng)景,讀者在視覺(jué)上感到虛擬模型是現(xiàn)實(shí)世界的一部分,看到一個(gè)動(dòng)態(tài)、立體的世界;二是參與互動(dòng),人與書(shū)中造型互動(dòng),參與內(nèi)容生成,敘事由平面走向空間;三是以人為主,人機(jī)交互,讀者自主選擇敘事模塊中的任何部分,主動(dòng)去聆聽(tīng)、觀察、操作,增強(qiáng)對(duì)書(shū)中內(nèi)容的理解。
以《消失的世界》為例,其將3D動(dòng)物模型疊加到讀者所在的現(xiàn)實(shí)生活,讀者可用手指將動(dòng)物放大、拖動(dòng),改變它的形態(tài)和大小,還可以把它們疊放到草坪、教室、桌面、掌心等真實(shí)場(chǎng)景中,讓動(dòng)物們與讀者合影,這種隨心所欲的交互行為其樂(lè)無(wú)窮。
讀者是創(chuàng)作主體,從旁觀者變?yōu)閰⑴c者,參與故事的書(shū)寫(xiě),與故事融為一體,這極大地激發(fā)了讀者的想象力和創(chuàng)造力。AR有聲故事具有趣味性、逼真性和游戲性,讓讀者通過(guò)360度視角觀察,點(diǎn)擊觸發(fā)事件,收聽(tīng)語(yǔ)音講解,并設(shè)有互動(dòng)環(huán)節(jié)或游戲,強(qiáng)化敘事參與感,調(diào)動(dòng)多感官體驗(yàn)。在群體交互中,讀者還能與其他人共享虛擬環(huán)境,交互操作和演練。
《消失的世界》研發(fā)團(tuán)隊(duì)還制作了AR卡牌“遠(yuǎn)古對(duì)決”“物競(jìng)?cè)藫瘛焙椭R(shí)問(wèn)答卡,卡牌與繪本關(guān)聯(lián),是對(duì)AR繪本的補(bǔ)充,豐富了閱讀形式,由幾位玩家一起游戲。如“物競(jìng)?cè)藫瘛庇?6張動(dòng)物卡牌,可2~4人參與,卡牌上記載每種動(dòng)物的基本信息,由玩家進(jìn)行提問(wèn)競(jìng)賽,贏得最多動(dòng)物卡牌的玩家為勝。
數(shù)字媒體產(chǎn)品為用戶提供了個(gè)性化的內(nèi)容體驗(yàn),引發(fā)用戶心理情感上的認(rèn)同,體驗(yàn)具有真實(shí)感,有效提高了用戶的忠誠(chéng)度。交互式體驗(yàn)讓讀者沉浸于虛實(shí)融合的世界,寓教于樂(lè),增強(qiáng)閱讀樂(lè)趣,提高了學(xué)習(xí)效率。
AR有聲書(shū)在教育、科普、體育、醫(yī)療、旅游、建筑、房產(chǎn)、職業(yè)訓(xùn)練等諸多領(lǐng)域應(yīng)用廣泛。AR有聲故事目前多以科普、探險(xiǎn)、挑戰(zhàn)、戰(zhàn)爭(zhēng)類(lèi)型為主。AR場(chǎng)景中的每個(gè)故事模塊都能促使讀者去互動(dòng),讀者帶著好奇心,主動(dòng)填補(bǔ)模塊與模塊之間的故事縫隙,去感知、觸碰、體驗(yàn)和創(chuàng)造。在實(shí)驗(yàn)教育、游戲教學(xué)、情境教學(xué)和殘障人士學(xué)習(xí)等相關(guān)教育領(lǐng)域,AR有聲書(shū)有廣闊的應(yīng)用前景。旅游景區(qū)制作的AR有聲書(shū)可擔(dān)當(dāng)導(dǎo)游,代替形象宣傳片;文化古跡和古董藝術(shù)品的增強(qiáng)現(xiàn)實(shí)應(yīng)用,能給游客提供各種數(shù)據(jù)資料。AR醫(yī)學(xué)教材模擬人體系統(tǒng),直觀展示人體的結(jié)構(gòu),幫助學(xué)生自主學(xué)習(xí)和訓(xùn)練。
總之,AR有聲書(shū)是增強(qiáng)現(xiàn)實(shí)技術(shù)對(duì)圖書(shū)出版領(lǐng)域的變革。目前由于成本高、價(jià)格高、技術(shù)含量高等原因,AR有聲書(shū)剛剛起步。在媒體融合時(shí)代,AR有聲書(shū)對(duì)于視聽(tīng)媒介產(chǎn)業(yè)發(fā)展將是一片可以探索的藍(lán)海。聲音藝術(shù)與新技術(shù)結(jié)合,必將產(chǎn)生更多的內(nèi)容創(chuàng)新形態(tài),值得繼續(xù)探索。
1. Martin-Gutierrez,Jorge,Luis,Saorin,Jose,Contero,Manuel:Design and validation of an augmented book for spatial abilities development in engineering students,COMPUTERS & GRAPHICS-UK,2010,34(1)。
2.中國(guó)數(shù)字出版產(chǎn)業(yè)年度報(bào)告課題組張立、王飚、李廣宇:《“十二五”收官之年的中國(guó)數(shù)字出版——2015~2016中國(guó)數(shù)字出版產(chǎn)業(yè)年度報(bào)告主報(bào)告(摘要)》,《出版發(fā)行研究》,2016年第8期。
3.周榮庭:《運(yùn)營(yíng)數(shù)字媒體》,科學(xué)出版社,2012年版,第35~40頁(yè)。
4.鮑金潔、周榮庭:《眾籌出版的運(yùn)作模式和實(shí)踐策略研究——以〈消失的世界〉A(chǔ)R科普繪本為例》,《科技與出版》,2016年第8期。
5.楊麗娟、陳鵬、張鵬:《基于智能手機(jī)的增強(qiáng)現(xiàn)實(shí)技術(shù)綜述》,《軟件導(dǎo)刊》,2016年第3期。
6.趙沁平:《虛擬現(xiàn)實(shí)綜述》,《中國(guó)科學(xué)(F輯∶信息科學(xué))》,2009年第1期。