孔冰欣
仿佛江風(fēng)獵獵。
人在小舟上,船行天地間。其實(shí)連人帶船整體移動(dòng)的速度也稱不上快,但兩岸飛流直下似銀河倒懸,金粉朱光濺起滿腔“吾與君同”的壯懷,這一刻,如果醉得夠厲害,你只會(huì)覺(jué)得自己在飛。
脫下VR眼鏡,《新民周刊》記者從蘇東坡的赤壁回到了現(xiàn)實(shí)的魔都,在上海圖書館東館美術(shù)文獻(xiàn)館(以下簡(jiǎn)稱上圖美術(shù)文獻(xiàn)館)的“雪泥鴻爪——沉浸式VR交互游戲”里,悟到了歷史彼岸與此間紅塵可以完全共通的一點(diǎn)靈犀——
人生到處知何似,應(yīng)似飛鴻踏雪泥。往日崎嶇何足慮,吟嘯徐行送風(fēng)雨。
今年夏天,中國(guó)文青蓋章認(rèn)定的老法師、老朋友坡仔很忙。
關(guān)于他的紀(jì)錄片《定風(fēng)波》在央視播出了;上海書展主賓省的主題是“四川的東坡 世界的蘇軾”;就連記者無(wú)聊時(shí)下載的某款國(guó)風(fēng)武俠手游,都特意安排了坡仔支線,只是劇情比較夸張:詐死后,蘇先生隱居杭州,玩家為了他靈隱求魚、龍井問(wèn)茶、鬧市賣扇,結(jié)果伊呵呵笑著又云蹤杳渺了,害得一位千里迢迢趕來(lái)追星的癡心女粉絲(退休歌姬)撲了個(gè)空,而玩家已無(wú)力吐槽:子瞻兄,儂究竟有幾個(gè)好妹妹……
“雪泥鴻爪——沉浸式VR交互游戲”,則是近來(lái)“坡仔嘉年華”五光十色的文化產(chǎn)品中,最讓記者感到驚喜的。其“碧空卷微云”“孤光為誰(shuí)來(lái)”“河漢落酒樽”“水天浮起四座”的四個(gè)場(chǎng)景,取自聶子述《郁孤臺(tái)法帖》(現(xiàn)唯存上圖館藏宋拓孤本殘帙二冊(cè))。跟著前人的足跡,玩家莊周夢(mèng)蝶,先是來(lái)到了熙寧四年(1071年)的杭州,采蓮西湖,徘徊林泉,隨遇而安;然后見證了元豐二年(1079年)的身陷囹圄,檣傾楫摧,孤鴻只影;再然后被貶至遠(yuǎn)離汴京的荒僻黃州,混跡漁樵,出入阡陌,穿林打葉;最后,日啖荔枝,酒煮生蠔,登亭遠(yuǎn)眺——群山掩映,然一輪紅日冉冉升起,于是,所有對(duì)生命的熱愛,也因此全面蘇醒了……蘇軾是誰(shuí)?入雪泥鴻爪境,東坡照眾生,眾生皆東坡。
值得一提的是,坡仔不同時(shí)期的展品,如《試院煎茶》、游虎跑泉詩(shī)刻、月梅圖、南海浴日亭詩(shī)刻等,于“雪泥鴻爪”各章巧妙嵌入,呼應(yīng)特定的創(chuàng)作背景,亦堪稱點(diǎn)睛之筆?!昂訚h落酒樽”一節(jié)尤其驚艷:置身茅草屋,梁上孤零零的錢串、灶臺(tái)上漸漸冷掉的紅燒肉,捎帶幾分“空庖煮寒菜,破灶燒濕葦”的寒意。走出小院,竹林披雨霧;扁舟一葉,穩(wěn)泛滄浪空闊。驚鴻浮光質(zhì)感的BGM響起,四周高聳的崖壁上,上圖館藏的蘇軾小楷精品《赤壁賦》,以及美術(shù)館館員書寫的《念奴嬌·赤壁懷古》自眼前掠過(guò),而旅程的盡頭,是天際千古相迎的皎皎銀輪——挾飛仙以遨游,抱明月而長(zhǎng)終,當(dāng)是時(shí)也,明月不笑多情人,愿與坡仙共逍遙。
化身東坡游赤壁。
上海圖書館歷史文獻(xiàn)中心研究館員、“雪泥鴻爪”項(xiàng)目策劃人黃薇向《新民周刊》記者介紹道:“幾乎每一個(gè)中國(guó)人,都會(huì)在人生的不同境遇里與蘇軾相遇。我們吟誦他筆下的詩(shī)賦,游覽他走過(guò)的山河。他在天上,也在人間。這次的‘雪泥鴻爪,也是上圖美術(shù)文獻(xiàn)館與來(lái)自上海戲劇學(xué)院(上海市虛擬環(huán)境下的文藝創(chuàng)作重點(diǎn)實(shí)驗(yàn)室)的開發(fā)團(tuán)隊(duì)的二度合作,非常感謝上戲創(chuàng)意學(xué)院副院長(zhǎng)鐵鐘的支持與付出?!?/p>
據(jù)悉,鐵鐘帶領(lǐng)的上戲開發(fā)團(tuán)隊(duì)嘗試運(yùn)用AIGC技術(shù)中的人工智能圖像生成技術(shù),探索人工智能協(xié)作藝術(shù)創(chuàng)作的可能性。團(tuán)隊(duì)使用自然語(yǔ)言的處理技術(shù),將圍繞每個(gè)場(chǎng)景的主題文字通過(guò)AI系統(tǒng)(Chat GPT-3.5)描述為可感的文字關(guān)鍵詞,進(jìn)而向AI繪圖系統(tǒng)提供提示和布局,實(shí)現(xiàn)對(duì)圖像內(nèi)容的自動(dòng)生成。根據(jù)不同軟件的特性,前期主要采用Midjourney完成草圖繪制;后期采用Stable Diffusion加關(guān)鍵詞引導(dǎo)的方式,旨在獲得更穩(wěn)定可控的創(chuàng)作效果。以一千多張圖片為訓(xùn)練數(shù)據(jù),團(tuán)隊(duì)廣泛試驗(yàn)Dreambooth、LoRa和Hypernetworks等不同的訓(xùn)練方式,旨在“調(diào)教”出效果最佳的專屬風(fēng)格模型,激發(fā)國(guó)風(fēng)山水的多樣想象?!坝帽容^通俗的語(yǔ)言來(lái)講,就是我們廣泛參考AI生成的畫面,依靠虛幻引擎進(jìn)行數(shù)字創(chuàng)作及場(chǎng)景的搭建與深化。此外,這個(gè)項(xiàng)目還用到了OptiTrack Motive系統(tǒng)對(duì)真人進(jìn)行三維空間的數(shù)據(jù)記錄提取,將攝像機(jī)跟蹤數(shù)據(jù)與VR場(chǎng)景、動(dòng)捕數(shù)據(jù)及虛擬形象組合、渲染,實(shí)現(xiàn)了數(shù)字虛擬人和VR場(chǎng)景的深度融合?!?/p>
與上圖美術(shù)文獻(xiàn)館之前推出的VR互動(dòng)游戲不同,“雪泥鴻爪”不再以單獨(dú)的作品闡釋作為切入點(diǎn),而是鋪墊蘇軾生平游蹤的線索,將一代文豪的詩(shī)賦還原到具體創(chuàng)作的歷史場(chǎng)景,從而導(dǎo)引玩家主動(dòng)領(lǐng)悟山水與書法、自然與人文的彼此成全。不知不覺(jué),旁觀者竟成畫中客,在現(xiàn)代科技的加持下,人們輾轉(zhuǎn)于江南、嶺南、海南,待日光破曉飛鳥出,宦海沉浮、料峭迷霧、胸中暗郁,終一掃而空。黃薇分享了一些她個(gè)人的策劃心聲:“很多人問(wèn)過(guò)我,你們這次為什么不干脆還原一個(gè)真實(shí)的赤壁?其實(shí),團(tuán)隊(duì)追求的恰恰是‘藝術(shù)性。‘雪泥鴻爪里的赤壁,參考了武元直的畫意,最后的呈現(xiàn),既兼顧了工筆山水的細(xì)節(jié),又加入‘黑科技發(fā)光粒子,更具視覺(jué)沖擊的國(guó)風(fēng)場(chǎng)景,顯示了數(shù)字創(chuàng)意產(chǎn)業(yè)在技術(shù)創(chuàng)新方面的巨大潛力。”
為了營(yíng)造如夢(mèng)似幻的震撼效果,項(xiàng)目的后期優(yōu)化花了很長(zhǎng)時(shí)間。仔細(xì)凝視所謂“黑科技”粒子,原是碑帖上的文字幻變而來(lái);水面的反光、云與月的位置、鳥的飛行軌跡,都做過(guò)反復(fù)的調(diào)試,精益求精;清幽、朦朧的色調(diào),亦富有古色古香的儀式感,便于玩家“一秒入戲”……團(tuán)隊(duì)的終極目標(biāo)是:程序要跑得動(dòng),審美要帶得動(dòng)。
黃薇表示,“雪泥鴻爪”不是謎題破解,不是通關(guān)任務(wù),不強(qiáng)行在玩家耳邊絮絮叨叨地灌輸文博知識(shí)點(diǎn),“戴上VR眼鏡,只須靜靜感受就可以了。如果你的確被打動(dòng),那么試玩后你自會(huì)再去搜尋更多的東坡往事,了解他的生平”。
2023年 5月19日起,上圖美術(shù)文獻(xiàn)館即推出展覽“游目騁懷——北宋書家的人文之旅”,以館藏宋四家(蘇軾、黃庭堅(jiān)、米芾、蔡襄)的碑帖為基礎(chǔ),帶領(lǐng)讀者穿越到北宋文人的山水世界。作為展覽中出現(xiàn)頻率最高的“頂流”(共有14件相關(guān)的碑帖作品),東坡引無(wú)數(shù)觀眾競(jìng)折腰,善解人意、與時(shí)俱進(jìn)的館方,遂趁勢(shì)舉辦了一系列關(guān)于坡仔的文化活動(dòng),包括6月11日的一蓑煙雨任平生·蘇軾共讀會(huì),6月22日端午節(jié)的以書祈福,“粽”享安康——跟著北宋F4過(guò)端午,7月16日的“紙上藝林”第三講《黃州寒食帖》,8月12日起開放的“雪泥鴻爪”等等。8月22日起,展覽“斯文不滅——宋代摩崖石刻里的文字風(fēng)景”與市民朋友見面,“雪泥鴻爪”將與之密切配合,亟欲體驗(yàn)全套游戲者,請(qǐng)速于上圖官方小程序預(yù)約周末的活動(dòng)名額。
《新民周刊》記者獲悉,有87歲的退休教師在報(bào)紙上看到相關(guān)信息,奔赴上圖問(wèn)詢VR游戲;另有讀者電話預(yù)約,想帶高齡的老母親體驗(yàn)一番“雪泥鴻爪”的妙趣。不只老人家們興味盎然,小朋友們也玩得開心,這場(chǎng)“雪泥鴻爪”的大夢(mèng),寓教于樂(lè),余韻無(wú)窮。
夢(mèng)境很美。同時(shí),“造夢(mèng)”的沖動(dòng),正成為當(dāng)下一股不可阻擋的潮流。
隨著Roblox(世界最大的多人在線創(chuàng)作游戲)在美國(guó)的上市,元宇宙的商業(yè)化之路漸次明晰。在中國(guó)國(guó)內(nèi),依托技術(shù)發(fā)展和成本降低,文化IP向數(shù)字轉(zhuǎn)化的速度也逐日加速;被談?wù)摱嗄甑摹霸钪嫖膴省?,似已悄然落地,開始成為普通人可以消費(fèi)的文化內(nèi)容。如“消失的法老——胡夫金字塔沉浸式探索項(xiàng)目”,系全球首個(gè)在埃及胡夫金字塔內(nèi)部和周圍環(huán)境進(jìn)行掃描勘測(cè),后于虛擬引擎上以1∶1高精度重建還原的沉浸式項(xiàng)目。游戲中,黑貓形象的巴斯泰托女神(Bastet)會(huì)引領(lǐng)觀眾登上金字塔頂,將吉薩高原的風(fēng)光盡收眼底。如組合了《風(fēng)起洛陽(yáng)》《昆侖迷宮》《火星營(yíng)救》等多個(gè)VR全感劇場(chǎng)的“X-META|機(jī)遇時(shí)空”國(guó)潮元宇宙主題樂(lè)園——拜馬親王孵化出的歷史同人大IP所賜,戴上VR頭顯的玩家能化身劇中人物,在大唐的神都上躥下跳,與春秋道斗智斗勇,戲精附體且癡且癲。又如西岸鳳巢的《三體·引力之外》沉浸式體驗(yàn)劇、1933老場(chǎng)坊的“迷塔城1933”元宇宙沉浸式景區(qū)等等。
河漢落酒樽,明月來(lái)相迎,小玩家驚嘆不已。
與上述純商業(yè)項(xiàng)目相比,上圖歷史文獻(xiàn)中心各展館打造的數(shù)字媒體展覽,更注重文化內(nèi)涵的挖掘與實(shí)驗(yàn)性技術(shù)的探索,講究的是“戲玩載道”。2022年,美術(shù)文獻(xiàn)館首次推出“靈境石語(yǔ)——VR沉浸式交互游戲”項(xiàng)目,令觀眾置身作品產(chǎn)生的時(shí)空情境,通過(guò)積極互動(dòng),消除與文物之間的距離感,以全新的眼光審視、慨嘆、理解之。上圖館方舉例,“靈境石語(yǔ)”一期項(xiàng)目中,館員在“石不語(yǔ)——碑帖藝術(shù)與建筑文化”的數(shù)十件展品里,選擇了《九成宮醴泉銘》《城隍廟碑》《龍藏寺碑》等三件作為VR互動(dòng)游戲的對(duì)象。因上圖的鎮(zhèn)館之寶《四歐寶笈》里的《九成宮醴泉銘》中,還有一幅著名書畫家吳湖帆親手繪制的《九成宮》圖,故策展方與開發(fā)團(tuán)隊(duì)靈機(jī)一動(dòng),將碑文故事復(fù)原到中國(guó)青綠山水風(fēng)格的虛擬場(chǎng)景中,讓玩家變身唐太宗,再現(xiàn)“涌泉”的經(jīng)典時(shí)刻。而為了復(fù)原《龍藏寺碑》所在地河北正定隆興寺摩尼殿壁畫,策展團(tuán)隊(duì)仔細(xì)繪制了該殿的平剖面圖,從佛像的位置到香爐的形制,無(wú)一遺漏。“去年的‘靈境石語(yǔ)一期項(xiàng)目獲得了學(xué)界、業(yè)界和觀眾的一致好評(píng),還拿到了2022年中國(guó)數(shù)字人文年會(huì)優(yōu)秀項(xiàng)目最佳互動(dòng)獎(jiǎng)。今年的‘雪泥鴻爪是‘靈境石語(yǔ)二期項(xiàng)目,也等于是我們和上戲的開發(fā)團(tuán)隊(duì)再接再厲,第二次攜手合作?!?/p>
事實(shí)上,上圖東館建設(shè)之初,上圖歷史文獻(xiàn)中心即開始在多年累積的數(shù)字人文項(xiàng)目和研究的基礎(chǔ)上,嘗試性開展數(shù)字化與文旅展示相結(jié)合的實(shí)踐。如位于上圖東館一樓、以上圖館舍變遷為主題的“閱·動(dòng)70”展項(xiàng),生動(dòng)演繹了70年來(lái)圖書館經(jīng)歷的三次重大變遷和轉(zhuǎn)型。又如上圖東館地方文獻(xiàn)館的“上海之源”系列數(shù)字展,吸納了上圖“上海年華”項(xiàng)目組十?dāng)?shù)年的整理與研究碩果——
“上海之源·文化年譜”,以時(shí)間視角重現(xiàn)近代上海城市文化不斷孕育發(fā)展的歷程,著重體現(xiàn)文化史重要元素的關(guān)聯(lián)與演進(jìn)。文化年譜的視覺(jué)呈現(xiàn)狀如大樹,寓意綿延生長(zhǎng)、傳承有序的旺盛生命力。觀眾在現(xiàn)場(chǎng)觸屏后,代表近代上海文化歷史事件關(guān)鍵詞的“種子”,從樹根向上圍繞豎軸螺旋生長(zhǎng)出枝干,散開形成年譜樹的巨大樹冠。12種顏色,指向12種不同文化類別,覆蓋新聞、出版、戲劇、戲曲、美術(shù)、電影、建筑、文學(xué)等諸多領(lǐng)域,且人物、社會(huì)團(tuán)體與地標(biāo)建筑盤根錯(cuò)節(jié),往往點(diǎn)開一個(gè),背后就牽涉到另一個(gè),海量信息紛至沓來(lái),仿若奔涌不息的賽博洪流。
“上海之源·文化地標(biāo)”,則以上海紅色革命紀(jì)念地、上海優(yōu)秀歷史建筑、上海不可移動(dòng)文物和老上海影戲院四個(gè)主要板塊為核心,將其還原定位在20世紀(jì)20、30、40、50年代及現(xiàn)代等不同歷史時(shí)期的城市空間,集中展示知名海派文化地標(biāo)的前世今生。館方結(jié)合上海輿圖資源,以Touchdesigner實(shí)時(shí)交互多媒體設(shè)計(jì)聯(lián)動(dòng)Kinect互動(dòng)技術(shù),打造了體感控制互動(dòng)展向,創(chuàng)造出絢麗多彩而饒富趣致的沉浸式閱覽體驗(yàn)。除了中共一大紀(jì)念館、申報(bào)館大樓、四行倉(cāng)庫(kù)等歷史建筑,對(duì)于諸如卡爾登大戲院、上海大學(xué)青云路校區(qū)等名噪一時(shí),卻又遺憾未能保留至今的“消失的老友們”,該展項(xiàng)的3D復(fù)原顯然有助于激發(fā)今天的觀眾追索建筑隱秘的意愿。
未來(lái),“上海之源”系列數(shù)字展還能根據(jù)數(shù)據(jù)資料整理的情況,不斷進(jìn)行深化拓展,與上圖業(yè)已建設(shè)完畢的線上程序“初心之地——尋找紅色革命紀(jì)念地”“尋找武康路”等實(shí)現(xiàn)更多的聯(lián)動(dòng)。
總的來(lái)說(shuō),這一屆觀眾熟諳ACG文化,日??吹氖菄?guó)外最新大片、沉浸式戲劇,玩的是3A大作、劇本殺、真人密室,希冀攫取他們的視線,不放點(diǎn)大招是不行的?!把┠帏欁Α边@樣的VR游戲,倘若預(yù)備“會(huì)當(dāng)凌絕頂,一覽眾山小”,劇本必須更接近一流電影級(jí)別,建模精度、聲光變化、操作感的細(xì)節(jié),也必須做更進(jìn)一步的優(yōu)化處理。唯有苦心孤詣,不斷打磨,才能構(gòu)建出隔絕現(xiàn)實(shí)的夢(mèng)幻場(chǎng)域,玩家穿行其間,全情投入,經(jīng)歷了歷史的冒險(xiǎn),觸摸到文明的碎片。
老玩家寫了表?yè)P(yáng)的感言。
論制作水平,“靈境石語(yǔ)”等數(shù)字化項(xiàng)目可以代表較高水準(zhǔn)的多媒體展項(xiàng)體驗(yàn);但是,在實(shí)際的服務(wù)過(guò)程中,團(tuán)隊(duì)也遇到不少現(xiàn)實(shí)的問(wèn)題。目前,該項(xiàng)目仍作為線下展覽的附屬產(chǎn)品,未能獲得獨(dú)立的開發(fā)預(yù)算和空間,導(dǎo)致題材受到限制,運(yùn)用場(chǎng)景也較為局限。而參考消費(fèi)市場(chǎng)上相關(guān)文旅項(xiàng)目的解決方案和運(yùn)營(yíng)經(jīng)驗(yàn),VR展完全可以成為文博機(jī)構(gòu)新的展示平臺(tái)和服務(wù)項(xiàng)目。另外,設(shè)計(jì)思路上,“靈境石語(yǔ)”一期和二期分別嘗試了“重交互”和“重場(chǎng)景”的兩種模式。一期更偏重于知識(shí)傳遞和觀眾交互,在內(nèi)容呈現(xiàn)和博物館教育的層面更具代表意義,但現(xiàn)場(chǎng)實(shí)踐中卻導(dǎo)致對(duì)部分觀眾教育成本過(guò)高,操作體驗(yàn)不甚友好。二期項(xiàng)目偏重沉浸式的氛圍,現(xiàn)場(chǎng)體驗(yàn)感優(yōu)于一期,但不熟悉蘇軾生平背景的玩家,或認(rèn)為缺乏有效信息的獲得途徑。
“靈境石語(yǔ)”一期項(xiàng)目中搭建的VR體驗(yàn)場(chǎng)景。
《四歐寶笈》中吳湖帆繪制九成宮場(chǎng)景。
策展團(tuán)隊(duì)仔細(xì)繪制了摩尼殿的平剖面圖。
“上海之源·文化年譜”,觀眾在現(xiàn)場(chǎng)觸屏后,海量信息紛至沓來(lái),仿若奔涌不息的賽博洪流。
上圖館方表示,GALM(gallery - 畫廊,library - 圖書館,archive - 檔案館,museum - 博物館)儼然大勢(shì)所趨,“四位一體”值得擁抱。而無(wú)論是商業(yè)項(xiàng)目還是公益項(xiàng)目,VR游戲等多媒體技術(shù)的介入,能夠突破傳統(tǒng)媒介限制,讓觀眾徹底“身臨其境”“有感而發(fā)”,是真正對(duì)“讓收藏在博物館里的文物,陳列在廣闊大地上的遺產(chǎn),書寫在古籍里的文字都活起來(lái)”的最好詮釋。接下來(lái),上圖東館家譜館計(jì)劃于國(guó)慶節(jié)的時(shí)候推出配合家譜館全新展覽的AR交互作品。“內(nèi)容上,我們會(huì)挑出三件珍稀家譜來(lái)講述若干屬于上海的城市故事。比如從董其昌的家譜談起,看海派文明的一個(gè)發(fā)展脈絡(luò),‘閱人;從討論徐家匯和徐光啟、陸家嘴和陸深,從青龍港到上海務(wù)的一段段歲月變遷,‘閱城;從《廣東中山北嶺徐氏宗譜》(填補(bǔ)了中國(guó)人參加第一屆世博會(huì)歷史的最早紀(jì)錄),分析西學(xué)東漸,‘閱世界……技術(shù)上,我們?cè)谙蚨嗳私换サ哪繕?biāo)努力(類似于從單機(jī)游戲到網(wǎng)游的轉(zhuǎn)變)。歡迎大家屆時(shí)來(lái)上圖打卡!”
“上海之源·文化地標(biāo)”。