北京2022年冬奧會觀察指南圖表，想必早已納入廣大朋友的收藏夾了。作為虎年春節(jié)期間的“重頭戲”，觀看冬奧會或?qū)⒊蔀槎鄶?shù)人過年必備的儀式感之一。2022年“冬奧日歷”出臺后，很多網(wǎng)友都表示“期待地搓手手”，但在疫情防控常態(tài)化模式下，“家門口的冬奧會”可遠(yuǎn)觀而不可近距離到場觀賽，又難免讓人感到遺憾。

冬季奧林匹克盛會在特殊的時代背景首臨華夏，中國能否順利舉辦一場簡約、安全、精彩的冬奧會成為全球關(guān)注的焦點，而如何讓更多不在現(xiàn)場的朋友檢驗中國交出的答卷，欣賞體育盛會之大美，則是“觀賽科學(xué)家”關(guān)注和研究的重點。

在北京2022年冬奧會和冬殘奧會期間，不論你身處何方，只需具備5G環(huán)境，自由交互式技術(shù)便可讓你身臨其境地享受一臺“獨家”的賽事轉(zhuǎn)播，你不僅可以自己做自己的導(dǎo)播，也可以自由選擇你最想看的視角，真正實現(xiàn)“想怎么看，你說了算”。

2019年，北京大學(xué)博雅特聘教授陳寶權(quán)就致力于“科技冬奧”重點專項——冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)項目研發(fā)。歷時三年，他成功把電影特效帶入賽事轉(zhuǎn)播，讓觀眾通過一部手機(jī)就能身臨其境觀看體育盛會。

2021年10月，陳寶權(quán)在首都體育館調(diào)試自由視角拍攝相機(jī)。

賦予觀眾“分身術(shù)”“云觀賽”比現(xiàn)場體驗更精彩

通過交互VR轉(zhuǎn)播技術(shù)看比賽，和真正去現(xiàn)場觀賽的體驗真的能一樣嗎？

不一樣，應(yīng)該是更好。因為現(xiàn)場你就是在座位上去觀看，你的視點實際上有一定的局限。以冰球比賽為例，在運動場上，從南到北，從左到右，賽場上的熱點迅速轉(zhuǎn)移，變幻莫測。面對這種跳躍性極強(qiáng)的熱點現(xiàn)象，一場賽事下來，很多觀眾或許都坐不住“冷板凳”。所以很多時候觀眾可能很希望跑到另外一個看臺去看比賽，這在現(xiàn)場其實是做不到的。依托我們研發(fā)的冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)，成功賦予觀眾“分身術(shù)”的魔力，讓大家的座位和視角可以隨著賽事熱點隨時“呼叫轉(zhuǎn)移”。每個人都可以根據(jù)自己的意愿去改變視點觀看賽事，而且看到的都是高清畫面，這樣應(yīng)該能夠帶來一個更好的觀賞體驗。

從看得清到看得真，看上去只有這一個字的變化。一字之差的背后，來自科研團(tuán)隊歷時3年的攻關(guān)克難，才能讓更多觀眾享受智慧冬奧、科技冬奧的成果。能否請您介紹一下這種身臨其境的體驗感，有哪些技術(shù)在背后支撐著？

提高分辨率可以確?！翱吹们濉?，良好的清晰度則能帶來更好的真實感。我認(rèn)為“看得清”最重要的是能帶給觀眾真實的現(xiàn)場感。什么叫在現(xiàn)場呢？我改變我的視點，我感覺它是個活生生的存在，是個三維的存在，它不只是一個固定的畫面。因為固定畫面保留視點是固定的，你是被動去觀看轉(zhuǎn)播信號，你就感覺不是身臨其境的。所以，這個“看得真”，我們定義它就是特指，在視點的空間上我們可以隨意改變。

2021年11月，項目組成員在五棵松體育館測試。

為了確保觀眾觀賽360度無死角、全方位呈現(xiàn)賽場熱點變化，冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)采用40—60多個相機(jī)環(huán)繞場地進(jìn)行拍攝。多路視頻信號經(jīng)過處理生成了更多的視點，形成海量的視頻匯聚到手機(jī)端。

2021年春節(jié)聯(lián)歡晚會期間，8K轉(zhuǎn)播技術(shù)的成功運用和實踐為我們的研發(fā)團(tuán)隊提供了良好的參考模板和經(jīng)驗。目前，我國的視頻編解碼技術(shù)已經(jīng)趨向成熟發(fā)展階段，具備良好的基礎(chǔ)和專業(yè)的標(biāo)準(zhǔn)體系。此外，5G技術(shù)也是海量高清視頻傳播的一大技術(shù)支撐，確保賽場畫面及時、高效、高清地輸送到觀眾面前。

自由視角+導(dǎo)播系統(tǒng)讓觀眾隨心所欲“躺平”觀賽

360度全方位觀賽，如何幫觀眾實現(xiàn)自由視角？

視點回放的意義在于，能夠從視點之間進(jìn)行一個跳躍，可以改變不同的角度。但是它不夠自由，不夠自由的原因在于它是跳躍的。比如要360度覆蓋一個場地，可能只能是有限的相機(jī)的機(jī)位，哪怕是60個、100個也不夠多。要是60個，每兩個相機(jī)之間就是有6度的差別。6度的跳躍中間是有好多信息的，如果劃過去它就不夠自由。所謂的自由視點，就是把已經(jīng)拍攝的這些視頻中間的視點，把它的視頻生成出來、計算出來，這樣你再去整個場地穿越的時候，或者劃行的時候，它就是一個無縫的體驗。就好像你在這個場子里面慢慢地游走，也能看到在每一個瞬間、每一個視點相應(yīng)的影像，所以這就是自由視點所帶來的不一樣的體驗。

自由視角技術(shù)需要觀眾去主動交互，打破了人們平常熟悉的觀賽習(xí)慣。如果普通觀眾駕馭不了這種技術(shù)，怎么辦？

一方面，自由視點給觀眾帶來了很好的自由度，但是確實不是所有的觀眾都非常熟悉這種瀏覽習(xí)慣。因此，傳統(tǒng)的轉(zhuǎn)播仍有它的意義。所謂傳統(tǒng)轉(zhuǎn)播，可能現(xiàn)場也是有多路的相機(jī)在拍攝，但是導(dǎo)播會切換一些精彩的視點、精彩的鏡頭。但是不管怎么樣，他這種切換最后到了觀眾面前，實際上就是一路視頻信號。這種導(dǎo)播變得非常的重要，其實也可以基于自由視點的技術(shù)，提供導(dǎo)播的功能。針對不同賽事的特點，讓人們進(jìn)行先期了解，比如冰球，無論從教練、觀眾、發(fā)燒友，他都知道去看哪一些鏡頭，事情快發(fā)生的時候他該怎么去看，這些都是有一些經(jīng)驗的，他們對這些精彩的瞬間都有所期待。

面對這種情況，我們可以事先把有經(jīng)驗的導(dǎo)播策略置入系統(tǒng)，類似AI技術(shù)，以便能夠根據(jù)自由視點提供一個特別有自由度的觀看模式，就可以把這樣一個智能導(dǎo)播的技術(shù)，與自由視點生成的技術(shù)結(jié)合在一起，系統(tǒng)實時地生成一些精彩的片段。這些片段可以以視頻流的方式切換進(jìn)來，這樣大家可以“躺平”了觀看，但是自由視點會帶來區(qū)別于以前簡單的切換鏡頭帶來的精彩畫面，它可以帶來像“子彈時間”這樣的一種時間凝固，或者說在運動的時候我快速地飛躍相機(jī)的位置得到一種視覺的展示。

冰雪項目交互式多維度觀賽體驗技術(shù)與系統(tǒng)對于現(xiàn)場觀賽的價值在哪？

現(xiàn)場觀眾對號入座，不可避免存在視點的局限性，而一部手機(jī)就能打破這種局限。比如某個賽事剛開始就在觀眾眼前，后來視點轉(zhuǎn)到對面的場地去了。這時候觀眾可以拿出手機(jī)調(diào)整觀賽姿勢，這樣也是實現(xiàn)了一個互補(bǔ)，虛實交融。在你眼前的時候，你就直接看，不在你眼前的時候，你就通過手機(jī)看，有點像元宇宙似的。其實，在現(xiàn)場還有一個特別重要的功能，就是在裁判進(jìn)行裁決的時候，有些時候我們經(jīng)常出現(xiàn)一些裁決有爭論，因為視點的遮擋或者各個方面。我們這個自由視點實際上可以給現(xiàn)場的裁判，提供一個自由視點，也就是說他不只是從他自己的視點做決定，他可以通過我們這個自由視點，一個全方位的視點進(jìn)行研判，這樣對于賽事的裁決，各個方面也會起到一個很好的作用。

視角直抵“最后一公里”只有想不到，沒有看不到

這項技術(shù)的研究對5G、VR乃至元宇宙技術(shù)的推廣有哪些裨益？

所謂的“最后一公里”，我個人覺得應(yīng)該有兩個層面的意思。一個是技術(shù)層面，我們從拍攝到計算，涉及大量信息的處理、計算，然后傳輸，最后傳到不同的終端，比如手機(jī)終端，通過一些5G網(wǎng)絡(luò)等，它實際上確實有“最后一公里”，我們在一些主干網(wǎng)上可能傳輸?shù)男适菈蛄?，但是到了終端，也就是“最后一公里”到我們的手機(jī)，這個時候可能就會遇到一些問題。5G技術(shù)是非常好的幫助，技術(shù)本身漸趨成熟，基礎(chǔ)設(shè)施、部署等各方面都比較充分，這樣才能發(fā)揮它的作用。從物理層鏈路上，“最后一公里”通過我們這個項目，做了一個非常好的測試，因為我們在測試中間是做了整個直播的，直播對打通整個環(huán)節(jié)非常重要。

2021年10月，項目組成員在首都體育館進(jìn)行技術(shù)測試。

“最后一公里”，我覺得另一個是內(nèi)容層面。要讓普通老百姓也能感受得到科技這條線的發(fā)展，這是我理解的“最后一公里”它蘊含的意義。不是說只能在一個少數(shù)的、特殊的行業(yè)、一部分人群才能享受一技術(shù)，那就沒有延伸到我們最廣大的老百姓，所以“最后一公里”就沒打通。我們這一次正好因為整個技術(shù)的測試，是面向體育賽事的轉(zhuǎn)播，而體育賽事轉(zhuǎn)播又是老百姓非常感興趣的東西。隨著項目的推進(jìn)，這個測試還比較順利，讓普通的老百姓通過普通的設(shè)備——手機(jī)，非常真切地感受到這個技術(shù)帶來的一些好處。所以，我覺得是在“最后一公里”上，做了一定的嘗試，希望能夠發(fā)揮更多的作用。

這套技術(shù)系統(tǒng)，除了在冬奧會期間可以讓更多的人觀看賽事，今后還會有哪些經(jīng)濟(jì)效益和社會效益？

從我們這一次測試的技術(shù)來看，如果說把它從體育賽事轉(zhuǎn)播這個事情抽象開來，實際上它就是捕獲現(xiàn)實場景，然后傳輸?shù)浇K端的用戶，讓他們能夠有一個身臨其境的觀看體驗。這樣的技術(shù)我們可以想象一下，實際上它可以應(yīng)用在任何其他的場景，當(dāng)然如果說還延伸娛樂，那就是舞臺觀看或者其他的一些大型的表演，再到和民生相關(guān)的，比如在醫(yī)療的診斷領(lǐng)域，我們說醫(yī)生看病要望、聞、問、切，這個“望”很重要，就是我要看到這個人。同樣的道理，我不只是說前面有一個攝像頭來看，而是說我可以從各個角度去觀察這個人的膚色，包括各種細(xì)微的一些細(xì)節(jié)，能夠幫助遠(yuǎn)程的診斷，這是一個特殊的和大家相關(guān)的應(yīng)用。

如果再說到我們每天都要做的事情，那就是人和人之間的交流。當(dāng)然，我們現(xiàn)在疫情期間通過視頻會議挺多的，但是視頻會議它的一個問題就是，它是一個固定的視頻信號，交互性弱了一些。想象一下，在視頻會議的時候，如果我能看到不同角度的成員的存在，這個和現(xiàn)場我們?nèi)粘＝涣骶蜎]有太大的差別，對于人和人之間的交流會帶來一個無窮的便利性。所以圍繞這個展開，其他的比如電子商務(wù)，購買商品之前，消費者也希望從各個角度去觀摩了解。所以，人的觀看體驗是剛需，這項技術(shù)還有很大的想象空間。