王永
泛娛樂(lè)的迅速發(fā)展,讓短視頻成為越來(lái)越廣泛和普及的交流形式。尤其是隨著智能手機(jī)的快速發(fā)展,攝像頭技術(shù)也隨之迎來(lái)持續(xù)的迭代和演進(jìn),消費(fèi)者對(duì)于高質(zhì)量攝像頭以及專(zhuān)業(yè)的視頻拍攝軟件有了更高的要求。
Imint是一家2007年成立于瑞典的軟件公司,其創(chuàng)始團(tuán)隊(duì)及現(xiàn)在的研究團(tuán)隊(duì)都源自瑞典烏普薩拉大學(xué)的圖像分析中心。主要專(zhuān)長(zhǎng)領(lǐng)域包括:實(shí)時(shí)傳感器分析、運(yùn)動(dòng)預(yù)測(cè)、相機(jī)建模與校準(zhǔn),提供的軟件產(chǎn)品和相關(guān)的解決方案目前已經(jīng)服務(wù)全球大多數(shù)的智能手機(jī)廠(chǎng)商。
“我們一直把自己看做是一家產(chǎn)品公司,這個(gè)概念對(duì)Imint至關(guān)重要。” Imint CEO Andreas Lifvendahl在接受筆者的采訪(fǎng)時(shí)表示,Imint所做的一切都是在將過(guò)往的經(jīng)驗(yàn)以及諸多合作伙伴的成功經(jīng)驗(yàn)打包成產(chǎn)品,從而讓客戶(hù)更加容易使用。
成立初期,Imint專(zhuān)注于研發(fā)航空偵查軟件,活躍于國(guó)防領(lǐng)域。2013年,隨著智能手機(jī)時(shí)代的到來(lái),Imint開(kāi)始業(yè)務(wù)的轉(zhuǎn)型——2015年Imint正式做出進(jìn)入消費(fèi)品市場(chǎng)以及智能手機(jī)行業(yè)的重要戰(zhàn)略決定,并推出視頻增強(qiáng)軟件Vidhance。其功能包括視頻防抖、降噪、水平校準(zhǔn)、自拍模式、光學(xué)防抖支持、動(dòng)態(tài)運(yùn)動(dòng)模糊消減、實(shí)時(shí)智能構(gòu)圖、多攝像頭校準(zhǔn)工具等。
在Imint最新發(fā)布的2021年一期財(cái)報(bào)中,搭載Vidhance視頻防抖技術(shù)的智能手機(jī)的數(shù)量已經(jīng)超過(guò)6億。
“毫無(wú)疑問(wèn),Imint首要的業(yè)務(wù)領(lǐng)域仍然是智能手機(jī)市場(chǎng)。不過(guò)我們將目標(biāo)放在了更多領(lǐng)域,比如搭載相機(jī)的設(shè)備制造商、運(yùn)動(dòng)相機(jī)、可搭配設(shè)備以及無(wú)人機(jī)等?!?Andreas Lifvendahl表示,更加長(zhǎng)遠(yuǎn)來(lái)看,Imint的戰(zhàn)略合作伙伴不僅僅是智能手機(jī)和可穿戴設(shè)備的制造商,同時(shí)還包括各種相機(jī)、運(yùn)動(dòng)相機(jī)以及芯片企業(yè)。
據(jù)了解,Imint與Rokid合作推出了AR工業(yè)用頭盔—— Rokid X-Craft,頭盔的功能之一是讓遠(yuǎn)程的工程師可以通過(guò)遠(yuǎn)程視頻的方式增強(qiáng)現(xiàn)實(shí),從而給現(xiàn)場(chǎng)工程師提供工程方案與技術(shù)指導(dǎo)。
此外,芯片市場(chǎng),Imint也一直與高通保持著緊密合作。但高通并不是Imint在與視頻相關(guān)的芯片領(lǐng)域展開(kāi)合作的唯一一家公司,市場(chǎng)上面主流的芯片組制造商,只要涉足了移動(dòng)攝像頭的相關(guān)芯片領(lǐng)域,都與Imint展開(kāi)合作,其中也包含了許多快速發(fā)展的中國(guó)企業(yè),比如海思也位列其中。
事實(shí)上,智能手機(jī)的市場(chǎng)創(chuàng)新很大程度上都是基于硬件的發(fā)展來(lái)推動(dòng),其中就包括芯片組、攝像頭模組以及ISP等,Imint所提供的軟件就是為了在這個(gè)過(guò)程中能夠充分發(fā)揮硬件升級(jí)更迭所帶來(lái)的潛力。
“在過(guò)去的幾年當(dāng)中,我們看到各家的視頻防抖方案質(zhì)量有了極大的提升,Imint視頻防抖解決方案在發(fā)展的過(guò)程中,水平已經(jīng)到達(dá)了一個(gè)很高的層面。然而現(xiàn)實(shí)是當(dāng)我們把智能手機(jī)拍攝出來(lái)的畫(huà)面與像好萊塢電專(zhuān)業(yè)的電影制作團(tuán)隊(duì)拍攝出來(lái)的視頻相比的時(shí)候,還是有巨大的技術(shù)差別。”Imint CTO Johan Svensson也略顯無(wú)奈,但同時(shí)也更加堅(jiān)定了Imint技術(shù)團(tuán)隊(duì)減小手機(jī)與專(zhuān)業(yè)電影拍攝設(shè)備之間的視頻質(zhì)量差別的信念。
Vidhance第四代視頻防抖技術(shù)就是Imint不斷 追求創(chuàng)新的成果:不僅重新設(shè)計(jì)了整個(gè)視頻防抖核心,還提升了視頻拍攝質(zhì)量,以及手持設(shè)備用戶(hù)的拍攝體驗(yàn)。
具體來(lái)看,Vidhance第四代視頻防抖技術(shù)的優(yōu)勢(shì)主要體現(xiàn)在三個(gè)方面:首先,可以完美地消除多余抖動(dòng)。在做視頻防抖的時(shí)候,用戶(hù)需要達(dá)成的效果是讓視頻看起來(lái)更加平滑、流暢,且不僅于此。它需要能夠有效地反映出視頻創(chuàng)作者對(duì)于相機(jī)的掌控,而不是光做到平滑流暢,否則,對(duì)于視頻創(chuàng)作者來(lái)說(shuō)它會(huì)是一個(gè)難用的系統(tǒng)。
其次,Vidhance可以意圖識(shí)別系統(tǒng),通過(guò)了解用戶(hù)手持?jǐn)z像頭時(shí)的運(yùn)動(dòng)意圖,感知到視頻創(chuàng)作者是在行走、平移鏡頭還是只想保持鏡頭靜止或任何其它的意圖,對(duì)用戶(hù)行為進(jìn)行準(zhǔn)確預(yù)測(cè),從而獲得更好的防抖效果。
最后,預(yù)處理算法,為OEM客戶(hù)帶來(lái)巨大的價(jià)值。在處理視頻和相關(guān)的防抖時(shí),除了實(shí)時(shí)防抖,在用戶(hù)平移或者固定攝像頭時(shí),更加準(zhǔn)確預(yù)測(cè)運(yùn)動(dòng)意圖并帶來(lái)防抖的能力以外,還有很重要的一點(diǎn)就是,為了進(jìn)行視頻的處理,需要把固定的關(guān)鍵幀臨時(shí)存儲(chǔ)在內(nèi)存當(dāng)中,以便后續(xù)利用這些幀來(lái)進(jìn)行防抖的圖像處理。
通過(guò)Vidhance第四代防抖技術(shù),需要存儲(chǔ)在內(nèi)存當(dāng)中的視頻幀的數(shù)量可以大幅度減少,也就是說(shuō)用戶(hù)對(duì)于內(nèi)存的占用會(huì)極大程度降低——讓需要存儲(chǔ)的幀數(shù)更小,對(duì)于內(nèi)存的占用更小,更加容易達(dá)成功耗與視頻質(zhì)量之間的平衡,實(shí)現(xiàn)出色的視頻效果。
值得一提的是,對(duì)于智能手機(jī)生產(chǎn)商客戶(hù)以及其他行業(yè)的客戶(hù)來(lái)說(shuō),如果已經(jīng)使用了上一代Vidhance視頻防抖技術(shù),升級(jí)軟件也是非常簡(jiǎn)便的一件事情,Imint保留了原來(lái)軟件的API和相關(guān)的界面,僅需下載第四代的文件從而替換掉原來(lái)的第三代即可。