馮霄霞
伴隨著計(jì)算機(jī)技術(shù)和網(wǎng)絡(luò)技術(shù)的發(fā)展,視頻檢索技術(shù)已經(jīng)廣泛應(yīng)用在視頻點(diǎn)播、數(shù)字電視、數(shù)字圖書館、遠(yuǎn)程教育和遠(yuǎn)程醫(yī)療等領(lǐng)域。
視頻檢索主要是依賴于視頻算法對(duì)視頻進(jìn)行預(yù)處理,通過(guò)對(duì)視頻內(nèi)容進(jìn)行結(jié)構(gòu)化處理,提取出視頻內(nèi)容中的有效信息,進(jìn)行標(biāo)記或者相關(guān)處理后,就可以通過(guò)各種屬性描述進(jìn)行快速檢索。
因此視頻檢索最主要的是利用視頻檢測(cè)算法對(duì)視頻進(jìn)行結(jié)構(gòu)化描述。目前已經(jīng)在相應(yīng)的產(chǎn)品中得到應(yīng)用的算法主要有以下幾種:行為分析算法、車牌識(shí)別算法、車輛顏色識(shí)別算法、車標(biāo)識(shí)別算法、車型識(shí)別算法、人臉檢測(cè)識(shí)別算法、人體特征識(shí)別算法等。其中人體特征識(shí)別又包括人的年齡、性別、身高、衣服顏色、是否戴眼鏡等特征信息的識(shí)別。
視頻檢索
新型安防數(shù)據(jù)的分析管理
在安防領(lǐng)域,各地平安城市、智慧城市的建設(shè)和公共安全領(lǐng)域的信息化建設(shè)的推進(jìn),都產(chǎn)生了大量監(jiān)控視頻數(shù)據(jù),伴隨著高清化、智能化的安防行業(yè)發(fā)展趨勢(shì),視頻數(shù)據(jù)的數(shù)量正在呈指數(shù)級(jí)地增長(zhǎng)。然而,視頻數(shù)據(jù)卻又不同于安防領(lǐng)域的其他傳統(tǒng)的信息數(shù)據(jù)。以往的傳統(tǒng)信息,經(jīng)過(guò)多年數(shù)據(jù)庫(kù)技術(shù)的發(fā)展,已經(jīng)形成了一套完善的基于信息管理系統(tǒng)的管理平臺(tái),可以快速準(zhǔn)確地對(duì)所關(guān)心的數(shù)據(jù)進(jìn)行檢索查詢,例如人口信息管理系統(tǒng)、報(bào)警平臺(tái)、車輛管理系統(tǒng)等。
而視頻數(shù)據(jù)目前還沒(méi)有這樣有效的管理系統(tǒng),還不能對(duì)確實(shí)存在的數(shù)據(jù)進(jìn)行方便快速的查詢和使用,視頻檢索技術(shù)的發(fā)展就是希望能解決這樣的問(wèn)題。在安防領(lǐng)域,視頻檢索技術(shù)主要應(yīng)用在圖像偵查方面,視頻數(shù)據(jù)對(duì)案件偵破的作用,也促使圖偵成為一個(gè)規(guī)模很大的新的警種。視頻檢索的具體應(yīng)用主要包括視頻濃縮和特征檢索,而特征檢索通常需要智能分析和圖像增強(qiáng)技術(shù)的支持。
監(jiān)控視頻數(shù)據(jù)所蘊(yùn)含的信息密度很低,針對(duì)某一具體需求,24小時(shí)的視頻數(shù)據(jù)中有用的數(shù)據(jù)也許只有幾秒鐘,而這幾秒的數(shù)據(jù),它的信息價(jià)值卻很高。
視頻濃縮技術(shù)就是用來(lái)有效提高視頻數(shù)據(jù)的信息密度的,它會(huì)將視頻的運(yùn)動(dòng)目標(biāo)從背景中分離出來(lái),然后按照時(shí)間先后和位置關(guān)系集中疊加在背景中形成新的視頻,這樣既能最大程度地保留環(huán)境信息,同時(shí)在時(shí)間和空間上壓縮無(wú)用信息。特征檢索技術(shù)是指對(duì)視頻內(nèi)容中目標(biāo)的特征進(jìn)行標(biāo)記索引,然后通過(guò)對(duì)特征的描述或樣圖顯示的特征對(duì)視頻進(jìn)行搜索,找出符合特征的視頻片段,快速?gòu)闹蝎@取更多信息,提升效率,節(jié)省人力成本。
應(yīng)用與現(xiàn)狀
初見(jiàn)成效 ?亟待完善
我國(guó)很多的安防企業(yè)或相關(guān)機(jī)構(gòu)都陸續(xù)推出了自己的視頻檢索系統(tǒng),具體工作過(guò)程和原理都類似,第一步是對(duì)需要檢索的視頻數(shù)據(jù)進(jìn)行采集和集中存儲(chǔ),以供視頻檢索系統(tǒng)快速調(diào)用,有些廠家研發(fā)了專門的設(shè)備,這些設(shè)備對(duì)硬盤里的視頻數(shù)據(jù)進(jìn)行快速拷貝來(lái)提高采集速度;第二步則是正式進(jìn)行視頻檢索,其一是對(duì)數(shù)據(jù)進(jìn)行濃縮摘要,濃縮后的視頻數(shù)據(jù)提供給偵辦人員進(jìn)行人工排查,也可以用于特征檢索;其二是通過(guò)用戶提供的特征對(duì)視頻數(shù)據(jù)進(jìn)行檢索。
辦案人員可以通過(guò)查看濃縮視頻,極大地節(jié)省排查視頻的時(shí)間,當(dāng)在濃縮視頻中發(fā)現(xiàn)可疑目標(biāo)時(shí),可以通過(guò)點(diǎn)擊視頻上的目標(biāo)快速打開(kāi)對(duì)應(yīng)的原始視頻片斷,進(jìn)行詳細(xì)查看。辦案人員可以進(jìn)一步通過(guò)所提供目標(biāo)特征,例如人或車,目標(biāo)顏色、高度、運(yùn)動(dòng)方向、運(yùn)動(dòng)速度,行人著裝、步態(tài),或者通過(guò)提供一幅樣片來(lái)發(fā)起搜索。視頻檢索系統(tǒng),首先通過(guò)高效的解碼器將未解碼的視頻數(shù)據(jù)解碼,然后通過(guò)背景建模算法分離提取出運(yùn)動(dòng)的目標(biāo),而后通過(guò)智能分析算法對(duì)這些運(yùn)動(dòng)目標(biāo)的被關(guān)注特征進(jìn)行提取和分析,將分析結(jié)果恰當(dāng)描述,存放到數(shù)據(jù)庫(kù),與被請(qǐng)求搜索的特征進(jìn)行比對(duì),最后,高相關(guān)度的目標(biāo)會(huì)以快照或其他方式作為結(jié)果顯示出來(lái),并可以快速定位到原始視頻片段。
還有些廠商將一些運(yùn)動(dòng)目標(biāo)的基本特征,例如目標(biāo)類別、顏色、速度等信息在視頻錄制時(shí)就實(shí)時(shí)地進(jìn)行分析,并通過(guò)這些特征對(duì)視頻內(nèi)容進(jìn)行索引,存放在自己的設(shè)備中。這樣,在需要進(jìn)行特征檢索的時(shí)候,只需要將用戶提供的特征與視頻內(nèi)容的索引信息進(jìn)行比對(duì)就可以定位到相關(guān)視頻片段,而不需要對(duì)視頻再次進(jìn)行處理分析,可以有效節(jié)省分析時(shí)間。但目前不同廠商的視頻內(nèi)容索引和描述的標(biāo)準(zhǔn)都不盡相同,這樣就會(huì)產(chǎn)生不同廠商之間的系統(tǒng)的對(duì)接和視頻內(nèi)容索引的共享問(wèn)題,無(wú)法充分發(fā)揮系統(tǒng)的作用。MPEG-7標(biāo)準(zhǔn)化了對(duì)音視頻特征的描述,對(duì)該問(wèn)題給出了解決的指導(dǎo)方向,還需要針對(duì)安防視頻數(shù)據(jù)的特點(diǎn)進(jìn)一步規(guī)范和標(biāo)準(zhǔn)化。
目前我國(guó)正在應(yīng)用的視頻檢索系統(tǒng),還只能對(duì)目標(biāo)的一些基本的特征進(jìn)行索引和檢索,當(dāng)下的視頻檢索系統(tǒng)并不能完成“找到一個(gè)拿著iPhone6的女孩”這樣的任務(wù),因?yàn)槭艿椒直媛省⑶逦群鸵曨l角度等多重因素的影響,我們無(wú)法分辨出手機(jī)的型號(hào),也不知道目標(biāo)對(duì)象手上到底有沒(méi)有東西;我們甚至無(wú)法判斷這個(gè)目標(biāo)對(duì)象是個(gè)男孩還是女孩,因?yàn)樵谶@個(gè)流行因素快速變化的時(shí)代,一些影視作品里所表現(xiàn)出的令人感嘆的智能分析效果,只能是為研究者提供一些研究思路和方向。
除了能對(duì)前文提到的一些目標(biāo)的基本特征進(jìn)行檢索外,目前我們能做到的是對(duì)車量牌照信息的檢索,這主要得益于車牌識(shí)別相關(guān)技術(shù)的成熟和智能交通系統(tǒng)的建設(shè)。
對(duì)于像人臉識(shí)別這樣的任務(wù),對(duì)于一般的監(jiān)控視頻,即便是高清卡口,也很難做到較高的準(zhǔn)確率,還是要結(jié)合人工比對(duì)才能真正發(fā)揮作用,人眼可以準(zhǔn)確分辨和識(shí)別的目標(biāo),視頻檢索系統(tǒng)卻不一定能做到。達(dá)到人眼的分辨能力是目前機(jī)器視覺(jué)領(lǐng)域的最高境界和終極目標(biāo),所以視頻檢索還有相當(dāng)長(zhǎng)的路要走??吹接行┊a(chǎn)品的隱性宣傳中表示,視頻中的嫌疑人換了衣服、戴了帽子、更換交通工具,檢索系統(tǒng)還能準(zhǔn)確檢索到目標(biāo),這實(shí)在令人深表懷疑。
以下所述是一個(gè)真實(shí)的案例,這也是目前視頻檢索技術(shù)在我國(guó)安防領(lǐng)域最常規(guī)的應(yīng)用模式。
2013年4月,某地發(fā)生重大蒙面搶劫案件,經(jīng)過(guò)專案組人員分析,認(rèn)為是一起精心準(zhǔn)備和預(yù)謀的案件,嫌疑人可能事先多次勘察過(guò)犯罪現(xiàn)場(chǎng)。為了盡快破案,當(dāng)?shù)毓簿謭D偵大隊(duì)調(diào)取了案發(fā)現(xiàn)場(chǎng)周邊一周的各類監(jiān)控錄像,包括交通監(jiān)控錄像、治安監(jiān)控錄像和附近店鋪的自有監(jiān)控錄像,總時(shí)長(zhǎng)超過(guò)2000小時(shí),希望能從中找出可疑目標(biāo),提供破案線索。
按傳統(tǒng)的方式,幾名警官同時(shí)查看視頻,也需要幾天的時(shí)間,通過(guò)視頻濃縮技術(shù),一名警官數(shù)小時(shí)內(nèi)就能排查完視頻中的可疑人員或車輛,同一名刑偵人員完成排查后會(huì)對(duì)畫面中可疑人員的重復(fù)出現(xiàn)率更加敏感,即節(jié)省了排查時(shí)間,又降低了遺漏的概率。當(dāng)過(guò)濾出可疑車輛時(shí),通過(guò)車牌識(shí)別信息,在系統(tǒng)中形成車輛的行駛軌跡,給布控方案提供參考,通過(guò)車輛的行動(dòng)規(guī)律,定位到了車輛長(zhǎng)時(shí)間停留的區(qū)域,可能是嫌疑人的暫住地,再調(diào)用該區(qū)域周邊的視頻進(jìn)行摘要排查,結(jié)合案發(fā)現(xiàn)場(chǎng)的可疑目標(biāo)比對(duì),最終鎖定了嫌疑人員。
目前我國(guó)正在應(yīng)用的視頻檢索系統(tǒng),還只能對(duì)目標(biāo)的一些基本的特征進(jìn)行索引和檢索。