李鵬 梁瑞頭 薛丙龍

（湖南天冠電子信息技術(shù)有限公司，湖南 長沙 410205）

信息技術(shù)飛速發(fā)展，各類信息融合、快速傳遞已成為市場新的增長點(diǎn)。在廣泛應(yīng)用的交通監(jiān)控[2]、應(yīng)急處突、遠(yuǎn)程視頻會議[1]、遠(yuǎn)程教育培訓(xùn)等應(yīng)用場景，需要接入大量不同種類音視頻設(shè)備來實(shí)現(xiàn)音視頻監(jiān)控、指揮、調(diào)度以及席位計(jì)算機(jī)信號切換等功能。實(shí)際應(yīng)用中存在音視頻格式不統(tǒng)一、專業(yè)設(shè)備種類多、各級信息接入難、保障手段繁復(fù)、實(shí)時性差等問題。

本文將VPX 架構(gòu)引入音視頻通信傳輸領(lǐng)域，提出一種音視頻融合設(shè)備設(shè)計(jì)與實(shí)現(xiàn)方案。音視頻融合設(shè)備將現(xiàn)有的通信設(shè)備如視頻指揮系統(tǒng)、電視會議MCU 圖像臺、網(wǎng)絡(luò)監(jiān)控、計(jì)算機(jī)顯示信號等資源統(tǒng)一接入。通過系統(tǒng)調(diào)度控制服務(wù)，實(shí)現(xiàn)音視頻資源統(tǒng)一管理、按需調(diào)度。

1 方案概述

VPX 音視頻融合設(shè)備以視頻交換矩陣為中心，將從IP 鏈路（經(jīng)過解碼）、SDI 輸入鏈路、錄播器、視頻拼接器等通道輸入的視頻數(shù)據(jù)送入SDI 矩陣，通過中控板音視頻配置管理軟件對送入矩陣的音視頻信號進(jìn)行配置，為后端輸出的模塊配置相應(yīng)信號源，系統(tǒng)的數(shù)據(jù)流圖如圖1 所示。

圖1 VPX 音視頻融合設(shè)備數(shù)據(jù)流

其中多路拼接輸出，錄播均需要用到視頻環(huán)出功能，以達(dá)到視頻錄播、拼接時，單路信號同時顯示的功能。

2 產(chǎn)品設(shè)計(jì)

2.1 總體設(shè)計(jì)

系統(tǒng)實(shí)現(xiàn)視頻信號的音視頻編解碼功能、視頻信號的服務(wù)管理功能、MCU 設(shè)備圖像臺視頻輸出功能、視頻監(jiān)控視頻輸出功能、坐席計(jì)算機(jī)界面硬編硬解上大屏功能、矩陣功能、字幕處理功能、集中控制功能（視頻信號切換、電源管理）、錄播功能等。

VPX 音視頻融合設(shè)備支持現(xiàn)有通信設(shè)備的音視頻信號接入，包含電視會議終端、字幕機(jī)、特技機(jī)、攝像機(jī)、錄播機(jī)、IP 攝像機(jī)、計(jì)算機(jī)操作臺、MCU 視頻會議圖像臺、視頻調(diào)度指揮、語音通信信號。支持現(xiàn)有監(jiān)控系統(tǒng)的音視頻信號輸出，包含投影儀、監(jiān)控大屏、電視會議終端、錄播機(jī)等，為用戶提供資源服務(wù)、業(yè)務(wù)服務(wù)、存儲服務(wù)、及集中控制服務(wù)。

音視頻信號輸入支持多品牌產(chǎn)品混合接入。前端設(shè)備接入VPX 音視頻融合設(shè)備平臺后，全部以網(wǎng)絡(luò)數(shù)字視頻流的方式進(jìn)行信號的交換分發(fā)，具有輸出、切換、存儲、轉(zhuǎn)發(fā)。采用標(biāo)準(zhǔn)的TCP/IP 輸入及輸出，兼容國內(nèi)外主流設(shè)備廠家，IP 鏈路可同時支持多種信號混合、長距離傳輸。各類音視頻信號的調(diào)度管理完全由配置管理軟件實(shí)現(xiàn)，配置管理軟件可靈活配置，保存多種應(yīng)用方案。

VPX 音視頻融合設(shè)備組成如圖2 所示。

圖2 VPX 音視頻融合設(shè)備組成框圖

2.2 硬件設(shè)計(jì)

VPX 音視頻融合設(shè)備硬件采用6U 尺寸15 槽互聯(lián)交換型拓樸結(jié)構(gòu)，背板遵循VITA46，豎插卡方式，雙面連接器設(shè)計(jì)。VPX 架構(gòu)可提供10Gbps 數(shù)據(jù)傳輸速率，支持Rapid IO、PCI Express、以太網(wǎng)等高速串行信號。

前插板包含電源板、中控板、解碼板、編碼拼接板、編解碼板、視頻轉(zhuǎn)換板、矩陣板、錄播板、電子盒，后插板主要為音視頻信號轉(zhuǎn)換板、接口板。本文僅選重要板卡進(jìn)行介紹。

2.2.1 解碼板設(shè)計(jì)

解碼板主要實(shí)現(xiàn)多路IP 信號解碼，并轉(zhuǎn)換成SDI 信號輸出給SDI 矩陣。解碼板采用高性能低功耗視頻解碼芯片Hi3536+FPGA 組成的核心方案。單塊解碼板可實(shí)現(xiàn)兩路IP 視頻網(wǎng)絡(luò)輸入接口，解碼最多16 路1080P＠30P 網(wǎng)絡(luò)視頻信號，輸出8 路SDI。

Hi3536 是目前主流的專業(yè)流媒體解碼芯片[3]，最高支持16路1080p30 解碼，支持包括H.264、H.265 在內(nèi)的多種壓縮格式解碼。結(jié)合FPGA 的資源需求，根據(jù)IO 和速度的要求FPGA 選用Xilinx 公司K7 系列的XC7K325T-2FFG900I[4]。IP 輸入音視頻信號經(jīng)Hi3536 解碼后的圖像分別通過BT1120 端口，PCIe 端口傳輸給FPGA，經(jīng)FPGA 的GTx 端口，輸出SDI 信號[5]至SDI 矩陣交換板。解碼板原理框圖如圖3 所示。

圖3 解碼板邏輯框圖

2.2.2 編碼拼接板設(shè)計(jì)

編碼拼接板主要實(shí)現(xiàn)多路SDI 信號的H.264 編碼[6]并轉(zhuǎn)換成IP 輸出。編碼拼接板采用高性能低功耗視頻解碼芯片Hi3531a+FPGA 組成的核心方案。編碼拼接板單板支持16 路SDI 信號輸入，并選擇8 路信號進(jìn)行H.264 編碼。

Hi3531 是目前主流的專業(yè)流媒體編碼芯片[7]，最高支持8路1080P＠30P 編碼。FPGA 同樣選擇Xilinx 公司的K7 系列的XC7K325T-2FFG900I 設(shè)計(jì)。做拼接功能使用時，多路SDI 信號經(jīng)過FPGA 縮放，進(jìn)出幀存，拼接等，再從SDI 輸出給視頻矩陣。編碼拼接板邏輯框圖如圖4 所示。

圖4 編碼拼接板邏輯框圖

2.2.3 視頻格式轉(zhuǎn)換板設(shè)計(jì)

視頻格式轉(zhuǎn)換板用于將矩陣輸入的SDI 信號轉(zhuǎn)換成VGA、HDMI 輸出，同時可以將輸入的VGA、HDMI 信號轉(zhuǎn)換為SDI 信號輸給視頻矩陣。視頻格式轉(zhuǎn)換板以FPGA 為中心，輸入/輸出的SDI 信號經(jīng)過FPGA GTx 端口。GTx 端口最高支持3G-SDI。VGA 輸入使用TVP7002，輸出使用ADV7123，HDMI 輸入使用LATTIC 公司的Sil9293，輸出使用Sil9024。

視頻格式轉(zhuǎn)換板以FPGA+MCU 做為核心架構(gòu)，邏輯框圖如圖5 所示。

圖5 信號格式轉(zhuǎn)換板邏輯框圖

2.3 軟件設(shè)計(jì)

2.3.1 軟件組成

VPX 音視頻融合設(shè)備軟件系統(tǒng)主要由三層組成，分別是音視頻配置管理軟件、中控通信軟件、視頻編輯軟件。系統(tǒng)交聯(lián)如圖6 所示。

圖6 軟件系統(tǒng)交聯(lián)圖

2.3.2 音視頻配置管理軟件

音視頻配置管理軟件主要包括矩陣管理、方案管理兩部分。

矩陣管理包括基本信息管理、矩陣輸入端口管理、矩陣輸出端口管理及矩陣分組管理。方案管理可新建、編輯、保存多種矩陣管理配置方案。

2.3.3 中控軟件

中控軟件系統(tǒng)的驅(qū)動及應(yīng)用程序是在Wind River VxWorks 6.9 下采用Workbench 3.3 開發(fā)的，Workbench 集成開發(fā)環(huán)境作為應(yīng)用開發(fā)平臺具有圖形化易操作，實(shí)時性高的特點(diǎn)，面向嵌入式模塊提供一套完整的的開發(fā)和調(diào)試工具。設(shè)計(jì)過程中，在上位機(jī)Workbench 集成開發(fā)環(huán)境中進(jìn)行編譯，生成目標(biāo)文件，再將目標(biāo)文件下載至中控板中進(jìn)行聯(lián)動調(diào)試和分析。

VxWorks 的軟件調(diào)試運(yùn)行環(huán)境結(jié)構(gòu)圖如圖7 所示，主機(jī)可通過RS232 串行接口利用Xmodem 協(xié)議與目標(biāo)機(jī)進(jìn)行連接，也可通過10/100/1000Mbps 自適應(yīng)以太網(wǎng)口接口利用TFTP 協(xié)議與目標(biāo)機(jī)進(jìn)行連接，從而完成bootrom、內(nèi)核與應(yīng)用程序的加載、更新、調(diào)試及下載的功能。

圖7 中控軟件運(yùn)行環(huán)境結(jié)構(gòu)圖

2.3.4 視頻編解碼軟件

視頻編解碼軟件驅(qū)動及應(yīng)用程序是基于海思Hisilicon Linux 開發(fā)[8]，用Linux 操作系統(tǒng)需要根據(jù)實(shí)際的硬件平臺對內(nèi)核進(jìn)行移植與剪裁，對Uboot 的修改與配置，對板上設(shè)備驅(qū)動程序進(jìn)行配置。本系統(tǒng)的內(nèi)核開發(fā)基于華為海思公司提供的SDK包，該開發(fā)包里提供了Uboot、片上外圍設(shè)備驅(qū)動程序、文件系統(tǒng)、音視頻編解碼庫，因此只需根據(jù)本系統(tǒng)的實(shí)際硬件平臺對Uboot、內(nèi)核、驅(qū)動、文件系統(tǒng)進(jìn)行相應(yīng)的修改及適配即可，降低了開發(fā)周期，提高了軟件的質(zhì)量和穩(wěn)定性。

3 系統(tǒng)測試

VPX 音視頻融合設(shè)備支持模擬、數(shù)字、網(wǎng)絡(luò)視音頻編解碼處理，支持視頻指揮、電視會議終端、席位計(jì)算機(jī)顯示畫面、攝像機(jī)等多路視頻信號的切換與拼接。圖像拼接主要用于將多路視頻信號拼接整幅顯示，同時具備圖像信號處理、合成、分割、控制功能，可在大屏或投影儀等顯示終端實(shí)現(xiàn)開窗、移動、縮放等多個信號源的顯示功能。設(shè)備也支持SDI、VGA、HDMI 等多種視頻信號格式。

在某項(xiàng)目中應(yīng)用于應(yīng)急處理中心，實(shí)現(xiàn)了各級中心指揮調(diào)度人員召開視頻調(diào)度會議，能夠接收、發(fā)送、處理、存儲視頻調(diào)度信息。

4 結(jié)論

本方案依據(jù)需求，采用新一代音視頻交換管理平臺，通過低延時的編解碼系統(tǒng)實(shí)現(xiàn)低延時視頻數(shù)據(jù)壓縮傳輸、FPGA 完成多種圖像視頻格式的接口與轉(zhuǎn)換，實(shí)現(xiàn)了各類專用設(shè)備的互用和通用設(shè)備的復(fù)用。通過簡單易用的軟件業(yè)務(wù)調(diào)度控制平臺，簡化了系統(tǒng)配置、使用難度。

此方案解決了音視頻設(shè)備種類多、格式多、布線難、傳輸距離有限等實(shí)際問題，打破了設(shè)備的專用化、單一化、互不兼容的限制，實(shí)現(xiàn)了多種音視頻設(shè)備的融合應(yīng)用，在技術(shù)保障模式、業(yè)務(wù)應(yīng)用模式上給用戶提供新的體驗(yàn)。