寧芳奇

[提要] 信息技術(shù)的快速發(fā)展對(duì)民眾的日常生活產(chǎn)生了巨大的影響，公交車作為使用最多的交通工具已經(jīng)發(fā)生了巨大變革，各種新技術(shù)的使用使其在日常運(yùn)行過程中產(chǎn)生了海量數(shù)據(jù)，如何對(duì)這些數(shù)據(jù)進(jìn)行科學(xué)有效地采集和深入挖掘分析利用成為當(dāng)前各個(gè)公交系統(tǒng)平臺(tái)共同的難題。本文通過對(duì)智慧公交平臺(tái)的大數(shù)據(jù)現(xiàn)狀調(diào)查分析，提出一些解決方法，以便為智慧公交系統(tǒng)平臺(tái)的建設(shè)和完善提供建議。

關(guān)鍵詞：物聯(lián)網(wǎng)；大數(shù)據(jù)；智慧公交；平臺(tái)；Hadoop

本文受到遼寧省社會(huì)科學(xué)規(guī)劃基金項(xiàng)目（項(xiàng)目編號(hào)：L16BJY001）、遼寧省自然基金項(xiàng)目（項(xiàng)目編號(hào)：20170540005）的支持

中圖分類號(hào)：F49 文獻(xiàn)標(biāo)識(shí)碼：A

收錄日期：2017年9月12日

引言

隨著互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等信息技術(shù)的高速發(fā)展，其影響已經(jīng)輻射至我們生活的方方面面，而公交車作為普通民眾出行最常用的工具，每時(shí)每刻都在產(chǎn)生著大量的數(shù)據(jù)，其數(shù)據(jù)量級(jí)已經(jīng)超越TB達(dá)到PB，并以指數(shù)級(jí)持續(xù)增長(zhǎng)。如何對(duì)這些數(shù)據(jù)進(jìn)行科學(xué)合理高效的采集，以及在這種大數(shù)據(jù)下，如何從如此龐大的公交數(shù)據(jù)中高效、準(zhǔn)確地挖掘出有用的信息進(jìn)行分析，從而達(dá)到為公交公司、政府和民眾進(jìn)行服務(wù)的目的，成為當(dāng)前公交系統(tǒng)急需解決的重大問題。

一、大數(shù)據(jù)的定義及其特征

大數(shù)據(jù)是一個(gè)相對(duì)比較抽象的概念，學(xué)術(shù)界一直沒有統(tǒng)一公認(rèn)的概念。簡(jiǎn)單來說，就是隨著互聯(lián)網(wǎng)的高速發(fā)展，互聯(lián)網(wǎng)中的各種信息急劇增加，數(shù)據(jù)規(guī)模愈來愈大，進(jìn)而由量變引起質(zhì)變的一種現(xiàn)象。大數(shù)據(jù)并不是一種全新的技術(shù)和概念，只是因?yàn)閿?shù)據(jù)產(chǎn)生方式的改變，造成數(shù)據(jù)量級(jí)的巨大增長(zhǎng)，使得軟件工具處理和管理所花費(fèi)的時(shí)間超過容忍，需要探索新的方式才能進(jìn)行處理的一種海量、多樣化、高增長(zhǎng)率的數(shù)據(jù)集。針對(duì)這種海量的數(shù)據(jù)集合，IBM提出了大數(shù)據(jù)的五項(xiàng)特征（簡(jiǎn)稱5V）：Volume：數(shù)據(jù)規(guī)模龐大，蘊(yùn)含豐富的信息；Velocity：產(chǎn)生信息的速度十分迅速；Variety：信息的種類豐富多樣；Value：由于數(shù)量的巨大使得價(jià)值密度偏低；Veracity：由實(shí)時(shí)產(chǎn)生具有真實(shí)性。

二、智慧公交平臺(tái)基本構(gòu)架

本文通過對(duì)現(xiàn)有的公交系統(tǒng)平臺(tái)的調(diào)查分析，重新將公交平臺(tái)架構(gòu)進(jìn)行組合，將其分成了基礎(chǔ)硬件模塊、大數(shù)據(jù)處理架構(gòu)模塊、應(yīng)用呈現(xiàn)模塊三個(gè)部分，具體如下：

（一）基礎(chǔ)硬件模塊。公交系統(tǒng)的基礎(chǔ)設(shè)施主要包括公交車、車載終端和站牌路線系統(tǒng)，其中車載終端業(yè)是數(shù)據(jù)信息的主要獲取和輸出通道，其主要包括GPS車載定位系統(tǒng)、車載網(wǎng)絡(luò)WiFi系統(tǒng)、視頻監(jiān)控系統(tǒng)、智能刷卡系統(tǒng)、自動(dòng)報(bào)站系統(tǒng)和車載視頻系統(tǒng)等。盡管現(xiàn)如今的公交系統(tǒng)已經(jīng)相對(duì)完善，但也存在著一些其他問題。如因部分車輛老舊沒有GPS系統(tǒng)或系統(tǒng)老舊不能準(zhǔn)確定位，報(bào)站系統(tǒng)報(bào)站延遲，除了報(bào)站系統(tǒng)基本沒有與車輛路線相關(guān)的信息輸出通道，站牌僅僅只有標(biāo)識(shí)地點(diǎn)作用等。這些問題都對(duì)乘客的乘車體驗(yàn)以及相關(guān)的數(shù)據(jù)收集利用產(chǎn)生了不好的影響。而這些問題總的來說是兩個(gè)方面：（1）車載系統(tǒng)的不先進(jìn)或缺失問題；（2）站牌系統(tǒng)的作用單一及落后。

因此，一個(gè)智慧公交平臺(tái)想要擁有一個(gè)良好的基礎(chǔ)設(shè)施。必須解決這兩個(gè)方面，車載系統(tǒng)可以對(duì)其中的硬件進(jìn)行合適的替換，定期對(duì)其附帶的軟件升級(jí)換代；對(duì)于站牌應(yīng)該進(jìn)行升級(jí)，用電子顯示屏進(jìn)行替代原先的固定印刷站牌，電子站牌顯示可以分為兩部分，一部分是靜態(tài)的顯示路線信息，另一部分通過動(dòng)態(tài)的顯示輸出時(shí)間、天氣和車輛到達(dá)時(shí)間預(yù)計(jì)等信息，以及通過播放廣告來增加收益等。

（二）大數(shù)據(jù)處理架構(gòu)模塊。通過對(duì)智慧公交的大數(shù)據(jù)特征和處理所需要的技術(shù)要求進(jìn)行分析，本文提出了與公交系統(tǒng)相適應(yīng)的數(shù)據(jù)處理架構(gòu)，該架構(gòu)主要包括應(yīng)用層、挖掘分析層、數(shù)據(jù)存儲(chǔ)層、數(shù)據(jù)采集層。其整體構(gòu)架圖如圖1所示。（圖1）

1、數(shù)據(jù)采集層。公交系統(tǒng)的數(shù)據(jù)采集，主要通過車載設(shè)施如刷卡系統(tǒng)、視頻監(jiān)控系統(tǒng)、GPS系統(tǒng)等，在公交車運(yùn)行過程中通過車載WiFi或其他數(shù)據(jù)網(wǎng)絡(luò)發(fā)送至數(shù)據(jù)存儲(chǔ)中心。此外，還可通過網(wǎng)絡(luò)網(wǎng)站或郵件等方式對(duì)來自公眾的反饋意見進(jìn)行收集并存儲(chǔ)。

2、數(shù)據(jù)存儲(chǔ)層。對(duì)通過采集層采集到的海量信息，一般的計(jì)算機(jī)很難達(dá)到如此大的計(jì)算量，而超級(jí)計(jì)算機(jī)又價(jià)值昂貴，不適合使用，因此嘗試使用更多的計(jì)算機(jī)系統(tǒng)來處理這些數(shù)據(jù)也就勢(shì)在必行。而Hadoop架構(gòu)正是這樣一種利用計(jì)算機(jī)群，進(jìn)行大數(shù)據(jù)的存儲(chǔ)和計(jì)算的架構(gòu)。

Hadoop的最底層是HDFS，也就是分布式文件系統(tǒng)，主要通過多臺(tái)設(shè)備提供統(tǒng)一的存儲(chǔ)空間，但卻不會(huì)造成用戶的察覺。而其本身對(duì)硬件要求不高，卻可以進(jìn)行高吞吐量的數(shù)據(jù)訪問，可以使其部署在比較廉價(jià)的設(shè)備上，卻能高效地完成數(shù)據(jù)存儲(chǔ)。

HDFS文件系統(tǒng)之上是HBase分布式數(shù)據(jù)庫，HBase采用列存儲(chǔ)，依據(jù)不同的存儲(chǔ)特性分別進(jìn)行數(shù)據(jù)存儲(chǔ)，十分符合大數(shù)據(jù)對(duì)處理時(shí)效性的要求。此外，由于HBase對(duì)存儲(chǔ)形態(tài)沒有特殊要求，因此公交系統(tǒng)中收集的各種各樣的半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)也能很好的存儲(chǔ)。HBase中的冗余多備份機(jī)制，能夠減少單點(diǎn)故障的發(fā)生，提升HBase數(shù)據(jù)庫的容錯(cuò)性。

MapReduce具有很強(qiáng)大的數(shù)據(jù)處理能力，面對(duì)公交系統(tǒng)產(chǎn)生的大數(shù)據(jù)，可以通過需求的不同，自行將大數(shù)據(jù)彈性分發(fā)給計(jì)算機(jī)集群中的計(jì)算機(jī)，這些計(jì)算機(jī)對(duì)接收到的數(shù)據(jù)進(jìn)行并行運(yùn)算，并以一定的周期將處理信息返回，使其可以及時(shí)高效地完成對(duì)大數(shù)據(jù)的分析和處理。而對(duì)于一些比較困難的問題，也可以將其按類拆分進(jìn)而對(duì)其進(jìn)行并發(fā)運(yùn)算，從而實(shí)現(xiàn)所需要的處理結(jié)果。

同時(shí)，一個(gè)好的MapReduce系統(tǒng)需要一個(gè)良好的數(shù)據(jù)布局，而一個(gè)好的數(shù)據(jù)布局要滿足數(shù)據(jù)量公平性和數(shù)據(jù)值域公平性，只有這樣才能在各個(gè)節(jié)點(diǎn)上查詢?nèi)蝿?wù)數(shù)據(jù)和運(yùn)算階段的時(shí)間相等，從而達(dá)到節(jié)約時(shí)間和降低能耗的目的。而達(dá)到數(shù)據(jù)量公平性和數(shù)據(jù)值域公平性，要滿足以下兩個(gè)公式：

3、挖掘分析層。公交數(shù)據(jù)繁復(fù)龐雜，來源十分廣泛，形式和種類也是多種多樣，信息量龐大，想要從這些信息中找到我們需要的數(shù)據(jù)，進(jìn)而為我們提供幫助。傳統(tǒng)的統(tǒng)計(jì)和多維數(shù)據(jù)分析方法已經(jīng)無法完成對(duì)這些復(fù)雜海量數(shù)據(jù)的處理分析，因此我們應(yīng)該結(jié)合新興的數(shù)據(jù)挖掘技術(shù)進(jìn)行分析處理，常用的大數(shù)據(jù)挖掘方法有：粒子群算法、遺傳算法、決策樹算法、神經(jīng)網(wǎng)絡(luò)等。本文通過對(duì)這些相關(guān)的技術(shù)進(jìn)行運(yùn)用將挖掘分析層分為五個(gè)模塊，分別是數(shù)據(jù)篩選模塊、可視化分析模塊、數(shù)據(jù)挖掘模塊、預(yù)測(cè)分析模塊、展現(xiàn)模塊。

數(shù)據(jù)篩選模塊：由于公交數(shù)據(jù)的來源廣泛，因此極易受到環(huán)境設(shè)備等因素的影響，進(jìn)而產(chǎn)生一些無用或者錯(cuò)誤的信息，在進(jìn)行數(shù)據(jù)分析前通過該模塊對(duì)收集到的公交信息進(jìn)行篩選剔除，減少因無用信息和錯(cuò)誤信息造成的資源浪費(fèi)，提升數(shù)據(jù)的質(zhì)量。

可視化分析模塊：智慧公交系統(tǒng)的數(shù)據(jù)大致可以分為三類：半結(jié)構(gòu)化數(shù)據(jù)、結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。由于這些數(shù)據(jù)的數(shù)量大、結(jié)構(gòu)不統(tǒng)一、信息分布比較分散，所以很難將數(shù)據(jù)調(diào)入相應(yīng)的應(yīng)用系統(tǒng)中形成固定的分析模式，但可以借助可視化數(shù)據(jù)分析平臺(tái)的強(qiáng)大功能，再輔以人工操作對(duì)海量的數(shù)據(jù)進(jìn)行相關(guān)分析，進(jìn)而完成分析任務(wù)。該模塊具有兩個(gè)優(yōu)點(diǎn)：其一，具有良好的交互功能，不但能夠看到相關(guān)的數(shù)據(jù)，而且能隨時(shí)開發(fā)和管理數(shù)據(jù)；其二，直觀，可以通過二維的各種圖像或者三維的各種模型和動(dòng)畫來進(jìn)行展示結(jié)果。

數(shù)據(jù)挖掘模塊：該模塊主要通過一些數(shù)據(jù)挖掘方法如：聚類分析、遺傳算法、決策樹算法等，將得到的海量公交數(shù)據(jù)進(jìn)行分析處理，尋找其中隱藏尚未被人們發(fā)現(xiàn)利用的信息，挖掘這些信息背后所隱含的知識(shí)和用途，為公交公司和各個(gè)信息使用者們提供幫助。即該模塊通過一系列的大數(shù)據(jù)挖掘算法，將隱藏在大數(shù)據(jù)背后的有用信息，以人們熟知的方式進(jìn)行呈現(xiàn)出來。

預(yù)測(cè)分析模塊：以數(shù)據(jù)信息的特征與聯(lián)系，以及從歷史大數(shù)據(jù)中總結(jié)的行業(yè)規(guī)律為基礎(chǔ)，建立科學(xué)有效的數(shù)據(jù)模型，將來自數(shù)據(jù)挖掘模塊和可視化分析模塊的結(jié)果進(jìn)行分析運(yùn)算，從而達(dá)到預(yù)測(cè)性分析的目的。

展現(xiàn)模塊：將不同分析的結(jié)果及其來源依據(jù)以合理的方式呈現(xiàn)出來，為不同的信息需求者提供適合其理解和使用的方式進(jìn)行展示，從而達(dá)到為其提供數(shù)據(jù)分析支撐的目的。

三、應(yīng)用呈現(xiàn)模塊

（一）調(diào)度與指揮系統(tǒng)。該系統(tǒng)主要從三個(gè)方面進(jìn)行考慮：其一，路線優(yōu)化，公交公司通過對(duì)來自公交系統(tǒng)的大數(shù)據(jù)和公眾的呼聲建議進(jìn)行處理，對(duì)現(xiàn)有的公交線路情況進(jìn)行分析，找尋其中的不合理地方，對(duì)其進(jìn)行優(yōu)化升級(jí)，形成科學(xué)、合理有效的新路線；其二，智能調(diào)度，通過對(duì)同一天的不同時(shí)段，工作日與休息日和節(jié)假日的信息進(jìn)行對(duì)比統(tǒng)計(jì)分析，對(duì)公交班次進(jìn)行智能調(diào)度，節(jié)假日高峰期，工作日高峰期班次相對(duì)密集一些，而其他時(shí)段按固定時(shí)間班次相對(duì)少一些，在排班數(shù)量變化不大的情況下，優(yōu)化其運(yùn)行班次，實(shí)現(xiàn)便民服務(wù)；其三，安全運(yùn)營(yíng)，對(duì)線路的歷史安全數(shù)據(jù)進(jìn)行分析，分析安全事故的原因，進(jìn)行合理規(guī)避。

（二）社交應(yīng)用APP。與百度地圖、114等信息平臺(tái)聯(lián)合對(duì)公交大數(shù)據(jù)進(jìn)行分析，開發(fā)公交專用APP，通過該軟件可以對(duì)不熟悉的地方進(jìn)行路線規(guī)劃，通過GPS導(dǎo)航尋找站點(diǎn)，自帶目標(biāo)站點(diǎn)附近推薦，可以讓你在不熟悉的地方也能如魚得水，毫無陌生感；此外，在公交車上還可以進(jìn)行實(shí)時(shí)地理位置查詢，讓你清晰的知道自己所處方位，而不用擔(dān)心錯(cuò)過報(bào)站而不能及時(shí)下車。而這些都只是基礎(chǔ)功能，作為一個(gè)軟件，不能只局限于簡(jiǎn)單的數(shù)據(jù)查詢服務(wù)，應(yīng)充分發(fā)揮出其互聯(lián)網(wǎng)的虛擬、分享、互動(dòng)的特質(zhì)，因此其社交功能尤其重要，通過其社交功能我們可以知道每天都有哪些人和你一同坐在同一輛公交車上，無形間拉近人與人之間的距離，方便與其他人交流，甚至還可以通過軟件定期舉辦活動(dòng)，增進(jìn)關(guān)系，緩解日益冷漠的人際關(guān)系。

（三）人群聚集分析。公交車作為我們每個(gè)人幾乎都能用到的交通工具，不僅僅是我們出行的方式，它背后還隱藏著不同地區(qū)的人口分布和人口動(dòng)向等，通過對(duì)這些人流的屬性和動(dòng)向等進(jìn)行分析，為政府的城市規(guī)劃和公共安全作出貢獻(xiàn)。如通過對(duì)人流量大的地方的監(jiān)控分析，防范非法集會(huì)和踩踏事件的發(fā)生；通過旅游區(qū)的客流量變化，及時(shí)做好相關(guān)應(yīng)對(duì)，以及在哪些地方修建公共設(shè)施都極具參考意義。

四、結(jié)語

隨著互聯(lián)網(wǎng)的高速發(fā)展，大數(shù)據(jù)時(shí)代已經(jīng)悄然來臨，大數(shù)據(jù)在公交系統(tǒng)中的應(yīng)用，既為公交運(yùn)行解決了一些問題，同時(shí)又帶來了新的挑戰(zhàn)，我們不能僅僅注重于技術(shù)的提升，要同時(shí)對(duì)公交運(yùn)行中產(chǎn)生的大數(shù)據(jù)進(jìn)行深入挖掘分析，利用互聯(lián)網(wǎng)大數(shù)據(jù)時(shí)代特有的優(yōu)勢(shì)，為民眾、政府和企業(yè)帶來新的發(fā)展和便利。

主要參考文獻(xiàn)：

[1]蘇穎，樊重俊.智慧交通中大數(shù)據(jù)應(yīng)用面臨的挑戰(zhàn)與對(duì)策研究[J].物流科技，2016.39.6.

[2]李凱，程潔.探究大數(shù)據(jù)時(shí)代的城市規(guī)劃[J].價(jià)值工程，2016.35.

[3]鄂旭，畢嘉娜，侯建，蘇憲利，馮冠.一種車牌智能定位方法研究[J].計(jì)算機(jī)技術(shù)與發(fā)展，2014.24.10.

[4]朱安平.基于大數(shù)據(jù)的智慧交通探析[J].中國管理信息化，2016.19.12.

[5]鄂旭，楊明婧，勵(lì)建榮，毛玫靜，譚艷.能量均衡的數(shù)據(jù)融合隱私保護(hù)算法研究[J].計(jì)算機(jī)工程，2016.42.4.

[6]邵良杉，趙琳琳.區(qū)間直覺模糊信息下的雙向投影決策模型[J].控制與決策，2016.31.3.

[7]汪玚.公交信息化：有“大腦”更智慧[J].交通建設(shè)與管理（上半月），2014.12.

[8]姬倩倩.公共交通大數(shù)據(jù)平臺(tái)架構(gòu)與服務(wù)模式研究[D].西安電子科技大學(xué)，2014.