畢盛+納青青

近幾年，高校畢業(yè)生數(shù)量一直持續(xù)高位，畢業(yè)生就業(yè)工作數(shù)據(jù)量龐大，缺乏信息共享，傳統(tǒng)就業(yè)信息平臺(tái)已難滿足畢業(yè)生對(duì)就業(yè)工作的需求，就業(yè)大數(shù)據(jù)信息平臺(tái)的建設(shè)已刻不容緩。

云計(jì)算技術(shù)具有高效、可靠、高可擴(kuò)展性和易用性的特征，被很多領(lǐng)域廣泛的使用。本文討論的內(nèi)容是如何將云計(jì)算技術(shù)應(yīng)用到就業(yè)大數(shù)據(jù)信息服務(wù)平臺(tái)中，從而高效率、高質(zhì)量的做好就業(yè)服務(wù)工作。

Hadoop是由 Apache 開源組織提供的分布式系統(tǒng)基礎(chǔ)框架，能夠有效的解決海量數(shù)據(jù)分布存儲(chǔ)和分布計(jì)算，是云計(jì)算技術(shù)應(yīng)用層面很好的解決方案。

一、高校就業(yè)大數(shù)據(jù)信息系統(tǒng)現(xiàn)狀

目前，各高校均建設(shè)了高校內(nèi)部的畢業(yè)生就業(yè)大數(shù)據(jù)信息平臺(tái)，一定程度上滿足了畢業(yè)生就業(yè)服務(wù)的需要。但是這些系統(tǒng)存在以下幾方面問題：第一，系統(tǒng)側(cè)重畢業(yè)生和就業(yè)信息管理，或者只是學(xué)生管理信息系統(tǒng)的一部分，缺乏服務(wù)機(jī)制，無法實(shí)現(xiàn)學(xué)生、教師和用人單位的聯(lián)動(dòng)。第二，系統(tǒng)資源利用率低，系統(tǒng)運(yùn)行效率低、安全可靠性和可擴(kuò)展性差，給學(xué)生數(shù)據(jù)安全帶來很大的隱患。第三，系統(tǒng)數(shù)據(jù)利用率低，多數(shù)集中在簡單的查詢，很難獲得有益的知識(shí)，提供決策服務(wù)。第四，系統(tǒng)缺乏個(gè)性化定制，很難適應(yīng)當(dāng)前就業(yè)工作不斷調(diào)整的需要。

隨著高校、畢業(yè)生和企業(yè)對(duì)就業(yè)服務(wù)的要求提高，現(xiàn)有的就業(yè)信息平臺(tái)已經(jīng)不能適應(yīng)就業(yè)工作多元化的增長和發(fā)展的需要，影響高校畢業(yè)生的就業(yè)效果，新型的就業(yè)大數(shù)據(jù)信息平臺(tái)的建設(shè)已成為破解就業(yè)工作難題的必要條件之一。

二、構(gòu)建基于云計(jì)算的高校就業(yè)大數(shù)據(jù)信息服務(wù)平臺(tái)

云計(jì)算因其強(qiáng)大的計(jì)算和數(shù)據(jù)儲(chǔ)存的能力、可靠、安全的共享數(shù)據(jù)存儲(chǔ)中心、客戶端的設(shè)備配置沒有限制等特點(diǎn)已廣泛應(yīng)用各行各業(yè)，并日益發(fā)展成熟。通過云計(jì)算技術(shù)建設(shè)畢業(yè)生就業(yè)信息平臺(tái)，整合和共享就業(yè)信息資源，為畢業(yè)生就業(yè)提供方便、快捷、高效的信息服務(wù)平臺(tái)，破解現(xiàn)有就業(yè)信息平臺(tái)存在的問題。

從研究現(xiàn)狀來看，云計(jì)算具有以下一特點(diǎn)：

一是強(qiáng)大的計(jì)算和數(shù)據(jù)儲(chǔ)存的能力?！霸啤蹦苜x予用戶完成各類應(yīng)用前所未有的計(jì)算能力，為用戶儲(chǔ)存和管理數(shù)據(jù)提供幾乎無限多的空間。服務(wù)器的日常維護(hù)也有云服務(wù)提供商來進(jìn)行。

二是最可靠、最安全的共享數(shù)據(jù)存儲(chǔ)中心。通過云存儲(chǔ)，數(shù)據(jù)復(fù)制到多臺(tái)物理機(jī)器，避免因硬件崩潰或誤操作刪除的造成的數(shù)據(jù)的丟失或損壞。

三是客戶端的設(shè)備配置沒有限制。用戶在隨時(shí)隨地方便、快捷、安全的使用位于不同計(jì)算機(jī)、不同的操作系統(tǒng)的應(yīng)用服務(wù)，從“云”中獲取個(gè)人的需求。

2.1 構(gòu)建高校就業(yè)云服務(wù)平臺(tái)

根據(jù)提供服務(wù)資源的類型，云服務(wù)被分為三個(gè)類別：SaaS（軟件即服務(wù)）、PaaS（平臺(tái)即服務(wù)）、IaaS（基礎(chǔ)設(shè)施即服務(wù)）。

高校就業(yè)大數(shù)據(jù)信息云服務(wù)平臺(tái)采用 SaaS 模式，通過瀏覽器和移動(dòng)終端將軟件作為云服務(wù)提供給所需用戶。用戶無需購買軟件和維護(hù)軟件，用戶根據(jù)業(yè)務(wù)需求購買相應(yīng)的云服務(wù)，云服務(wù)提供商管理相關(guān)軟件并實(shí)施軟件的維護(hù)。這種方式大大降低用戶在軟件購買和維護(hù)上人力和物力的開支。高校就業(yè)信息云服務(wù)平臺(tái)自底向上分別是“云數(shù)據(jù)層”、“數(shù)據(jù)服務(wù)層”、“業(yè)務(wù)服務(wù)層”、“云服務(wù)層”和“應(yīng)用層”，每層之間采用松耦合，提供相互訪問的接口，用戶不必關(guān)注層內(nèi)部邏輯。

（1） 數(shù)據(jù)存儲(chǔ)層

高校信息服務(wù)平臺(tái)的數(shù)據(jù)主要包含學(xué)生數(shù)據(jù)、用人單位數(shù)據(jù)和高校相關(guān)數(shù)據(jù)，數(shù)據(jù)是作為平臺(tái)的基礎(chǔ)。為了提供便捷、高效、可靠的數(shù)據(jù)訪問，數(shù)據(jù)存儲(chǔ)層采用云存儲(chǔ)技術(shù)實(shí)現(xiàn)。

（2） 數(shù)據(jù)服務(wù)層

數(shù)據(jù)服務(wù)層建立專門進(jìn)行云數(shù)據(jù)層訪問的接口程序，用戶通過 webservice 或者 API 進(jìn)行加密數(shù)據(jù)的訪問，數(shù)據(jù)的具體存儲(chǔ)對(duì)用戶是透明的，這也有效的提高數(shù)據(jù)安全性，并且為數(shù)據(jù)的擴(kuò)展提供基礎(chǔ)。

（3） 業(yè)務(wù)管理層

業(yè)務(wù)服務(wù)層包括高校信息服務(wù)平臺(tái)所有業(yè)務(wù)，具體包括應(yīng)聘招聘、就業(yè)指導(dǎo)、畢業(yè)生困難幫扶、創(chuàng)業(yè)等服務(wù)內(nèi)容，這些業(yè)務(wù)服務(wù)于政府、用人單位、高校、學(xué)生和社會(huì)等不用的用戶。由于就業(yè)工作隨著時(shí)間的推移會(huì)受到就業(yè)形勢、政策等很多因素影響，從而導(dǎo)致就業(yè)工作業(yè)務(wù)和用戶發(fā)生不斷變化，所以就業(yè)信息服務(wù)平臺(tái)業(yè)務(wù)服務(wù)層要具備高擴(kuò)展性。基于以上的要求，我們構(gòu)建了業(yè)務(wù)服務(wù)控制臺(tái)，業(yè)務(wù)服務(wù)被設(shè)計(jì)為可插拔式，每項(xiàng)業(yè)務(wù)可以被掛載在控制臺(tái)，或者從控制臺(tái)被卸載，也可以設(shè)定業(yè)務(wù)接口、執(zhí)行業(yè)務(wù)升級(jí)操作等服務(wù)。

（4） 云服務(wù)層

云服務(wù)層將業(yè)務(wù)服務(wù)層的內(nèi)容以應(yīng)用接口的方式提供給應(yīng)用層，提供的方式是為業(yè)務(wù)服務(wù)層建立 API 接口和webservice 接口。應(yīng)用層可以通過編程的方式調(diào)用業(yè)務(wù)接口，實(shí)現(xiàn)業(yè)務(wù)訪問。

設(shè)定中文信息處理和語音識(shí)別接口，用戶可以通過輸入中文關(guān)鍵字或者語音調(diào)用業(yè)務(wù)，在應(yīng)用層和業(yè)務(wù)層之間建立更加友好的數(shù)據(jù)傳送，也為移動(dòng)終端用戶提供更加便捷的操作方式。

（5） 應(yīng)用層

應(yīng)用層直接面向?qū)嶋H用戶，實(shí)現(xiàn)就業(yè)信息云服務(wù)平臺(tái)不同類型的用戶圖形界面，從而能夠適應(yīng)不同用戶的不同需求。用戶既可以通過個(gè)人電腦上的瀏覽器訪問獲得云服務(wù)、也可以使用智能移動(dòng)終端的應(yīng)用程序或者微信訪問云服務(wù)。

2.2 建立基于 Hadoop 的云數(shù)據(jù)存儲(chǔ)

高校就業(yè)大數(shù)據(jù)信息服務(wù)平臺(tái)需要大量的數(shù)據(jù)進(jìn)行支持，而且數(shù)據(jù)逐年增加。利用云存儲(chǔ)技術(shù)主要解決快速、高效的處理海量數(shù)據(jù)，從而達(dá)到易擴(kuò)展、低成本、易管理、高效和安全的設(shè)計(jì)原則。 Hadoop 軟件框架的HDFS（分布式文件系統(tǒng)）提供了具備高擴(kuò)展性、高容錯(cuò)性、高可靠性、高效等特點(diǎn)，并且可以部署在低廉的硬件上，從而降低成本?；谝陨蟽?nèi)容，高校就業(yè)服務(wù)平臺(tái)的數(shù)據(jù)存儲(chǔ)通過 HDFS 分布式存儲(chǔ)技術(shù)實(shí)現(xiàn)云存儲(chǔ)，Hadoop 的具體部署

2.3 建立基于 Hadoop 的數(shù)據(jù)服務(wù)

數(shù)據(jù)服務(wù)是就業(yè)大數(shù)據(jù)信息云服務(wù)平臺(tái)重要的業(yè)務(wù)，用戶需要了解學(xué)生年齡、學(xué)歷等數(shù)據(jù)分布，需要了解就業(yè)數(shù)據(jù)分布，需要了解用人單位人才需求分布，需要了解就業(yè)數(shù)據(jù)內(nèi)部和外部存在的各種聯(lián)系。數(shù)據(jù)服務(wù)從海量數(shù)據(jù)的計(jì)算中獲得，利用云計(jì)算技術(shù)能夠高效、低成本的解決計(jì)算問題，Hadoop 為云計(jì)算提供了有效的解決方案，它提供了MapReduce 模型，這個(gè)模型解決了傳統(tǒng)并行計(jì)算在易編程性上的瓶頸，程序員可以更容易的開發(fā)分布式并行計(jì)算程序。MapReduce 同 HDFS 一樣采用一個(gè)主控節(jié)點(diǎn)和多個(gè)計(jì)算節(jié)點(diǎn)的架構(gòu)。

將大規(guī)模數(shù)據(jù)集分成多個(gè)小數(shù)據(jù)集，然后這些數(shù)據(jù)集分給多個(gè) map 節(jié)點(diǎn)進(jìn)行并行處理產(chǎn)生中間結(jié)果，最后在 reduce階段對(duì)這些結(jié)果匯總，得到最終結(jié)果。

三、總結(jié)

通過對(duì)云計(jì)算基礎(chǔ)知識(shí)和 Hadoop 分布式云計(jì)算平臺(tái)的學(xué)習(xí)與研究，設(shè)計(jì)了基于云計(jì)算技術(shù)的高校就業(yè)大數(shù)據(jù)信息云服務(wù)平臺(tái)，本平臺(tái)采用五層體系架構(gòu)，基于 SaaS 構(gòu)建業(yè)務(wù)，以云服務(wù)方式提供給用戶，利用 Hadoop 分布式文件系統(tǒng)實(shí)現(xiàn)基礎(chǔ)數(shù)據(jù)云存儲(chǔ)，層與層之間利用 webservice 和 API 進(jìn)行調(diào)用。最后，利用 Hadoop 的 MapReduce 云計(jì)算模型解決就業(yè)大數(shù)據(jù)信息服務(wù)平臺(tái)的數(shù)據(jù)服務(wù)。