白猛+張建文+張波

【摘要】 本文首先分析了兗礦礦井云數據中心的現狀及存在的問題，提出了利用SDN技術實現集團“內外一朵云”的總體建設思路；介紹了SDN技術應用于構建數據中心網絡的優(yōu)勢；對基于SDN實現多數據中心互聯的架構和方法進行探討；最后對實現兗礦礦井級數據中心互聯的需要重點解決的問題進行了總結。

【關鍵字】 云數據中心 軟件定義網絡 EVI 數據中心互聯

一、兗礦數據中心發(fā)展現狀

1.1現狀及問題

目前云計算已從技術導入階段進入產業(yè)蓬勃發(fā)展、應用迅速普及階段，隨著大數據戰(zhàn)略和云計算創(chuàng)新發(fā)展 ，我國云計算產業(yè)發(fā)展處在重要時刻，云計算作為未來信息產業(yè)發(fā)展的戰(zhàn)略方向之一，是推動經濟增長、加速產業(yè)轉型的引擎。兗礦集團多年來大力發(fā)展云計算，完成了集團級私有云建設，同時在外部新建礦井金雞灘煤礦、石拉烏素煤礦、轉龍灣煤礦、營盤壕煤礦完成了礦井級數據中心建設，在本部礦井中正在積極推進興隆莊煤礦、東灘煤礦的數據中心建設。云計算數據中心顛覆了傳統的ICT產業(yè)，它所帶來的按需使用、資源共享、綠色節(jié)能、快速業(yè)務部署等好處，可帶來更加低成本的應用、更加快速簡潔的部署，為集團公司創(chuàng)造了巨大的社會效益和經濟效益。

但是由于地理位置的限制，兗礦礦井級數據中心處在不同的物理站點，形成了多個獨立數據中心的孤島，同時因投資預算有限多數礦井級數據中心只配置了單臺服務器刀箱，不能滿足災備和擴容的需求，沒有形成統一的計算資源池，存在著資源利用率低、安全級別等級低、業(yè)務連續(xù)性差、可維護差等諸多問題。

1.2需求分析

在云計算模式下，提高資源利用率、服務器高可用集群、虛擬機遷移、資源靈活調度、容災備份、就近服務體驗等新的業(yè)務需求，促進了 DCI（Data Center Interconnection，數據中心互聯）發(fā)展。其主要解決的問題：

（1）數據中心資源利用率不均；

（2）數據中心間的實時數據災備；

（3）跨數據中心的服務器高可用集群和虛擬；

（4）用戶訪問數據中心以及數據中心間互訪；

（5）數據中心網絡智能化、差異化需求；

因此基于SDN技術實現礦井級數據中心互聯，構建一個軟件定義、多活、安全的統一云數據中心資源池體系，從根本上打破原有的物理站點的限制，實現集團層面的集約化運營，實現集團“內外一朵云”成為下一步集團公司礦井級云數據中心建設的工作重點。

二、SDN技術簡介

SDN（軟件定義的網絡）是一種新型的網絡體系結構，通過將網絡控制與網絡轉發(fā)解耦合構建開放可編程的網絡體系結構。SDN認為不應無限制地增加網絡的復雜度，需要對網絡進行抽象以屏蔽底層復雜度，為上層提供簡單的、高效的配置與管理。SDN旨在實現網絡互聯和網絡行為的定義和開放式的接口，從而支持未來各種新型網絡體系結構和新型業(yè)務的創(chuàng)新。軟件定義的網絡SDN是一種新型的網絡體系結構，通過將網絡控制與網絡轉發(fā)解耦合構建開放可編程的網絡體系結構。SDN認為不應無限制地增加網絡的復雜度，需要對網絡進行抽象以屏蔽底層復雜度，為上層提供簡單的、高效的配置與管理。SDN旨在實現網絡互聯和網絡行為的定義和開放式的接口，從而支持未來各種新型網絡體系結構和新型業(yè)務的創(chuàng)新。

在數據中心互聯方面，谷歌的案例最為業(yè)界熟知。谷歌利用光纖資源把全球12個主要的IDC進行了互聯，利用集中部署的TE工程，通過SDN技術實現統一調度，宣稱可以達到95%的鏈路利用率。作為國內互聯網巨頭，騰訊也在這方面做了些創(chuàng)新，騰訊把全國規(guī)劃為四大區(qū)域，每個區(qū)域部署20到30萬臺量級的服務器，進而進行數據中心節(jié)點互聯。

三、數據中心互聯

利用SDN技術構建多活數據中心體系架構，實現高資源利用率、高業(yè)務連續(xù)性、資源靈活調度統一的計算資源池。

3.1總體架構

基于 SDN 的數據中心互聯架構，通常由 數據中心內部實現組網、DCI 廣域骨干網、數據中心 間業(yè)務協同控制平臺3個部分組成。

（1） 在數據中心內部：在數據中心內部要求實現高帶寬、低延時、可擴展的大二層網絡。通常是部署 SDN 交換機，便于虛擬資源和網絡策略的同步快速遷移，可以使網絡和計算 / 存儲資源更緊密的協同并能實現對全局資源的有效控制。采用虛擬交換機，實現基于物理網絡的二層疊加網絡技術。實現物理網絡和虛擬網絡互通的網關（以軟件實現虛擬路由器、虛擬 DHCP、NAT、防火墻、虛擬負載均衡、虛擬 VPN）等功能 ；實現東西向三層互通的分布式路由器以及東西向流量隔離的分布式防火墻 ；實現數據中心內部網絡配置、監(jiān)控、編排、流量、自動化部署等控制。（2）DCI廣域網骨干 ：數據中心間網絡可以選擇 ：裸光纖、租用運營商 網絡、城域承載網、Internet 或者自建 WAN 等。（3）DCI 業(yè)務協同控制器 ：在 DCI 廣域網基礎上，通過 SDN 控制器，將用戶的網絡策略集中在控制器端，負責對整個 DCI網絡配置進行集中管理，并對 轉發(fā)器的流表轉發(fā)控制。

3.2總體方案

實現數據中心整合、業(yè)務統一運營、異地容災備份、虛擬機遷移等首要需求就是虛擬機能夠跨站點透明遷移，遷移前后IP地址不變，所以必須在各站點間實現二層網絡互聯。

數據中心之間二層互聯需要具備以下基本要求：

（1）站點相互獨立。數據中心間二層互聯后，某個站點的故障不會傳遞到其它站點，如廣播風暴。另外，站點內的拓撲互不影響和依賴。

（2）傳輸無關性。對站點之間傳輸數據時使用的技術與站點位置、提供商的網絡無特殊要求，盡量使用最通用的技術，例如只要求核心網絡支持IP即可。

（3）高可靠性。使用多歸屬來提供冗余接入，并具有在站點間避免流量環(huán)路的機制。

（4）鏈路使用效率。站點之間的流量包括組播和廣播必須得到充分的優(yōu)化從而盡量節(jié)省帶寬，在具有冗余鏈路時實現負載分擔。

（5）靈活性。數據中心互聯不要依賴于站點的拓撲結構，不對站點拓撲結構有特定要求。

（6）運營維護簡單。站點互聯使用的技術盡量簡單，可以快速新增和減少站點。邊緣設備上的配置要盡量簡單，并且對站點現有的網絡變動最小化，部署過程對流量轉發(fā)不產生影響。

我們采用EVI（以太網虛擬互聯）解決方案。EVI是一種先進的“MAC in IP”技術，基于IP核心網實現二層互聯。通過EVI連接到IP核心網的數據中心站點，就像是直接連接到二層交換機上，同時能夠實現數據中心之間的安全隔離。 EVI可以通過匯聚層和核心層之間的IP網絡實現二層互通，所以通過EVI擴展多個二層域的時候不需要更改布線或是設備，僅僅需要在匯聚設備上啟用EVI特性即可，這樣可以平滑的擴展二層網絡的規(guī)模。其技術成熟、架構穩(wěn)定，能夠支持大規(guī)模二層網絡，運維簡單方便。

四、結束語

本文對基于SDN的多數據中心互聯方案進行了探討，但真正意義上的數據中心互聯的統一資源池實際上還要在數據中心的從上到下各個層面，網絡、存儲、服務器、數據庫、應用都要有互聯的設計。

1、2015年已經有企業(yè)開始采用SDN解決方案。預計2016年將會是SDN井噴發(fā)展的一年，因此我們應該抓住機遇，按照統一規(guī)劃、分步實施的原則盡快啟動礦井級數據中心互聯建設工作。

2、大多數情況下，SDN仍然是一個全新的事物，雖然新技術能帶來各種優(yōu)勢，但如果不了解真正的需求以及SDN將如何發(fā)揮功能，那么失敗在所難免。因此我們要仔細調研自身業(yè)務情況，同時組織人員深入了解SDN技術。

3、各個層面的整合是實現數據中心互聯的難點，從硬件設備、網絡、存儲、應用軟件、中間件到數據庫都是各種各樣的，不同層面的整合又有不同的技術，需要在多種可能中尋求符合兗礦自身實際又符合虛擬化、云計算發(fā)展趨勢的技術方案，同時應充分考慮到標準性、開放性、靈活性、可維護性等因素。