Richard+Campione
中國、美國在過去的幾百年中都經歷了各種進化,中國是在過去的30年之內完成了數據演變的過程,這個進化是從數據開始的,到2020年中國數據量預計將占全球數據量的21%,比過去的15年增長得都要快,而且每天我們都在產生越來越多的數據。
Splunk預計到2020年,將會在數據市場中投入約1.4億元,但是,到目前為止不幸的是只有15%的組織真正部署了大數據生產項目,所以我們現(xiàn)在處于數據發(fā)展的早期階段。
我們需要了解數據如何能運用得更好,在龐大的數據量面前,怎樣從中挖掘數據的有效價值?如果企業(yè)沒有在生產上面有更多的部署,或者沒有改變日常生活,那么可能就是一種浪費。
一些公司已耗費五到六年的時間,想要獲得一個數據洞見,同時他們也希望在數據中的投入能夠在現(xiàn)實中傳遞價值,但隨著數據量的不斷增長,結果卻導致了一天之內高達100億美元損失,怎么樣才能夠解決這些問題?比如可口可樂公司需要實時地了解客戶的行為,同時改變對客戶采購的商業(yè)決策,要求實時了解網上交易的具體情況,去改善客戶的體驗,并保護網絡交易的安全性,確保可口可樂線上交易的快捷和順暢。
什么是機器數據?機器數據只是一些數字、數據、字符等組合在一起,無法有效協(xié)同,這些機器數據雜亂無章,但是如果把數據和機器分開,會出現(xiàn)分成訂單處理、中間件、IVR(互動式語音應答)等問題,中國使用微信處理這些問題,但挖掘數據內部信息時,便會發(fā)現(xiàn)比如客戶的訂單ID在IVR里,當客戶下了一個訂單,同時中間件發(fā)生了錯誤,中間件無法進行信息分配和存儲,所以客戶打電話給客服中心時,要等待的時間較長,這些極大地降低了用戶體驗。而怎樣在系統(tǒng)中去解決機器數據中所獲得的信息,通過相互協(xié)同進行數據傳遞,這也是Splunk一直在嘗試做的。
Splunk與客戶在過去合作的幾十年中,一直在總結大數據發(fā)展的經驗,并得出五個原則。第一,需要把數據看成是一個平臺,把不同的平臺應用結合在一起,這樣人們在學習數據的同時才會變得更加簡便。
第二,對于系統(tǒng)安全部門,他們所關注的是,是否經常會出現(xiàn)黑客攻擊。由于安全部門關注點不一樣,只能按照日常情況來處理所發(fā)現(xiàn)的問題,但是安全部門在保證安全的同時也會獲取商業(yè)信息,所以從一個領域開始獲得了一些價值,便能夠擴展到其他領域,同時可獲得一個路線圖,并能夠轉移到商業(yè)部分,指導營銷部門對客戶的行為做出反應,從而確保我們在用戶資產收益和客戶服務上的水平。
第三,大部分的高價值信息可以從大數據中獲得,這些數據信息實時產生,要把實時的信息在機器數據上和大量的數據結合在一起。通過ERP、CRM等系統(tǒng)的數據倉庫連接起來,實時了解當下發(fā)生的情況。
而在市場和云中總蘊藏著各種各樣的數據,要想獲取這些數據,首先就要獲取云以及現(xiàn)場的所有信息,而在數據不斷增加的同時,企業(yè)規(guī)模也在不斷擴大。
企業(yè)規(guī)模需要投入物力進行構建,但是企業(yè)發(fā)展最為重要的不僅僅是規(guī)模,而是生產和業(yè)務。在所有生產流程中,涉及客戶以及各種商業(yè)機密,則需要企業(yè)和實體經濟相結合形成網絡,來保證企業(yè)大規(guī)模生產和轉型。
第四,人們在挖掘數據價值時發(fā)現(xiàn)了什么?倫敦機場發(fā)現(xiàn)一些問題,如果乘客不了解怎么去進行安檢,可能很多乘客要等很長時間,所以機場要確保95%的乘客能夠在5分鐘之內通過安檢。
如果通過機器數據技術連接機場網絡,機場可得知客流量數據,來進行疏導,可以防止大部分乘客滯留在機場。若將機器數據與人工智能相結合,通過深度學習技術,就能夠實時了解客戶的服務情況和客戶的基本情況。
第五,如何及時發(fā)現(xiàn)黑客攻擊,或者怎么知道黑客的攻擊方法之前有沒有使用過?這就需要把所有的數據結合在一起,幫助進行預測和調整。而Splunk的使命就是讓每個人都能夠訪問和使用機器數據,從中獲得價值。Splunk從底部開始,把云上以及現(xiàn)場數據收集起來,然后分析和存儲。目前日常的數據處理需求量越來越大,需要把大部分的數據實時地進行交付,在機器以及人工智能層面進行應用,隨時解決系統(tǒng)所發(fā)生的問題,確保使用者可以順利操作。
在發(fā)展大數據的旅程中,第一,要使數據管理一步到位,把數據放到一個地方,可以有不同的人、不同的團隊從中獲得價值。
第二,如果監(jiān)管供應商提供產品和運維,則必須保證正確的數據、正確的工具和正確的使用方法。
第三,數據的價值,有時候并不知道會出現(xiàn)什么問題,所以需要依據歷史背景查詢數據。第四,需要掌控現(xiàn)場而且能享受云的便利,在數據量持續(xù)增長的同時,要保證在增長的過程當中數據的絕對安全。
(根據演講內容整理,未經本人審核)endprint