李莉
不光是搜索,日志易做的是數(shù)據(jù)的整個流動鏈條。
有人把數(shù)據(jù)比作21世紀的“石油”,當然前提這個數(shù)據(jù)得是有用的數(shù)據(jù)。
這個世界每天都會產(chǎn)生難以計數(shù)的海量數(shù)據(jù),比如網(wǎng)絡(luò)設(shè)備、系統(tǒng)及應(yīng)用在運行時都會產(chǎn)生一個叫日志(log)的事件記錄,而每一行日志都記載著與日期、時間、使用者及動作相關(guān)的描述。這些日志對普通用戶來說或許沒有任何用處,但在懂行的人看來卻藏著金子。
就拿日志搜索管理與分析來說,放在任何人面前,可能都不會覺得這是一個價值百億美元的生意,除非你和日志“交情頗深”。要深到什么程度呢?大概就像日志易CEO陳軍在和創(chuàng)業(yè)邦(微信搜索:ichuangyebang)交流時所言:“工作20多年,幾乎每天都在和日志打交道?!?/p>
這位在思科、谷歌和騰訊三家科技巨頭都有過供職經(jīng)歷的IT老兵,從事過的工作均跟日志分析有關(guān)。他見證了日志管理系統(tǒng)的發(fā)展過程,也深諳企業(yè)日志管理的痛點。
陳軍回憶在谷歌工作時的情景,說:“每天上班第一件事就是查看前一天爬取的網(wǎng)頁處理錯誤信息,用MapReduce寫程序來分析統(tǒng)計日志里的異常情況。如果有異常情況出現(xiàn),就要重新寫程序?!本瓦@樣循環(huán)往復(fù),枯燥程度可想而知。
有痛點的地方往往也意味著有機會。
或許是出于日志管理分析老兵的情懷,又或者是受國外行業(yè)趨勢的啟發(fā),在2014年高德被阿里收購之后,陳軍卸下高德技術(shù)副總裁的職務(wù),帶領(lǐng)在高德和騰訊共事過的一部分老部下開啟了在日志分析領(lǐng)域的“淘金之旅”,推出了運維日志和業(yè)務(wù)日志搜索分析引擎——日志易,產(chǎn)品主要有企業(yè)部署版和SaaS版。
在陳軍看來,以前日志并沒有得到重視,也沒有得到集中處理,很容易因為磁盤存滿或者黑客入侵被刪除,并且即使有相關(guān)的日志分析也只是做事后追查,并非實時監(jiān)控分析。
雖然目前日志實時分析處理有了相對成熟的方法,但仍需要基于Hadoop和Spark等框架進行定制開發(fā),并沒有能夠拿來即用的產(chǎn)品,而且查詢慢,處理相對滯后。
隨著大數(shù)據(jù)和人工智能技術(shù)在工程領(lǐng)域的廣泛應(yīng)用,日志分析有了兩個犀利的工具。以前運維工程師只能憑經(jīng)驗去發(fā)現(xiàn)和排查故障,現(xiàn)在有了日志易這樣的工具軟件,就能做到從日志產(chǎn)生到搜索分析出結(jié)果只有幾秒鐘的延時,實現(xiàn)自動檢測、自動發(fā)現(xiàn)故障以及自動告警。
不光是搜索,日志易做的其實是數(shù)據(jù)的整個流動鏈條,包括數(shù)據(jù)的采集、搜索、分析及可視化。
日志最原始的狀態(tài)是文本,屬于非結(jié)構(gòu)化數(shù)據(jù),不像結(jié)構(gòu)化數(shù)據(jù)那么容易處理,而日志易能夠通過抽取字段將日志數(shù)據(jù)從非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)變成結(jié)構(gòu)化數(shù)據(jù),從而大幅度提升日志的查詢與分析效率,有利于進行高效故障排查、關(guān)聯(lián)分析和預(yù)警。
日志易不僅僅可對服務(wù)器、網(wǎng)絡(luò)、應(yīng)用進行全方位監(jiān)控,它還能夠自動識別這些設(shè)備及應(yīng)用產(chǎn)生的各種信息,根據(jù)運維工程師的需要進行信息的調(diào)取和分析,根據(jù)營銷需求挖掘用戶。
無疑,這就是日志分析技術(shù)的未來趨勢。資本的青睞也從另一方面印證了這一點:日志易在2014年3月獲得真格基金等投資者1400萬元的天使投資,之后又在2015年12月獲得紅杉資本中國基金6000萬元的A輪投資。
“去年第四季度可以實現(xiàn)盈虧平衡,明年應(yīng)該可以盈利。我們企業(yè)部署版的客戶已經(jīng)達到了三位數(shù),廣發(fā)銀行、中石油、中石化、中國移動等都是我們的客戶?!睂τ谀壳暗某煽?,陳軍還算滿意。
由于積累了數(shù)量可觀的銀行、保險、基金等擁有優(yōu)質(zhì)數(shù)據(jù)的客戶,日志易能做的不只是運維日志搜索與分析,還能夠根據(jù)業(yè)務(wù)日志在不影響交易系統(tǒng)的前提下實現(xiàn)統(tǒng)計業(yè)務(wù)情況的可視化,讓企業(yè)對經(jīng)營情況了如指掌。同時,日志易還能通過人工智能算法找到具體的落地場景,并在有效的數(shù)據(jù)中對算法進行驗證優(yōu)化。
雖然數(shù)據(jù)不在日志易手中,但是當你手中沒有那么多優(yōu)質(zhì)數(shù)據(jù)的時候,賣一款不斷改進的工具或許也是一個不錯的選擇。在昔日美國的淘金狂潮中,許多人都涌向西部瘋狂淘金,不過大多數(shù)淘金人都沒掙到多少錢。真正發(fā)財?shù)模悄切┵u水、賣鐵鍬、賣鏟子、賣籃子、賣牛仔褲的人。endprint