車品覺

阿里巴巴集團，浙江 杭州 311121

生活中的大數(shù)據(jù)

車品覺

阿里巴巴集團，浙江 杭州 311121

隨著大數(shù)據(jù)時代的來臨，大數(shù)據(jù)逐漸滲入人們的日常生活中。選取了幾個方向，對已滲入人們生活的典型大數(shù)據(jù)應用進行了分析和闡述，希望能給予讀者啟示。

大數(shù)據(jù)；氣象；銷售；醫(yī)療；信用；數(shù)據(jù)分析；數(shù)據(jù)產業(yè)

1 引言

如今，一個大規(guī)模生產、分享和應用數(shù)據(jù)的時代正在開啟。美國互聯(lián)網(wǎng)數(shù)據(jù)中心指出，互聯(lián)網(wǎng)上的數(shù)據(jù)每年將增長50%，每兩年便將翻一番，而目前世界上90%以上的數(shù)據(jù)是最近幾年才產生的。此外，數(shù)據(jù)又并非單純指人們在互聯(lián)網(wǎng)上發(fā)布的信息，全世界的工業(yè)設備、汽車、電表上有無數(shù)的數(shù)碼傳感器，隨時測量和傳遞著有關位置、運動、震動、溫度、濕度乃至空氣中化學物質的變化，也產生了海量的數(shù)據(jù)信息。這些以“PB”為單位的數(shù)據(jù)將現(xiàn)代社會帶入了一個“大數(shù)據(jù)”時代。

“大數(shù)據(jù)”引起了全球的高度重視。2000年以來，搜索、廣告和電商利用大數(shù)據(jù)獲得豐厚回報。2012年3月，美國奧巴馬政府宣布投資2億美元啟動“大數(shù)據(jù)研究和發(fā)展計劃”，將“大數(shù)據(jù)研究”上升為國家意志，將對未來的科技與經濟發(fā)展帶來深遠的影響。

“大數(shù)據(jù)”其實離我們很近，甚至已逐步滲入人們的生活中，并給人們生活帶來了極大的便利。

2 你的冗余我的寶貝

人們每天都會收到天氣預報，但這對大家來說只不過是個信息，它只能說明人們決定如何適應今天的天氣，比如出門是否帶傘、是否需要多穿衣服等。但美國有一家公司卻把天氣數(shù)據(jù)用于商業(yè)中。這家公司叫Planalytics，是一家全球領先的專注天氣分析的公司，服務來自美國、歐洲及南美的200多家客戶。該公司在天氣分析上積累了大量經驗，特別是在細節(jié)上，在美國多家大型零售和制造商都有成功案例。目前為止，這家公司已分析了上萬億的交易數(shù)據(jù)及8 500個類目，基于這些分析再將天氣數(shù)據(jù)轉化為有助于企業(yè)決策的指針（可理解為數(shù)據(jù)中間層），進而優(yōu)化業(yè)務結果。

數(shù)據(jù)的重大價值在于能讓人們把決策前置。如果通過數(shù)據(jù)能夠比別人哪怕早一秒對事情做出準確的預判，就比競爭對手更有優(yōu)勢。準確的預判加上快速的行動，就是現(xiàn)在人們所講的行動智能（actionable intelligence）。但想達到這個目標，需要足夠的資源，最關鍵的原材料就是數(shù)據(jù)。然而，一些重要數(shù)據(jù)之間的關系往往不是那么直觀，人們常會忽略這些數(shù)據(jù)之間的關聯(lián)性。發(fā)生這種情況有兩種可能：一是這些數(shù)據(jù)之間的關系較隱性，不容易直接被人發(fā)現(xiàn)；二是過去不容易拿到這個數(shù)據(jù)，或者能拿到但數(shù)據(jù)太粗或不夠準確等。

可以想象，春天的到來對零售商意味著春裝的采購、戶外用品銷售的回升等，然而今年的春天是否會和以往相同？數(shù)據(jù)表明，重復上一年天氣的概率僅有15%。而商戶的規(guī)劃往往基于往年的銷售并假設同樣的天氣再現(xiàn)。

天氣對商業(yè)的影響遠大于人們所意識到的，商戶對天氣的反應也往往是滯后和臨時性的。在美國，天氣對服裝行業(yè)和百貨商店的影響都高達30億美元，對園藝五金工具的影響則達到40億美元。對于天氣敏感的類目，利用天氣數(shù)據(jù)將其業(yè)務weatherized（天氣化）帶來的效益是非?？捎^的。天氣數(shù)據(jù)看似簡單，卻價值連城，但其價值并非來自本身，而是通過與具體商業(yè)問題的結合，發(fā)掘出其對商業(yè)的影響，從而創(chuàng)造價值。30℃的天氣對業(yè)務意味著什么？這取決于所在的地區(qū)、所處的類目、所在的季節(jié)、該地區(qū)的歷史天氣以及歷史銷售記錄等。因此，天氣看似是小數(shù)據(jù)，但要利用天氣數(shù)據(jù)驅動業(yè)務，卻需要融入來自多個來源的大數(shù)據(jù)。

一直以來，筆者也觀察了天氣跟服裝銷售的關系，發(fā)現(xiàn)一個很有意思的現(xiàn)象：原來，每年一到冬天剛結束，就有人開始尋找夏裝，而當廣州的天氣第一次變熱時，夏裝的需求就爆發(fā)了。反過來，在冬天，北方城市的首次降溫也會帶來冬裝搜索的熱潮，而最早開始搜索的這些人往往都是服裝達人。

像這樣能了解到天氣與服裝銷售之間關系的人，可能就發(fā)小財了，這就是數(shù)據(jù)聯(lián)結的價值，這就是大數(shù)據(jù)的奇妙之處。別人的冗余，居然被收集起來“廢物利用”，變成了我的寶貝，點石成金。這種經濟效益絕對奇妙無窮，也是筆者從事大數(shù)據(jù)的動力。試想，在地廣人多的中國，如果能夠把更多的環(huán)境數(shù)據(jù)與人們衣食住行的習慣進行關聯(lián)，將有可能挖掘出非常有價值的商業(yè)機會。

3 用生態(tài)數(shù)據(jù)看本質

如何判斷一家公司的文化好壞？找員工填寫調查表，還是找管理層深入訪談？可能去這家公司的洗手間看看，五秒就能得到答案。

其實，現(xiàn)在甚少有企業(yè)會去量化公司的“生態(tài)環(huán)境”，更少有城市會去量化城市的“生態(tài)健康”。大家常常說“智慧城市”，但有誰為“智慧城市”定過指標？“智慧”如何量化呢？是指城市競爭力強，還是居住舒適度高？

人們常常忽視數(shù)據(jù)的價值。很多KPI（關鍵績效指標）的制定和考核都帶有業(yè)務數(shù)據(jù)的痕跡，但是很少聽到企業(yè)說要用數(shù)據(jù)量化公司部門及員工的合作關系，更少看到企業(yè)用數(shù)據(jù)去預測“生態(tài)規(guī)則”的有效性，比如通過數(shù)據(jù)去了解一個新政策出臺后導致的實際影響和人心變遷。實際上，數(shù)據(jù)之所以擁有巨大價值，關鍵在于可以通過數(shù)據(jù)將“生態(tài)”展現(xiàn)出來，并預測隨之而來的影響及趨勢。相信一切都可度量，這才是大數(shù)據(jù)的根本價值所在。

近期一個鮮明案例在美國發(fā)生，美國總統(tǒng)奧巴馬宣布了一個“警察數(shù)據(jù)倡議”，在全美21個重要的管轄范圍執(zhí)行，目標是打造一個可以分析和分享知識、共同解決問題及建立最佳實踐檔案的社區(qū)。

2015年3月，在特遣隊給總統(tǒng)的60條建議中，明確提出了警察數(shù)據(jù)化的強烈需求。這一建議指出，盡管美國采用了廣泛的社交和經濟指標來衡量國家的健康度，然而卻缺乏衡量警察和執(zhí)法機關的指標。警方數(shù)據(jù)的收集是保障公民權利及安全體系中非常重要的一個環(huán)節(jié)。目前這個數(shù)據(jù)開放社區(qū)主要有兩項工作：通過開放數(shù)據(jù)增加透明度，建立社區(qū)信任并支持革新；更好地利用技術手段，例如早期預警，借之識別安全問題，提升責任感及防止濫用警力。

目前，已經有12個警察局承諾加入這個數(shù)據(jù)開放社區(qū)，他們和數(shù)據(jù)科學家一起深度分析警察/公民之間對抗的數(shù)據(jù)，從而讓警察能夠更加有效地在早期介入案件。美國首席數(shù)據(jù)科學家Patil D J亦在社交網(wǎng)站上，就警方數(shù)據(jù)和民眾進行了交流。

奧巴馬當局的聰明之處在于，他們圍繞一個非常小的點——警方數(shù)據(jù)，構建一個數(shù)據(jù)生態(tài)社區(qū)。假以時日，這個社區(qū)可清晰地勾勒出美國社會安全的隱患，完善美國警力結構，進而降低犯罪率。

建立一個“生態(tài)數(shù)據(jù)”的體系，表面上跟傳統(tǒng)的商業(yè)智能方案沒什么不一樣。其中的要點也不外乎數(shù)據(jù)收集、判斷、整合、分析等。但從筆者的經驗發(fā)現(xiàn)，兩者不同的地方在于生態(tài)著重的是平衡，數(shù)據(jù)所顯示的是各種角色之間互為關系的結果，即從外往內看連接點，從垂直細分領域延伸至全面分析。同時，也清晰地認識到，大數(shù)據(jù)雖大，但目前的數(shù)據(jù)對于生態(tài)環(huán)境或系統(tǒng)而言卻遠遠不夠。因此，生態(tài)數(shù)據(jù)的構建將是人們長遠的課題。

4 醫(yī)療業(yè)醞釀大數(shù)據(jù)突破

說起看病，很多人都會覺得痛苦不堪。排隊長、看病慢、費用高，如果換一家醫(yī)院，所有病歷統(tǒng)統(tǒng)作廢，檢查記錄需要重新來一遍。所以，普遍中國人都有個愿望，就是有醫(yī)師、律師、會計師成為自己最貼心的顧問，幫助自己管理身體、司法事務及財富。這是癡人說夢話嗎？現(xiàn)在，美夢或許逐漸成真。

美國初創(chuàng)公司Kyruus正在探挖醫(yī)療領域數(shù)據(jù)，高效地配對醫(yī)生和病人。如果看看航運、旅游業(yè)的做法，就很容易理解Kyruus公司在做什么事情。

人們預訂機票、酒店時，能很方便地根據(jù)指定時間、地點、星級等找到合適目標，那為何不能用這種數(shù)據(jù)驅動方式尋找醫(yī)生呢？瓶頸原來在數(shù)據(jù)的可獲取性。

Kyruus公司花費了大量精力探索多個數(shù)據(jù)系統(tǒng)，把所有與醫(yī)生相關的數(shù)據(jù)整合在一起，包括預約系統(tǒng)、評價系統(tǒng)、索賠和賬單數(shù)據(jù)。醫(yī)生信息系統(tǒng)包括?？?、語言、地點、電子郵箱、最早可預約時間等。當近距離看這些數(shù)據(jù)時會發(fā)現(xiàn)，大家一方面感嘆醫(yī)療資源不足，另一方面竟然有30%～40%的醫(yī)生每天都有空檔。通過Kyruus這個平臺，將大大減少醫(yī)生的空檔，提高醫(yī)療效率。

波士頓和洛杉磯的一些醫(yī)療保險公司已經開始使用這一項服務，Kyruus公司采用對醫(yī)生收費的盈利模式，包括首次數(shù)據(jù)采集發(fā)布費用及后續(xù)的月費。目前Kyruus平臺只向醫(yī)療保險公司開放，但很快將直接面向病人。

在上述例子中看到，Kyruus公司整合了醫(yī)生的數(shù)據(jù)，但在醫(yī)療領域上，大部分數(shù)據(jù)仍未打通。例如，哪位醫(yī)生開了什么藥給哪種病人，這個病人吃藥后效果如何，這個病人以前的病歷是否對藥效有影響，甚至無數(shù)不同的病人對不同藥物的反應是怎樣，人的基因與藥物測試結果的關系等。不同醫(yī)生的診斷數(shù)據(jù)能否相互關聯(lián)，形成一個龐大數(shù)據(jù)庫，進而讓機器從中學習，并找出最好、最有效的治療方法呢？

試想還有多少專業(yè)領域正等待大數(shù)據(jù)去革新？越是看起來牢不可破的行業(yè)，就蘊藏著越大商機，當大家發(fā)現(xiàn)數(shù)據(jù)資源豐富（已數(shù)據(jù)化），但基于技術或組織原因而分散的行業(yè)時，該行業(yè)就值得立即革新?！瓣P聯(lián)”就是大數(shù)據(jù)的創(chuàng)新精神。

筆者相信人類正在加速這方面的發(fā)展，希望借助大數(shù)據(jù)的力量，打破和革新更多傳統(tǒng)行業(yè)的服務壁壘，讓人們過上更輕松、更幸福的生活。

5 我的信用我做決定

大家試過信用卡逾期未還款嗎？如果告訴大家逾期還款3次以上，會影響日后貸款的利息，大家可能就不會輕易忘記還款了。信用分數(shù)一直是個黑盒子，人們不知道自己為何會得到這樣的評分，得不到適時反饋的結果是我行我素，甚至自暴自棄。每一次人們悔不當初之時，心里總會想：早知道就好了。

其實，眼下大部分的現(xiàn)實反饋都是滯后的：等到體檢后才知道“三高”，等到失眠后才知道喝太多咖啡，而這時候再彌補和改正可能已經晚了。未來，大數(shù)據(jù)可以幫助人們“早知道”一點嗎？再進一步看，大數(shù)據(jù)可以幫助人們迅速糾正錯誤的判斷和行為嗎？答案必然是肯定的。

現(xiàn)實中已有很好的例子，比如健康手環(huán)，實時地收集走路、休息、睡眠、心率等生活活動數(shù)據(jù)，讓人們更好地自律，更健康地生活。根據(jù)這些數(shù)據(jù)的反饋，可以馬上采取修正行動。

下面為大家介紹的一家創(chuàng)新金融公司Credit Karma（CK），是一個打破“訊息黑盒子”的真實案例。該公司成立于2007年，業(yè)務完全基于信用數(shù)據(jù)，繼而發(fā)展到繁多的個人金融服務，目前已有4 000萬用戶，占美國人口的12%，非?？捎^。在美國，信用分數(shù)（credit score）至關重要，大至房屋貸款，小至租房租車，對一個人的信用判斷都強烈依賴信用分數(shù)，幾乎所有人對自己的信用分數(shù)都非常重視。

CK是一個免費的個人信用分數(shù)管理平臺，把曾經是信用機構和金融機構才能取得的信用數(shù)據(jù)透明化。在得到用戶授權的情況下，該公司從美國三大征信局提取信用評分數(shù)據(jù)并提供給用戶，又在用戶的分數(shù)發(fā)生突變時及時通知。同時，幫助用戶理解影響其信用分數(shù)的關鍵因素，例如申請信用卡太多造成負面影響。這家公司還提供信用工具，例如信用分數(shù)仿真器，仿真發(fā)生某種個人金融行為對信用分數(shù)的影響。

在提供個人信用管理服務的基礎上，CK公司基于對個人信用數(shù)據(jù)的了解，進而發(fā)展為個人金融服務平臺。該公司相信他們擁有足夠的數(shù)據(jù)來為用戶提供金融建議，當用戶的信用分數(shù)上升時，理應獲得更低的利率，CK公司會在第一時間為用戶提供最佳的產品推薦，現(xiàn)已包括信用卡、貸款及保險等。

有趣的是，梵文karma可簡單翻譯為因果，這個因果可能是有延遲效應的（佛家叫“業(yè)”），其中可分為共業(yè)與自業(yè)，呼應于數(shù)據(jù)收集，便可解釋為個體反饋與集體反饋。信用評價與大環(huán)境的經濟氣候向來息息相關，大數(shù)據(jù)能給個人帶來的就是集體經驗的反饋。收集自己的健康數(shù)據(jù)，可以調節(jié)生活習慣，促進健康。若能導入類似人群的健康數(shù)據(jù)進行比較分析，必然會得到更好的健康指導。

筆者認為，大數(shù)據(jù)的趨勢是運用集體智慧去優(yōu)化個體的意愿，這種互動是一種新的生活方式。以CK公司為例，人類與大數(shù)據(jù)之間的互動，將會加速變革很多傳統(tǒng)行業(yè)，使之產生翻天覆地的變化。

6 大數(shù)據(jù)走向平民化

筆者曾經跟一位美國零售集團的高管交流，得知數(shù)年前當傳統(tǒng)零售業(yè)意識到電子商務所帶來的改變時，除了大量招聘數(shù)據(jù)科學家之外，第一件事就是去收集在線對手大量的實時商品數(shù)據(jù)。經歷了幾年后，如今美國的大型零售公司都已具備選擇商品、動態(tài)定價及多終端多渠道的管理能力。為了支持每一秒鐘與對手的競爭，可以想象收集更廣、更實時數(shù)據(jù)的重要性，即使是一個簡單的天氣變化，都有可能令當前商品的競爭力落后于對手。

兵法有云“知己知彼，百戰(zhàn)不殆”，對于企業(yè)應該如何使用數(shù)據(jù)，這一句話最為貼切。當很多公司問該怎么使用數(shù)據(jù)時，筆者必然會告訴他，用數(shù)據(jù)了解自己（知己）是第一步。第二步就是用數(shù)據(jù)來了解競爭對手（知彼），并根據(jù)對手的動態(tài)變化做出攻守判斷。大數(shù)據(jù)的關鍵，就在于如何量化數(shù)據(jù)大小與決策好壞的關系。

大家可能會問：這么高難度的事情，小企業(yè)如何跟得上呢？好消息是在這幾年間，美國的大數(shù)據(jù)生態(tài)已逐步走向平民化。

最近，美國一家專注數(shù)據(jù)收集爬取的公司Import.io，就讓大家眼前一亮。互聯(lián)網(wǎng)是世界上最大的開放數(shù)據(jù)來源，通過Import.io公司的工具，用戶可以瞬間將眾多不同網(wǎng)站轉化為數(shù)據(jù)表格或API（應用程序編程接口）。Import.io公司每天從互聯(lián)網(wǎng)上搜集千萬條紀錄，至今已從30萬個網(wǎng)站上收集了上千億條數(shù)據(jù)紀錄。Import.io公司在同類公司中技術領先，曾多次被評選為最佳創(chuàng)業(yè)公司。目前該工具對個人用戶免費開放，對企業(yè)用戶則源源不斷地提供大規(guī)模、定制化及具有質量保證的數(shù)據(jù)。

令人感到興奮的是，他們把采集半結構化數(shù)據(jù)這項本來只有技術工程師才能做的事，變成了人人都可使用的平民化服務。而健康的大數(shù)據(jù)生態(tài)，應該是可以讓數(shù)據(jù)從收集、加工到應用的各個環(huán)節(jié)變得愈來愈精細，整個數(shù)據(jù)處理的過程形成一個互惠互利的產業(yè)鏈，大家都在大數(shù)據(jù)的海洋中共同分工協(xié)作。

不得不贊嘆美國大數(shù)據(jù)產業(yè)鏈的發(fā)達：有人做數(shù)據(jù)的中間層，比如把天氣跟零售的數(shù)據(jù)關聯(lián)起來給需要的人使用；有人把機器學習的門坎降低，變成MLS（machine learning as a service），讓不懂數(shù)據(jù)的人也具備數(shù)據(jù)學習的能力；也有人把數(shù)據(jù)可視化變成簡單易用的工具。Import.io這樣的公司就把數(shù)據(jù)收集變成如水電煤一樣每個人都能使用的服務。

雖然大數(shù)據(jù)從原始數(shù)據(jù)到加工再到使用是很長的鏈條，但如果有好的數(shù)據(jù)生態(tài)和產業(yè)鏈，每個人專注其中的一個環(huán)節(jié)，各司其職，分工協(xié)作，就能把數(shù)據(jù)的價值發(fā)揮到最大。希望在不遠的將來，中國也能跟美國一樣，早日建立豐富完整的數(shù)據(jù)產業(yè)鏈。

7 結束語

大數(shù)據(jù)已在人們的生活中開花結果，在不經意間，給人們的生活帶來了極大的便利，使科技發(fā)展日新月異。

Big data in our life

CHE Pinjue
Alibaba Group, Hangzhou 311121, China

With the arrival of the era of big data, big data has gradually come into people’s lives. Some typical big data applications that have influned into people’s lives were analyzed and described as inspiration.

big data, meteorology, sales, medical treatment, credit, data analysis, data industry

TP399

A

10.11959/j.issn.2096-0271.2016011

2015-11-03

車品覺（1965-），男，現(xiàn)任阿里巴巴集團副總裁，浙江大學管理學院客座教授，中國計算機學會大數(shù)據(jù)專家委員會副主任，全國信息技術標準化技術委員會大數(shù)據(jù)標準工作組副組長，華人大數(shù)據(jù)學會執(zhí)行會長，中國計算數(shù)學學會第九屆理事，清華大學教育指導委員（大數(shù)據(jù)項目）等職。暢銷書《決戰(zhàn)大數(shù)據(jù)》的作者。多年來致力于研究大數(shù)據(jù)和互聯(lián)網(wǎng)的發(fā)展趨勢。曾在美、英、澳等地接受西方教育，畢業(yè)于新南威爾士大學，后于清華大學及英士國際商學院（INSEAD）獲得雙碩士學位，先后在 HSBC、PCCW、微軟、eBay等多家跨國公司任高管職務，未加入阿里巴巴集團之前，在敦煌網(wǎng)任CPO。2010 年發(fā)起桑珠助學公益計劃，致力于改善藏區(qū)兒童教育。