微軟全球資深副總裁，微軟(中國(guó))有限公司董事長(zhǎng)張亞勤20日發(fā)表博文“云和大數(shù)據(jù)有望催生顛覆式創(chuàng)新”，文章提出，云計(jì)算和大數(shù)據(jù)的結(jié)合，將對(duì)今后的政治、經(jīng)濟(jì)、科技、民生產(chǎn)生難于估量的影響。無(wú)論是做硬件、做平臺(tái)，還是做應(yīng)用、做服務(wù)，歸根結(jié)底都是以數(shù)據(jù)為核心、以數(shù)據(jù)為動(dòng)力，來(lái)提升產(chǎn)品對(duì)用戶的引力、強(qiáng)化企業(yè)競(jìng)爭(zhēng)力、創(chuàng)造新的商業(yè)機(jī)遇。全文如下：

2008年9月-2009年7月，我曾利用業(yè)余時(shí)間，將自己對(duì)云計(jì)算的現(xiàn)實(shí)與未來(lái)的思考總結(jié)寫成了《云計(jì)算三部曲》。那時(shí)，云計(jì)算對(duì)許多人來(lái)說(shuō)還是新鮮和深?yuàn)W的概念;而今，云已是觸手可及。個(gè)人用戶將文檔、照片、視頻、游戲存檔記錄上傳至云中永久保存，企業(yè)客戶根據(jù)自身需求，可以搭建自己的私有云，或托管、或租用公有云上的IT資源與服務(wù)，這些都已不是新鮮事。去年11月，我們宣布將Windows Azure平臺(tái)帶入中國(guó)，也意味著公有云已成為主流服務(wù)。作為云計(jì)算的殺手級(jí)應(yīng)用，“大數(shù)據(jù)”近來(lái)又引發(fā)了不少行業(yè)人士的關(guān)注和研討，此文將重點(diǎn)談?wù)劥髷?shù)據(jù)與云的關(guān)系，以及二者的結(jié)合，將對(duì)科技和商業(yè)生態(tài)產(chǎn)生怎樣的影響。

三大平臺(tái)之爭(zhēng)與大數(shù)據(jù)

三年前，我首次提出了“三大平臺(tái)之爭(zhēng)“，這是一場(chǎng)注定要曠日持久的爭(zhēng)奪戰(zhàn)。如今，三大平臺(tái)之爭(zhēng)也進(jìn)入了新的階段。

第一個(gè)平臺(tái)是云。由于云計(jì)算基礎(chǔ)設(shè)施建設(shè)需要巨大的資金投入、長(zhǎng)時(shí)間、大范圍的部署和持續(xù)的更新維護(hù)，有足夠的資源、實(shí)力去構(gòu)建大規(guī)模云計(jì)算平臺(tái)的企業(yè)并不多。所以當(dāng)時(shí)我說(shuō)，縱觀全球，也不會(huì)有太多的公司有資格成為云平臺(tái)的掌控者，如今看來(lái)，亞馬遜、微軟、谷歌、Rackspace等少數(shù)公司位于第一軍團(tuán)。

我們正式發(fā)布Windows Azure平臺(tái)是在2010年初。它整合了微軟在云計(jì)算領(lǐng)域的經(jīng)驗(yàn)積淀、創(chuàng)新能量和生態(tài)系統(tǒng)的傳統(tǒng)優(yōu)勢(shì)，三年來(lái)發(fā)展迅猛。隨著2012年9月，微軟云操作系統(tǒng)(包括Windows Server，Windows Azure和System Center)的正式發(fā)布，以及11月微軟與上海市政府、世紀(jì)互聯(lián)達(dá)成合作，宣布將Windows Azure平臺(tái)和Office365服務(wù)引入中國(guó)，標(biāo)志著微軟在中國(guó)的云計(jì)算實(shí)踐進(jìn)入了全新的階段。

第二個(gè)平臺(tái)是智能終端，其本質(zhì)是iOS、Android和Windows之爭(zhēng)。2010年，“移動(dòng)三國(guó)”的競(jìng)爭(zhēng)才剛開(kāi)始。轉(zhuǎn)眼間三年過(guò)去了，戰(zhàn)況是越來(lái)越激烈，而且這場(chǎng)戰(zhàn)役還會(huì)持續(xù)很久。蘋果、Google、微軟都在設(shè)法強(qiáng)化自身的生態(tài)系統(tǒng)，微軟最近幾個(gè)月，陸續(xù)宣布了Windows8、Windows Phone 8等一系列新終端平臺(tái)，目前的市場(chǎng)反響表明，微軟的轉(zhuǎn)型是基本成功的。

更為重要的是，除了PC、平板電腦、智能手機(jī)、游戲主機(jī)等常見(jiàn)的計(jì)算終端之外，微軟早已著眼于在更廣闊的、泛在互連的智能設(shè)備布局，比如智能汽車、智能電視、工業(yè)設(shè)備和手持設(shè)備等。11月宣布的Windows Embedded8標(biāo)準(zhǔn)版預(yù)覽，支持觸摸及手勢(shì)交互，讓數(shù)以百億計(jì)的新機(jī)器與傳統(tǒng)的IT設(shè)備和網(wǎng)絡(luò)連接到一起。而從2012和2013年的CES展看，智能汽車會(huì)越來(lái)越熱，直至普及。

第三個(gè)平臺(tái)是凌駕于云和端之上的，反映真實(shí)關(guān)系的社會(huì)化商務(wù)和社交平臺(tái)。永不中斷的云服務(wù)和彼此連接的人群與海量設(shè)備，帶來(lái)的最大機(jī)會(huì)在于如何以人和數(shù)據(jù)為中心，發(fā)展出反映真實(shí)世界中人與人、人與機(jī)器、機(jī)器與機(jī)器關(guān)系的社會(huì)化網(wǎng)絡(luò)，并在其上誕生消弭真實(shí)與虛擬界限、更加人性化、交互更自然的商務(wù)和社交平臺(tái)，以及應(yīng)用。我們看到，將現(xiàn)實(shí)社會(huì)關(guān)系數(shù)字化、網(wǎng)絡(luò)化、商業(yè)化的嘗試早已開(kāi)始。但迄今為止，現(xiàn)實(shí)世界數(shù)字化的程度還不夠，真正超越國(guó)別、種族和文化壁壘的社會(huì)化網(wǎng)絡(luò)的平臺(tái)仍未建成，這也正是中國(guó)IT產(chǎn)業(yè)的重大機(jī)遇。

顯然，三大平臺(tái)里，云是前提，是基礎(chǔ)。過(guò)去我講過(guò)很多次，云計(jì)算其實(shí)在計(jì)算量越來(lái)越大、數(shù)據(jù)越來(lái)越多、越來(lái)越動(dòng)態(tài)、越來(lái)越實(shí)時(shí)、越來(lái)越需要結(jié)構(gòu)化的產(chǎn)業(yè)背景下被催生出來(lái)的一種基礎(chǔ)架構(gòu)和商業(yè)模式。無(wú)論是云計(jì)算本身、或是智能終端，還是凌駕于云和端之上的，基于社會(huì)化網(wǎng)絡(luò)的平臺(tái)和應(yīng)用，都會(huì)讓數(shù)以百億計(jì)的機(jī)器、企業(yè)、個(gè)人隨時(shí)隨地都在獲取和產(chǎn)生新的數(shù)據(jù)，即使是在摩爾定律的支撐下，計(jì)算設(shè)備硬件性能進(jìn)化的速度也早已趕不上數(shù)據(jù)增長(zhǎng)的速度，并且這一問(wèn)題會(huì)日漸嚴(yán)峻——這樣的背景下，只有云才能解決“賦予數(shù)據(jù)以更大價(jià)值”的問(wèn)題。這也就引出了新的話題，也是最近這段時(shí)間產(chǎn)業(yè)和社會(huì)都非常關(guān)注的“大數(shù)據(jù)”的話題。 #p# 

“大數(shù)據(jù)“的崛起

如今，大數(shù)據(jù)的重要性越來(lái)越明顯，但就和云計(jì)算一樣，它也不是一個(gè)從天而降的新概念，而是在三個(gè)主要因素的驅(qū)動(dòng)下，逐步成長(zhǎng)成熟的。

第一個(gè)驅(qū)動(dòng)力，就是業(yè)界常說(shuō)的大數(shù)據(jù)的三個(gè)V(Volume, Variety, Velocity)，而這三個(gè)V可以有多種解讀。

首先來(lái)看看第一個(gè)V，巨大的數(shù)據(jù)量與數(shù)據(jù)完整性。IT業(yè)界所指的數(shù)據(jù)，誕生不過(guò)60多年。而一直到PC普及到千家萬(wàn)戶之前，由于存儲(chǔ)、計(jì)算和分析工具的技術(shù)和成本限制，許多自然界和人類社會(huì)值得記錄的信號(hào)，并未形成數(shù)據(jù)——幾十年前，氣象、地質(zhì)、石油物探、出版業(yè)、媒體業(yè)和影視業(yè)是大量、持續(xù)產(chǎn)出信號(hào)的行業(yè)，但那時(shí)90%以上采用的是存儲(chǔ)模擬信號(hào)，難以通過(guò)計(jì)算設(shè)備和軟件進(jìn)行直接分析。那些擁有大量資金和人才的政府和企業(yè)，也只能把少量最關(guān)鍵的信號(hào)，進(jìn)行抽取、轉(zhuǎn)換、裝載到數(shù)據(jù)庫(kù)中。

值得注意的是，業(yè)界對(duì)達(dá)到怎樣的數(shù)量級(jí)才算是大數(shù)據(jù)并無(wú)定論，其實(shí)在很多行業(yè)的應(yīng)用場(chǎng)景里，數(shù)據(jù)集本身的大小并不是最重要的，是否完整才最重要。

第二個(gè)V，在海量、種類繁多的數(shù)據(jù)間發(fā)現(xiàn)其內(nèi)在關(guān)聯(lián)。互聯(lián)網(wǎng)時(shí)代，各種設(shè)備通過(guò)TCP/IP網(wǎng)絡(luò)連成了一個(gè)整體。進(jìn)入Web2.0時(shí)代，PC用戶不單單可以通過(guò)網(wǎng)絡(luò)獲取信息，還成為了信息的制造者和傳播者。這個(gè)階段，不僅是數(shù)據(jù)量開(kāi)始了爆炸式增長(zhǎng)，數(shù)據(jù)種類也開(kāi)始變得繁多——從技術(shù)角度看，可以稱之為結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)和流式數(shù)據(jù)。我記得2005年，微軟亞洲研究院一年一度的“21世紀(jì)的計(jì)算”大會(huì)將主題設(shè)定為“Data Centric Computing”，也就是“以數(shù)據(jù)為中心的計(jì)算”，那時(shí)我們就已建立了這樣的認(rèn)知：價(jià)值來(lái)自于數(shù)據(jù)，或者說(shuō)，數(shù)據(jù)一直都是有價(jià)值的商業(yè)資產(chǎn)——此前，人們往往過(guò)于重視“計(jì)算和存儲(chǔ)性能的提升”;而從那時(shí)起，我們就已更關(guān)注“數(shù)據(jù)分析和處理的效率”——對(duì)海量數(shù)據(jù)進(jìn)行分析、處理和集成，找出原本看來(lái)毫無(wú)關(guān)系的那些數(shù)據(jù)的“關(guān)聯(lián)性”，把似乎沒(méi)有用的數(shù)據(jù)變成有用的信息，以支持我們做出的判斷。

第三個(gè)V，可以理解為更快地滿足實(shí)時(shí)性需求。如今，通過(guò)各種有線和無(wú)線電網(wǎng)絡(luò)，人和人、人和各種機(jī)器、機(jī)器和機(jī)器之間無(wú)處不在的連接，這些連接不可避免地帶來(lái)數(shù)據(jù)交換，而數(shù)據(jù)交換的關(guān)鍵是降低延遲——要解決數(shù)據(jù)產(chǎn)生、傳輸、處理、存儲(chǔ)、抽取、分析、可視化等各個(gè)環(huán)節(jié)帶來(lái)的延時(shí)，以近乎實(shí)時(shí)(這意味著小于250毫秒)的方式呈獻(xiàn)給用戶。

如今，數(shù)據(jù)的實(shí)時(shí)化需求越來(lái)越清晰。用戶想駕車去吃飯，先用地圖應(yīng)用查詢餐廳的位置、預(yù)計(jì)行車路線的擁堵情況、停車場(chǎng)信息甚至是其他用戶對(duì)餐廳的評(píng)論。吃飯的過(guò)程中，他會(huì)用手機(jī)拍攝食物的照片，編輯簡(jiǎn)短的評(píng)論，發(fā)布到微博上，還可以用LBS應(yīng)用查找在同一間餐廳吃飯的人，看有沒(méi)有好友在附近……

第二個(gè)驅(qū)動(dòng)力，是云計(jì)算的普及和成為主流。經(jīng)常有一些朋友會(huì)問(wèn)我說(shuō)，云計(jì)算和大數(shù)據(jù)到底有什么區(qū)別?前兩年大家都在講云計(jì)算，現(xiàn)在怎么又變成大數(shù)據(jù)了?其實(shí)，云計(jì)算和大數(shù)據(jù)是一個(gè)硬幣的兩面，云計(jì)算是大數(shù)據(jù)的IT基礎(chǔ)，而大數(shù)據(jù)是云計(jì)算的一個(gè)殺手級(jí)應(yīng)用。由于云計(jì)算的普及和成為主流，讓上述三個(gè)V不再成為挑戰(zhàn)，反而成為大數(shù)據(jù)成長(zhǎng)的驅(qū)動(dòng)力。另一方面由于數(shù)據(jù)越來(lái)越多、越來(lái)越復(fù)雜、越來(lái)越實(shí)時(shí)，這就更加需要云計(jì)算去處理，所以二者之間是相輔相成的。舉例而言，30年前存儲(chǔ)1TB數(shù)據(jù)的成本大約是16億美元，如今存儲(chǔ)到云上只需不到100美元;但存儲(chǔ)下來(lái)的數(shù)據(jù)，如果不以云計(jì)算進(jìn)行挖掘和分析，就只是僵死的數(shù)據(jù)，沒(méi)有太大價(jià)值。

第三個(gè)驅(qū)動(dòng)力，是人工智能、機(jī)器學(xué)習(xí)和數(shù)據(jù)挖掘等技術(shù)的迅速發(fā)展。在這樣的背景下，微軟已經(jīng)可以為用戶提供三個(gè)層次的端到端大數(shù)據(jù)解決方案——其一是數(shù)據(jù)管理，即如何獲取、存儲(chǔ)和保護(hù)數(shù)據(jù);其二是數(shù)據(jù)豐富，即如何清洗、發(fā)現(xiàn)不同數(shù)據(jù)間的數(shù)據(jù)相關(guān)性;其三是，數(shù)據(jù)洞察力，即通過(guò)分析、呈現(xiàn)與決策工具，獲得洞察力，并最終通過(guò)付諸行動(dòng)，產(chǎn)生價(jià)值。

通俗的說(shuō)，就是將信號(hào)轉(zhuǎn)化為數(shù)據(jù)，將數(shù)據(jù)分析為信息，將信息提煉為知識(shí)，以知識(shí)促成決策和行動(dòng)。歸根到底，大數(shù)據(jù)的最終意義在于獲得洞察力和價(jià)值，這也正是大數(shù)據(jù)的第四個(gè)V(Value)，這個(gè)V比前面的三個(gè)V都更重要。 #p# 

云和大數(shù)據(jù)重塑科技和商業(yè)生態(tài)

不太為人所知的是，云計(jì)算和大數(shù)據(jù)的結(jié)合，最先影響到的是科學(xué)研究界。

2007年1月，我在微軟的同事、也是我非常尊敬的一位科學(xué)家吉姆·格雷(Jim Gray)在計(jì)算機(jī)科學(xué)與電信委員會(huì)上的一次演講中描繪了“科學(xué)研究的第四范式”的圖景。所謂“第四范式”是指基于數(shù)據(jù)密集型計(jì)算的科學(xué)研究——吉姆·格雷呼吁資助開(kāi)發(fā)用戶數(shù)據(jù)采集、管理和分析的工具，呼吁資助一個(gè)交流與發(fā)布的基礎(chǔ)設(shè)施。在他的設(shè)想中，數(shù)據(jù)密集型科學(xué)由三個(gè)基本活動(dòng)組成：采集、管理和分析。數(shù)據(jù)的源頭是各種不同規(guī)模和屬性的國(guó)際科學(xué)聯(lián)盟、實(shí)驗(yàn)室甚至于個(gè)人生活，需要?jiǎng)?chuàng)建一系列通用工具來(lái)支持從數(shù)據(jù)采集、驗(yàn)證、管理到分析、存儲(chǔ)的整個(gè)流程，而數(shù)據(jù)分析則覆蓋整個(gè)工作流程的所有環(huán)節(jié)，包括建立數(shù)據(jù)庫(kù)、建模和分析、數(shù)據(jù)可視化等等。吉姆·格雷的最后一次演講體現(xiàn)了這位圖靈獎(jiǎng)大師的遠(yuǎn)見(jiàn)和雄心。

在商業(yè)領(lǐng)域，大數(shù)據(jù)具備極大的想象空間。

上個(gè)世紀(jì)七十年代，紐約的治安狀況很糟糕。一位名叫杰克·邁普(Jack Maple)的年輕警察根據(jù)個(gè)人警務(wù)經(jīng)驗(yàn)，發(fā)明了一種名為“未來(lái)圖表”(Charts of the future)的犯罪預(yù)測(cè)方法論，可以根據(jù)過(guò)往搶劫案的記錄數(shù)據(jù)來(lái)推測(cè)新案件可能發(fā)生的時(shí)間與地點(diǎn)。這種方法真的有效，1994年，新上任的紐約市警察局局長(zhǎng)開(kāi)發(fā)了“未來(lái)圖表”的電子版，將之更名為“CompStat”，推廣至全市的警務(wù)系統(tǒng)。CompStat的技術(shù)核心是犯罪測(cè)繪系統(tǒng)(Crime Mapping System)和數(shù)據(jù)庫(kù)采集系統(tǒng)(Database Collection System)，而微軟的Microsoft MapPoint、Access、Excel等產(chǎn)品為兩個(gè)系統(tǒng)提供了堅(jiān)實(shí)的支撐——基于大量的數(shù)據(jù)采擷、挖掘和分析工作，紐約警察局嘗試對(duì)歷史上犯罪分子的行為規(guī)律進(jìn)行歸納和總結(jié)，并有效地改善了城市的治安。數(shù)據(jù)顯示，在CompStat得到推廣應(yīng)用后，1995年，紐約的兇殺案發(fā)生率降低了約25%，車輛盜竊案發(fā)生率降低了約24%，而且這些數(shù)字還隨著IT軟硬件技術(shù)的持續(xù)更新和CompStat系統(tǒng)的不斷完善而逐年下降。

未來(lái)，透過(guò)技術(shù)手段完全遏制犯罪行為，讓每一個(gè)城市和地區(qū)的居民時(shí)時(shí)刻刻都安全無(wú)虞——這或許不是夢(mèng)想。2012年8月，紐約市長(zhǎng)邁克爾·布隆伯格(Michael Bloomberg)親手揭開(kāi)了紐約警察局與微軟攜手開(kāi)發(fā)的城域感知系統(tǒng)(DAS，Domain Awareness System)的面紗。該系統(tǒng)將覆蓋整個(gè)紐約市的3000多個(gè)監(jiān)控?cái)z像頭、2600多枚輻射探測(cè)器、幾百個(gè)車牌信息讀取裝置所收集的信息匯總到警方數(shù)據(jù)庫(kù)中，可結(jié)合探測(cè)數(shù)據(jù)、實(shí)時(shí)影像、911報(bào)警電話和警方積累的罪案歷史檔案，幫助警方更準(zhǔn)確地偵測(cè)并鎖定即將發(fā)生的犯罪活動(dòng)及嫌疑人。

對(duì)商業(yè)競(jìng)爭(zhēng)的參與者們來(lái)說(shuō)，大數(shù)據(jù)意味著激動(dòng)人心的業(yè)務(wù)與服務(wù)創(chuàng)新機(jī)會(huì)。零售連鎖企業(yè)、電商業(yè)巨頭都已在大數(shù)據(jù)挖掘與營(yíng)銷創(chuàng)新方面有著很多的成功案例，它們都是商業(yè)嗅覺(jué)極其敏銳、敢于投資未來(lái)的公司，也因此獲得了豐厚的回報(bào)。

而對(duì)于那些擁有行業(yè)經(jīng)驗(yàn)，并熟練掌握云計(jì)算開(kāi)發(fā)和應(yīng)用技能的小型企業(yè)，尤其是初創(chuàng)企業(yè)來(lái)說(shuō)，則更是意義非凡。最近幾年，我們看到的一些明星初創(chuàng)公司，比如Cloudera, Splunk, Klout, TellApart等，人員規(guī)模只在數(shù)十人，但對(duì)某個(gè)行業(yè)擁有深厚知識(shí)，并能通過(guò)云和大數(shù)據(jù)的技術(shù)手段，快速解決該行業(yè)的共性需求和痛點(diǎn)——在未來(lái)數(shù)年，這樣的“小而精”、“快而準(zhǔn)”企業(yè)會(huì)越來(lái)越多，并做出有可能改變世界的顛覆性產(chǎn)品。很高興看到，在北京中關(guān)村，在微軟的云加速器二期，也有類似的初創(chuàng)企業(yè)加入，和硅谷、海法的創(chuàng)業(yè)者們一起，把握住了時(shí)代的脈搏。

總而言之，云計(jì)算和大數(shù)據(jù)的結(jié)合，將對(duì)今后的政治、經(jīng)濟(jì)、科技、民生產(chǎn)生難于估量的影響。無(wú)論是做硬件、做平臺(tái)，還是做應(yīng)用、做服務(wù)，歸根結(jié)底都是以數(shù)據(jù)為核心、以數(shù)據(jù)為動(dòng)力，來(lái)提升產(chǎn)品對(duì)用戶的引力、強(qiáng)化企業(yè)競(jìng)爭(zhēng)力、創(chuàng)造新的商業(yè)機(jī)遇。數(shù)據(jù)已經(jīng)被認(rèn)為是寶貴資源，任何一家有雄心、渴望獲取洞察力的企業(yè)，都應(yīng)及早制定大數(shù)據(jù)戰(zhàn)略和方案。否則，所有的機(jī)會(huì)將被“數(shù)據(jù)鴻溝”所延宕。