大數(shù)據(jù)技術(shù)更需青年人的力量
原創(chuàng)【51CTO綜合報道】微軟“編程之美全國挑戰(zhàn)賽”日前在北京落下帷幕。本次大賽以“大數(shù)據(jù)的可視化處理”為主題,共吸引了來自全國50多所高校的3850名同學(xué)參加,經(jīng)過幾輪激烈的角逐,最終有10位幸運者獲得了微軟的實習(xí)機會。
2012年6月6日,記者有幸在北京中關(guān)村微軟亞太研發(fā)集團大廈內(nèi)見到了這些出類拔萃的參賽者和他們的作品。根據(jù)參賽要求,他們需要在規(guī)定時間內(nèi),完成對相應(yīng)數(shù)據(jù)量的處理和分析。整個過程只限定大數(shù)據(jù)可視化處理的大方向,其他細(xì)節(jié)不做更多限制。
活動當(dāng)天,記者觀看了幾位參賽者的大數(shù)據(jù)處理DEMO,發(fā)現(xiàn)不少同學(xué)的集中點是放在大數(shù)據(jù)信息的圖形化展示上,或者對數(shù)據(jù)的初步篩選。雖然在后期綜合分析處理的思路上有所欠缺,但已初見大數(shù)據(jù)處理的雛形。
IEEE標(biāo)準(zhǔn)協(xié)會董事Ted Olsen先生與51CTO記者一同觀看Demo
IEEE標(biāo)準(zhǔn)協(xié)會董事Ted Olsen先生在與51CTO記者同時觀看一位參賽者的DEMO時,對于大數(shù)據(jù)方面的進(jìn)步表現(xiàn)得非常激動。Ted先生說:“我年輕時做過Coder,在我寫代碼的那個年代,需要將不同的代碼按照不同的顏色進(jìn)行分類,數(shù)據(jù)也是如此。現(xiàn)在,即使是海量數(shù)據(jù)都已經(jīng)可以做到瞬間處理完成。大數(shù)據(jù)技術(shù)在類似能源、交通領(lǐng)域的應(yīng)用將潛力巨大。”
當(dāng)51CTO記者與上海交通大學(xué)的黃偲進(jìn)行交流時,發(fā)現(xiàn)他的大數(shù)據(jù)可視化處理Demo有其獨特之處。首先,黃同學(xué)的Demo除了有簡單的圖標(biāo)分析外,還有不同用戶的相似度分析。比如B75號用戶喜好的論文作者,與B156號用戶的喜好類似。那么在B75號用戶的界面,就能看到一些跟他喜好相似的用戶提示。這有點類似SNS網(wǎng)站中的好友推薦功能。盡管這個功能不是什么新鮮事物,但能夠想到并設(shè)計出權(quán)值計算公式來完成,確實有其與眾不同的地方。
其次,在Demo中,黃同學(xué)還應(yīng)用了學(xué)術(shù)圈的概念,論文作者最終會形成一個類似集群的組織。作者之間會有自己的聯(lián)系線,這些線產(chǎn)生的原因是他們都在研究相似的科學(xué)命題。最終在黃同學(xué)的學(xué)術(shù)圈邏輯圖上,我們能看到一個學(xué)術(shù)圈總會有一個“核心”人物,也就是我們常識中的大牛。他的研究與其他人都有很強的聯(lián)系。而不同的學(xué)術(shù)圈,會通過一到兩個跨學(xué)術(shù)領(lǐng)域的個人聯(lián)系起來。這樣的數(shù)據(jù)分析,有點大數(shù)據(jù)最終數(shù)據(jù)挖掘的味道了。不出所料,黃偲同學(xué)摘得大賽桂冠,獲得了赴美參加電氣電子工程師學(xué)會(IEEE)大會和前往微軟總部參觀的機會。
類似黃同學(xué)這樣具備很強發(fā)散思維和奇思妙想的青年人,會成為未來大數(shù)據(jù)領(lǐng)域的新動力。大賽評委會主席鄒欣認(rèn)為,此次參賽選手技術(shù)能力強,功底深厚,思維靈活,并能將各學(xué)科知識融會貫通,在軟件開發(fā)方面潛力巨大。他特別指出:“希望未來的參賽選手能更具有冒險精神,勇于挑戰(zhàn)難度較高的競賽題目。現(xiàn)代軟件開發(fā)已經(jīng)進(jìn)入團隊協(xié)作的時代,同學(xué)們需要增強自己學(xué)習(xí)和理解已有程序代碼的能力,這將有助于他們更快地成長。”
大數(shù)據(jù)盡管被提出的時間不短,但相關(guān)實踐還更多的集中在萌芽階段。51CTO已經(jīng)關(guān)注到類似Google Bigquery這樣的大數(shù)據(jù)實際應(yīng)用。但考慮到未來大數(shù)據(jù)技術(shù)的發(fā)展,我們期待更多類似微軟“編程之美全國挑戰(zhàn)賽”這樣的活動來挖掘更多的青年力量。



















