【大師講堂】應(yīng)對(duì)科學(xué)探索中大數(shù)據(jù)的挑戰(zhàn)
大數(shù)據(jù),一個(gè)日益崛起的領(lǐng)域,從科學(xué)、工程、醫(yī)藥、醫(yī)療到金融、商業(yè)、社會(huì)。它預(yù)測(cè)了2012年美國(guó)總統(tǒng)大選的結(jié)果,也被Google利用搜索關(guān)鍵詞預(yù)測(cè)禽流感的散布。它正一步一步悄然改變著你我的生活,同樣的,它也面臨著諸多困難?;诖?,11月30號(hào)晚,香港中文大學(xué)常務(wù)副校長(zhǎng)、偉倫計(jì)算器科學(xué)與工程學(xué)講座教授華云生教授在道遠(yuǎn)樓一樓校董會(huì)議室里給香港中文大學(xué)(深圳)的部分師生帶來(lái)了一場(chǎng)科學(xué)、嚴(yán)謹(jǐn)?shù)闹v座,為大家分析了存在于大數(shù)據(jù)之中的機(jī)遇與挑戰(zhàn)。

講座開(kāi)始,華云生教授為大家介紹了何為大數(shù)據(jù)。Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價(jià)值)Veracity(真實(shí)性)被視為大數(shù)據(jù)的五V特征,這些特征也就決定了大數(shù)據(jù)因數(shù)據(jù)規(guī)模過(guò)大而無(wú)法存儲(chǔ)或獲取,有關(guān)算法復(fù)雜性的傳統(tǒng)理論可能不再有效,從而無(wú)法使用常規(guī)方法進(jìn)行處理的特性。以此為展開(kāi)點(diǎn),華教授就其與科學(xué)工程領(lǐng)域中應(yīng)用的關(guān)系提出大數(shù)據(jù)研究中面臨的挑戰(zhàn)。大數(shù)據(jù)與其說(shuō)是一種技術(shù),毋寧說(shuō)是一種普遍存在的現(xiàn)象,我們需要的,是對(duì)“數(shù)據(jù)”這座寶藏的挖掘。要想真正處理大數(shù)據(jù),我們的思維方式必須轉(zhuǎn)變。欲實(shí)現(xiàn)大數(shù)據(jù)的成功應(yīng)用,我們需要采用適當(dāng)?shù)姆椒?,?shí)現(xiàn)自動(dòng)從大數(shù)據(jù)提取新知識(shí)而無(wú)需對(duì)數(shù)據(jù)進(jìn)行集中存儲(chǔ)和維護(hù)的目標(biāo)。大數(shù)據(jù)的獲得與處理過(guò)程中困難重重,應(yīng)用的多樣性、缺乏理論基礎(chǔ)、難以應(yīng)付實(shí)時(shí)數(shù)據(jù)等挑戰(zhàn)的存在,使得數(shù)據(jù)的“挖掘”過(guò)程尤其重要,我們需要做的,是尋求使其成為真正“顛覆性技術(shù)”的方法。

華教授提到,要充分發(fā)揮大數(shù)據(jù)在科學(xué)發(fā)現(xiàn)中的作用,我們需要解決數(shù)據(jù)復(fù)雜性、計(jì)算復(fù)雜性和系統(tǒng)復(fù)雜性等諸多問(wèn)題。特別要注意的是云計(jì)算將成為支撐大數(shù)據(jù)應(yīng)用的平臺(tái)。應(yīng)用大數(shù)據(jù)的核心是找到核心數(shù)據(jù),而這恰是難點(diǎn)所在。如把數(shù)據(jù)比喻為蘊(yùn)藏能量的煤礦,不同煤炭的價(jià)值、挖掘成本又不一樣。與此類(lèi)似,大數(shù)據(jù)并不在“大”,而在于“有用”。價(jià)值含量、挖掘成本比數(shù)量更為重要。對(duì)于很多行業(yè)而言,如何利用這些大規(guī)模數(shù)據(jù)是成為贏(yíng)得競(jìng)爭(zhēng)的關(guān)鍵,而現(xiàn)代社會(huì)的發(fā)展,意味著一個(gè)以數(shù)據(jù)為核心競(jìng)爭(zhēng)力的時(shí)代已經(jīng)到來(lái),大數(shù)據(jù)更將成為引領(lǐng)時(shí)代的新動(dòng)力。

講座末,華云生教授悉心回答了同學(xué)與其他教授的提問(wèn),在交流之中加深了對(duì)這次講座的理解。當(dāng)一扇嶄新的學(xué)科領(lǐng)域之門(mén)展現(xiàn)在同學(xué)們的面前,新的時(shí)代應(yīng)召著新的人才,相信這一期的大師講堂,定將使與會(huì)師生受益匪淺。

?
圖:楊子晨
文:汪津成
