11月24日，由ZDNet至頂網(wǎng)主辦，英特爾協(xié)辦、VMware和SAS支持的主題為“大數(shù)據(jù)•政府決策的科學(xué)發(fā)展觀”的第五屆政務(wù)信息化高峰論壇在昆山舉行。多位政務(wù)信息化專家、大數(shù)據(jù)實踐精英及IT界意見領(lǐng)袖出席了會議，并在會上就大數(shù)據(jù)在政務(wù)信息化中的實際應(yīng)用等問題進行了深入交流。其中，英特爾行業(yè)合作與解決方案部中國大區(qū)總監(jiān)凌琦在會上表示，大數(shù)據(jù)已經(jīng)成為整個業(yè)界的發(fā)展方向，并且在技術(shù)和用戶的角度還有很多需要探討，大數(shù)據(jù)已經(jīng)引發(fā)了新一輪的信息革命。

英特爾行業(yè)合作與解決方案部中國大區(qū)總監(jiān) 凌琦

大數(shù)據(jù)面臨處理難題

Gartener早在2010年分析得出信息將成為21世紀的石油，同年The Economist也發(fā)表觀點稱，數(shù)據(jù)日益成為商業(yè)的新源材料“一種與資本和勞動力并列的新經(jīng)濟元素”。

數(shù)據(jù)量大、規(guī)模大、速度快是大數(shù)據(jù)的三大特征。在2011年兩天的數(shù)據(jù)量就達到了1.8ZB，這相當于文明起始到2003年的整個數(shù)據(jù)量。除了人所產(chǎn)生數(shù)據(jù)外，機器數(shù)據(jù)即物聯(lián)網(wǎng)數(shù)據(jù)也在逐年遞增。

我們看到的數(shù)據(jù)大概80%以上是非結(jié)構(gòu)化數(shù)據(jù)，只有20%是結(jié)構(gòu)化的數(shù)據(jù)，結(jié)構(gòu)化數(shù)據(jù)可以用結(jié)構(gòu)化數(shù)據(jù)的關(guān)系型數(shù)據(jù)庫可以處理，非結(jié)構(gòu)化數(shù)據(jù)就要依賴于新的技術(shù)來處理。凌琦指出，過去傳統(tǒng)處理結(jié)構(gòu)化數(shù)據(jù)所使用的關(guān)系型數(shù)據(jù)庫，它的規(guī)模完全沒有辦法處理，所以要使用并行式數(shù)據(jù)庫、分布式數(shù)據(jù)庫等各種方法，采用一些新的架構(gòu)來處理這些問題。

從規(guī)模上看，很多應(yīng)用沒有進行大數(shù)據(jù)處理，這些非結(jié)構(gòu)化數(shù)據(jù)能夠得到分析會大大提高效率。例如，在檢查汽車套牌上，大數(shù)據(jù)處理可以把所有數(shù)據(jù)進行對比，并在短時間里找到車輛的顏色、型號是否符合，再反饋給在場的執(zhí)勤的警察。凌琦表示，像這一類問題都是有實時性、數(shù)據(jù)規(guī)模、數(shù)據(jù)多樣性的非結(jié)構(gòu)化數(shù)據(jù)居多，傳統(tǒng)的數(shù)據(jù)庫是沒有辦法處理的。

此外，大數(shù)據(jù)正在快速涌現(xiàn)生出態(tài)系統(tǒng)。凌琦表示，大數(shù)據(jù)業(yè)務(wù)實際上才剛剛開始，這對于整個業(yè)界是非常大的挑戰(zhàn)。新技術(shù)、新人員和技能提供最佳實踐，在這樣的商業(yè)模式下變成一個可盈利可持續(xù)的業(yè)務(wù)。使企業(yè)和組織有能力對大量的、不斷增長的、多樣的、多維的、結(jié)構(gòu)化以及非結(jié)構(gòu)化數(shù)據(jù)進行管理、分析并據(jù)此采取行動。

大數(shù)據(jù)時代 Intel的定位

目前主要的大數(shù)據(jù)行業(yè)包括電信、零售、金融服務(wù)、制造、醫(yī)療、物聯(lián)網(wǎng)、智慧城市，在這些行業(yè)里只有10%的數(shù)據(jù)。Intel看到了其中的機會，不僅僅在服務(wù)器同時也存在在網(wǎng)絡(luò)、存儲，以及高性能數(shù)據(jù)分析軟件中，像Hadoop這些新技術(shù)會逐漸成熟。

Intel希望在大數(shù)據(jù)時代從各方面進行投入，將軟件的分析時間從小時縮短到秒，提高計算的性能，存儲結(jié)構(gòu)更加分布式、智能化并且進行橫向擴展，提高SSD的吞吐量，以及建立高速分布式的網(wǎng)絡(luò)結(jié)構(gòu)。在這些能夠領(lǐng)域里Intel希望為大數(shù)據(jù)處理提供一個基礎(chǔ)架構(gòu)，或一些工具。

凌琦指出，Intel也并購了很多大數(shù)據(jù)處理以及架構(gòu)廠商，并且Intel在上海有一個團隊專門在做Hadoop大數(shù)據(jù)處理架構(gòu)的開發(fā)。

據(jù)悉，Intel上海研發(fā)實驗室投入了將近2000多個專業(yè)工程師在進行開發(fā)，從前端的筆記本到后端的服務(wù)器網(wǎng)絡(luò)，其中80%的前端產(chǎn)品是在上海做研發(fā)。

Intel的創(chuàng)新能力一方面從實驗室產(chǎn)生，一方面從市場的需求變化而來。“Intel希望成為整個行業(yè)的領(lǐng)頭羊，提供高效的計算芯片、存儲、I/O、網(wǎng)絡(luò)技術(shù)，加速大數(shù)據(jù)價值挖掘與提高決策反應(yīng)，提供最優(yōu)的軟件和工具推動大數(shù)據(jù)應(yīng)用的部署和創(chuàng)新。促進大數(shù)據(jù)生態(tài)系統(tǒng)的建設(shè)和與合作伙伴合作，并且投資大數(shù)據(jù)解決方案的研究和服務(wù)。”凌琦指出，最終為用戶帶來價值以及完整的解決方案。