近期，美國政府發(fā)布《大數據研究和發(fā)展倡議》，擬投資兩億美元，增強從大量復雜數據集合中萃取信息的能力�！按髷祿备拍钍艿綇V泛關(guān)注。麥肯錫公司研究表明，人們對于海量數據的運用，預示著(zhù)新一波生產(chǎn)率增長(cháng)和消費者盈余浪潮的到來(lái)。
我國一些專(zhuān)家認為，“大數據”是指對海量數據進(jìn)行智慧化處理和決策，這不僅是技術(shù)層面的問(wèn)題，還涉及管理層面、互信機制等問(wèn)題。建議在專(zhuān)門(mén)機構領(lǐng)導下，尋找“大數據”研究切入點(diǎn)，應對信息時(shí)代挑戰。
具有戰略性的智慧化數據處理和決策
據有關(guān)專(zhuān)家介紹，“大數據”是一個(gè)戰略層面的概念，因此，下一個(gè)準確定義比較難，認識“大數據”需要從它的特征入手�！按髷祿本邆渌膫�(gè)基本特征：數據體量大，從TB(萬(wàn)億字節)級別，躍升到PB(千萬(wàn)億字節)級別；數據類(lèi)型繁多，包括網(wǎng)絡(luò )日志、視頻、圖片、地理位置信息等等；價(jià)值密度低，以視頻為例，連續不間斷監控過(guò)程中，有用的數據可能僅僅一兩秒；處理速度快。
我國某“大數據”研究團隊的專(zhuān)家研究認為，相較于其他數據分析、處理和研究，“大數據”具有戰略導向性，具有更高的應用價(jià)值。
第一，“大數據”不是指數據量大或不大，而是處理數據的能力與所能獲得數據量之間的差距。汪斌強這樣闡釋?zhuān)骸凹偃缥乙惶炜梢蕴幚韮扇齻�(gè)PB，產(chǎn)生的數據量只有幾十兆，那么數據量再大也不算‘大數據’，因為盡在掌握之中�！�
“大數據”技術(shù)手段相對以往的數據處理有根本性突破。以往通常是設置關(guān)鍵詞，在數據庫中海量搜索，然后請智囊團分析，通過(guò)人腦進(jìn)行判斷和預測。這種方法存在的問(wèn)題在于，用來(lái)分析的數據來(lái)自關(guān)鍵詞搜索，難以達到完備性。而“大數據”采取反向思路，先剔除掉數據庫中的無(wú)用信息，這是“大數據”處理跟目前大海撈針式數據處理的本質(zhì)不同。
第二，“大數據”意味著(zhù)數據處理從智能走向智慧。該研究團隊的專(zhuān)家介紹說(shuō)，以前的海量數據處理，僅僅是信息資料收集過(guò)程，最終的決策和判斷由另外的系統負責；而“大數據”的數值搜索和處理是一體化，邊搜索邊即時(shí)處理，需要數據可隨對再找。
同時(shí)，“大數據”技術(shù)將促成數據智慧化的決策和判斷。以烏魯木齊“7.5”事件為例，如果該地區原先發(fā)郵件的只有幾十個(gè)人，某個(gè)時(shí)間段突然數量激增，說(shuō)明有異常情況，“大數據”智慧化的即時(shí)計算技術(shù)能夠做到預警。
如果說(shuō)云計算為數據資產(chǎn)提供了保管、訪(fǎng)問(wèn)的場(chǎng)所和渠道，那么如何盤(pán)活數據資產(chǎn)，使其為國家治理、企業(yè)決策乃至個(gè)人生活服務(wù)，則是“大數據”的核心議題，也是云計算的升級方向。
“大數據”產(chǎn)業(yè)鏈各環(huán)節面臨發(fā)展機遇
該“大數據”研究團隊認為，“大數據”的重要影響是，對數據采集從源頭上進(jìn)行控制，擋住一些不具戰略意義、沒(méi)有價(jià)值的數據。當前的數據收集工作沒(méi)有數據分析系統，基本是不經(jīng)分析過(guò)濾全扔進(jìn)數據庫，一來(lái)數據庫容量有限，二來(lái)信息蕪雜，有效樣本信息獲得難度較高。
“大數據”產(chǎn)業(yè)鏈有很多環(huán)節，未來(lái)都可能面臨較大發(fā)展機遇。如信息數據的產(chǎn)生環(huán)節，公眾每天使用的互聯(lián)網(wǎng)和無(wú)線(xiàn)通信，即時(shí)通信、微博、手機電話(huà)、短信、彩信甚至是每一個(gè)互聯(lián)網(wǎng)點(diǎn)擊，都是數據的產(chǎn)生，企業(yè)依靠這些數據，可以進(jìn)行自我分析提升效率，也可以出售數據給專(zhuān)業(yè)分析機構。同樣，信息數據的存儲和采集整理環(huán)節也不容忽視。而信息數據的分析產(chǎn)出作為整個(gè)“大數據”產(chǎn)業(yè)鏈的最末端，可能將成為具有技術(shù)含量和產(chǎn)業(yè)附加值的子行業(yè)。
“大數據”一問(wèn)世，便迅速成為計算機行業(yè)的熱門(mén)概念，也引起金融界高度關(guān)注。隨著(zhù)互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展，數據本身即是資產(chǎn)，這一點(diǎn)在業(yè)界已經(jīng)形成共識。最早提出“大數據”時(shí)代已經(jīng)到來(lái)的全球咨詢(xún)機構麥肯錫公司認為，數據已經(jīng)滲透到每個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，逐漸成為重、要的生產(chǎn)因素；而人們對于海量數據的運用，預示著(zhù)新一波生產(chǎn)率增長(cháng)和消費者盈余浪潮的到來(lái)。
全球多家互聯(lián)網(wǎng)巨頭都意識到“大數據”時(shí)代來(lái)臨的重要意義�；萜�、IBM、微軟等紛紛通過(guò)收購“大數據”相關(guān)廠(chǎng)商來(lái)實(shí)現技術(shù)整合。美國政府更是發(fā)布《大數據研究和發(fā)展倡議》，把“大數據”研究上升為國家意志。
既是技術(shù)問(wèn)題也是管理問(wèn)題
目前在中國，“大數據”尚未直接以專(zhuān)有名詞被政府提出。不過(guò)，工業(yè)和信息化部發(fā)布的物聯(lián)網(wǎng)“十二五”規劃中，把信息處理技術(shù)作為四項關(guān)鍵技術(shù)創(chuàng )新工程之一提出來(lái)，其中包括海量數據存儲、數據挖掘、圖像視頻智能分析，這都是“大數據”的重要組成部分。
國內一家大學(xué)的“大數據”研究團隊建議，中國發(fā)展“大數據”需重視以下幾個(gè)問(wèn)題：
一是“大數據”的研究和發(fā)展工作可由國家層面的部門(mén)主導，成立一支核心研究團隊，提供合適的研究環(huán)境。目前我國純商業(yè)的數據處理尚未形成行業(yè)。
二是積極應對“大數據”挑戰。研究“大數據”不單是技術(shù)層面的問(wèn)題，管理層面、互信機制的建立都要跟上，要在頂層設計指導下分重點(diǎn)解決。
三是找準切入點(diǎn)。這家大學(xué)的研究團隊認為，在信息時(shí)代，如何給龐大的數據消腫，把價(jià)值密度低的數據庫瀝掉水分，是研究關(guān)鍵。
數據安全和保密，也是專(zhuān)家關(guān)注的問(wèn)題。在一些專(zhuān)家看來(lái)，美國通過(guò)星球大戰使蘇聯(lián)解體，2005年又拋出“控域”概念，號召發(fā)展物聯(lián)網(wǎng)。但是，美國的信息智能化存儲容量和采集水平是我國的兩倍，在如此繁雜的數據中搜索出有用數據非常困難。有關(guān)專(zhuān)家特別強調說(shuō)，“美國自己碰到問(wèn)題了，就拋出來(lái)讓全球幫它解決，我們必須重視‘大數據’研究過(guò)程中的安全性”。