物聯(lián)傳媒 旗下網(wǎng)站
登錄 注冊

業(yè)內(nèi)人說:物聯(lián)網(wǎng)下大數(shù)據(jù)革了誰的命

作者:陳小春
來源:DoNews
日期:2014-07-09 14:12:17
摘要:具有“大數(shù)據(jù)時代預言家”之稱的維克托·邁爾曾經(jīng)在自己的著名論著《大數(shù)據(jù)時代》中預言——物聯(lián)網(wǎng)(IOT)技術的發(fā)展將極大地改變傳統(tǒng)數(shù)據(jù)存儲分析領域。這就難怪有那么多的公司正試圖投身物聯(lián)網(wǎng)大潮。據(jù)麥肯錫全球研究院的最新報告顯示:到2025年,物聯(lián)網(wǎng)行業(yè)的總營收將達6.2萬億美元。

  具有“大數(shù)據(jù)時代預言家”之稱的維克托·邁爾曾經(jīng)在自己的著名論著《大數(shù)據(jù)時代》中預言——物聯(lián)網(wǎng)(IOT)技術的發(fā)展將極大地改變傳統(tǒng)數(shù)據(jù)存儲分析領域。這就難怪有那么多的公司正試圖投身物聯(lián)網(wǎng)大潮。據(jù)麥肯錫全球研究院的最新報告顯示:到2025年,物聯(lián)網(wǎng)行業(yè)的總營收將達6.2萬億美元。

  但正如維克托擔心的一樣——這些弄潮兒們真的為物聯(lián)網(wǎng)將造就的大數(shù)據(jù)時代做好準備了嗎?

  當然,除了技術層面的考慮,安全問題也不容忽視。但是,筆者更關心的是:全球大多數(shù)的數(shù)據(jù)中心(包括那些專門非盈利性的數(shù)據(jù)存儲和分析機構)對由物聯(lián)網(wǎng)即將帶來的海量數(shù)據(jù)似乎毫無準備。

  當然有一些科技公司仍然堅持認為自己完全有能力管理好自己的數(shù)據(jù)中心,但是當數(shù)據(jù)量以PB或者EB為單位增加時,不知道這些公司是否還認為筆者庸人自擾?如果依舊固執(zhí)己見,那么他們就不得不對相應的基礎設施進行大筆的投資。而相對聰明的公司會選擇業(yè)界領先的云存儲公司作為自己的戰(zhàn)略同盟。所以,由物聯(lián)網(wǎng)引起的大數(shù)據(jù)潮流將會助推云存儲和云計算的發(fā)展。

  物聯(lián)網(wǎng)產(chǎn)生的大數(shù)據(jù)處理過程可以歸結為三個基本步驟:數(shù)據(jù)采集、數(shù)據(jù)存儲和數(shù)據(jù)分析。數(shù)據(jù)采集和存儲是基本的功能,而大數(shù)據(jù)時代真正的價值蘊含在數(shù)據(jù)分析中。對于大數(shù)據(jù)時代的到來,有專家曾經(jīng)估計有半數(shù)以上的大數(shù)據(jù)公司可能夭折,而原因是他們未能掌握數(shù)據(jù)采集相關技術。當然也并不是說過了數(shù)據(jù)采集這個難關就可以萬事大吉,接下來在數(shù)據(jù)存儲方面仍有一連串的挑戰(zhàn)。比如,公司必須掌握如分布式計算、并行計算等先進的存儲計算方法。

  2009年,甲型H1N1流感病毒肆虐全球。與流感病毒傳播速度相比,美國政府對流感病例的申告制度顯得效率低下。這時候人們才重新注意流感病毒爆發(fā)前幾周,谷歌公司幾位工程師在《Nature》上發(fā)表的一篇文章。在文章中,谷歌(571.09, -11.16, -1.92%)公司通過對全美境內(nèi)5000萬條最頻繁檢索的詞條和美國疾控心公布的季節(jié)性流感傳播數(shù)據(jù)進行比較發(fā)現(xiàn):在未來一段時間很可能爆發(fā)一次大規(guī)模的流感疫情,而且清楚預測出了具體的地區(qū)和州。最后疫情爆發(fā)的時候,疾控中心驚訝地發(fā)現(xiàn)谷歌公司的預測竟然與疫情爆發(fā)地精準吻合。所以,對于大數(shù)據(jù)時代而言真正的意義在于數(shù)據(jù)分析。

  數(shù)據(jù)分析的挑戰(zhàn)還在于將新的物聯(lián)網(wǎng)數(shù)據(jù)和已有的數(shù)據(jù)庫整合。iDoNews認為,有兩個方面最令人頭疼。首先,軟件方面——原來的數(shù)據(jù)庫與物聯(lián)網(wǎng)數(shù)據(jù)庫之間使用的存儲方法不同,這時候就要求公司不得不靠大量的人工重新定義原來的海量數(shù)據(jù)。第二,硬件方面——兩種數(shù)據(jù)庫之間所使用硬件介質(服務器、磁盤等存儲介質和網(wǎng)絡等基礎設施)不同,這將導致公司需要進行更大規(guī)模的基礎設施建設。

  這時候如果還有公司想靠自己一方的努力管理本公司數(shù)據(jù),那無疑是作死。

  為此,真正有眼光的企業(yè)可以采用如下三種方案:

  第一種,也是最流行的方式——利用成熟的第三方數(shù)據(jù)庫服務(DBaaS),如亞馬遜的Redshift。這種模式的優(yōu)勢在于,客戶公司不需要具備安裝、管理和運行任何大型數(shù)據(jù)庫的經(jīng)驗和技術。

  第二種,利用大數(shù)據(jù)托管服務。托管服務供應商(MSP)將負責數(shù)據(jù)收集、數(shù)據(jù)庫管理并提供進行分析和提取數(shù)據(jù)集的服務。這種模式不僅使企業(yè)專注于其商業(yè)價值所在的數(shù)據(jù)分析而將一些較難處理的事情外包,而且還使企業(yè)用戶無需大量先期投入就可以快速進入大數(shù)據(jù)應用的市場化階段,同時也解決了很多企業(yè)在該領域的技術短缺。

  第三種,基于云計算的數(shù)據(jù)庫矩陣解決方案。這種模式主要針對那些具有多種不同類型、甚至非聯(lián)系型數(shù)據(jù)庫的公司。這些公司通常要求數(shù)據(jù)存放于多個數(shù)據(jù)中心,并且既存于公共端也可能存在私有的云端。公司不僅要求不同類型數(shù)據(jù)庫的解決方案,而且對自身的大數(shù)據(jù)也有不同的應用需求。美國主機服務商ServePath下的GoGrid云計算平臺正致力于這種數(shù)據(jù)庫管理服務。

  物聯(lián)網(wǎng)的價值在于其數(shù)據(jù),而物聯(lián)網(wǎng)帶來的史無前例的數(shù)據(jù)規(guī)模將驅動現(xiàn)在的數(shù)據(jù)服務企業(yè)發(fā)生根本性改變,這要求企業(yè)調整其大數(shù)據(jù)戰(zhàn)略。

  等著瞧吧,物聯(lián)網(wǎng)必然催生出大數(shù)據(jù)管理領域的大贏家。

人物訪談