IDF 2012:暢談物聯(lián)網(wǎng)時代馴服大數(shù)據(jù)
2012年4月11日和12日,作為全球業(yè)界最負盛名的技術論壇活動之一的英特爾信息技術峰會(IDF)隆重召開,這是一次計算機、網(wǎng)絡、無線、通訊等領域最新技術及信息發(fā)布與交流的盛會。2012年4月11日, 中國英特爾物聯(lián)技術研究院正式成立。計劃在未來5年里共同投資2億元人民幣,著力攻克智能感知、傳輸技術、大數(shù)據(jù)處理技術和共性技術基礎研究等核心物聯(lián)網(wǎng)技術。
4月12日,英特爾科學技術中心首席研究院Mei Chen和英特爾中國研究院首席工程師吳甘沙發(fā)表了主題為“在物聯(lián)網(wǎng)時代馴服大數(shù)據(jù)”的精彩演講。
15年前,美國最龐大的數(shù)據(jù)倉庫其規(guī)模只有數(shù)TB,且只有像沃爾瑪、萬事達這些極少數(shù)的公司才擁有如此龐大的數(shù)據(jù)。而如今,從生活中的購物交易,到工業(yè)上的生產(chǎn)制造,從社交網(wǎng)絡媒體信息,到在線視頻圖像資料,從企業(yè)的信息管理系統(tǒng),到政府部門的電子政務,都有著大量的數(shù)據(jù)產(chǎn)生。當TB驟然劇增到 PB(1PB=1024TB),常規(guī)技術顯然難以維持現(xiàn)狀應對需求。
大數(shù)據(jù)對于信息世界帶來了深遠的影響,而當物聯(lián)網(wǎng)時代來臨,信息和物理世界進一步融合,大數(shù)據(jù)成為更大的挑戰(zhàn)。全球領先的IT企業(yè)們已經(jīng)開始把注意力轉向物聯(lián)網(wǎng)和云計算產(chǎn)業(yè)背后的大數(shù)據(jù),其潛在的價值正在被逐漸挖掘。本講座試圖揭示物聯(lián)網(wǎng)大數(shù)據(jù)的特性和挑戰(zhàn),有針對性地給出處理這些大數(shù)據(jù)的架構和技術棧,同時著重于介紹一些物聯(lián)網(wǎng)典型應用的數(shù)據(jù)分析技術。
信息的迅速膨脹遠遠超出人類自身的感知和信息處理能力,未來人們迫切建立在精密感知能力和海量信息處理能力之上的智能技術,這正是物聯(lián)網(wǎng)的發(fā)展方向。物聯(lián)網(wǎng)不再僅僅是一個概念、或者說不僅僅是一個發(fā)展理念,而正在演變成為政府的行動綱領,以及資本市場的投資方向。
非結構化數(shù)據(jù)集其數(shù)據(jù)量、多樣性、價值和速度超出了傳統(tǒng)數(shù)據(jù)庫軟件工具所具備的捕捉、存儲、管理和分析能力,從而形成了大家暢所欲言的大數(shù)據(jù)。
本次大會上,演示了物聯(lián)網(wǎng)大數(shù)據(jù)帶來的創(chuàng)新服務,探討了使用整合查詢首段來處理多種不同傳感器的數(shù)據(jù)流和檔案數(shù)據(jù)集,同時也探討了不同云邊分區(qū)方法來增加規(guī)模同時加快反應速度。由此可見,大數(shù)據(jù)和物聯(lián)網(wǎng)將從根本上改變這個世界。
基于Intel架構的全新的、以數(shù)據(jù)為中心的分布式架構平臺形成了嵌入式互聯(lián)計算中央云,提供服務,邊緣云提供分布式數(shù)據(jù)管理,可量化的方程來決定對計算和數(shù)據(jù)的最佳劃分,在方程的指導下,通過分布式分析技術實現(xiàn)協(xié)同智能。邊緣云起到了一個橋接的作用,一方面將元數(shù)據(jù)移近服務端,另一方面將計算移近大數(shù)據(jù)源頭,智能端設備和傳感器起到了實時監(jiān)控作用。