一方面,以“大數(shù)據(jù)”為主題的研討會不斷召開,各類企業(yè)宣稱進軍大數(shù)據(jù),另一方面,基于基于大數(shù)據(jù)的技術(shù)業(yè)務(wù)寥寥,一些簡單的嘗試都還沒有能實現(xiàn)大數(shù)據(jù)的技術(shù)。那么是誰在不斷歡迎著“大數(shù)據(jù)”時代?
從收益方來看,應(yīng)用軟件企業(yè)尋找到了新的工具,而開發(fā)出來的初步應(yīng)用也在被客戶接受,他們的價值逐步得到體現(xiàn);而業(yè)務(wù)公司也開始出現(xiàn)龐大數(shù)據(jù)分析的需求,急需技術(shù)支持;最后是硬件公司,無論是服務(wù)器還是存儲,大數(shù)據(jù)都對硬件有更多的采購需求。
不過,大數(shù)據(jù)在中國遠沒有落地,而有著龐大新生數(shù)據(jù)的公司成為行業(yè)的嘗鮮者。
何為大數(shù)據(jù)
按照現(xiàn)在較為普遍的定義,大數(shù)據(jù)是誕生于各類終端中產(chǎn)生的龐大的分結(jié)構(gòu)化數(shù)據(jù),而擁有存儲、分析該數(shù)據(jù)的能力就是大數(shù)據(jù)技術(shù)。
根據(jù)IDC的定義,高容量、多樣化、持續(xù)性和高價值是大數(shù)據(jù)的四個特點,包括基礎(chǔ)架構(gòu)、數(shù)據(jù)管理、分析挖掘和決策支持四個層面。
物聯(lián)網(wǎng)、云計算、PC、平板電腦、傳感器都是這些數(shù)據(jù)的來源。如果說云計算等布局首先是滿足數(shù)據(jù)的收集,那大數(shù)據(jù)技術(shù)就等于是數(shù)據(jù)分析能力的升級。
這個最早從麥肯錫報告出現(xiàn)的詞匯變得非常熱門。IDC預(yù)測,到2015年,全球大數(shù)據(jù)市場將達到170億美元規(guī)模。
大數(shù)據(jù)技術(shù)探索實例
中國聯(lián)通就在使用大數(shù)據(jù)技術(shù)。據(jù)中國聯(lián)通研究院副院長黃文良介紹,聯(lián)通部署了一套Hadoop系統(tǒng)的大數(shù)據(jù)平臺,可以實現(xiàn)用戶查詢自己的3G流量使用情況。
隨著3G用戶的增加,智能手機可能出現(xiàn)各類大流量,而用戶并不清楚自己的流量去處,存在很多投訴,聯(lián)通這個平臺就是統(tǒng)計3G流量列表的一個嘗試。
據(jù)他介紹,支持用戶查詢3G上網(wǎng)記錄需要大量的數(shù)據(jù),而用傳統(tǒng)的數(shù)據(jù)庫無法滿足百億條數(shù)據(jù)的快速搜索能力,這一套新的平臺就是研究院的一個嘗試。
該系統(tǒng)部署在北京,用了178臺基于英特爾處理器的刀片服務(wù)器,每臺配了14TB的內(nèi)存,加上Name節(jié)點,然后用Hadoop發(fā)行版實現(xiàn)了對數(shù)據(jù)的管理。
該系統(tǒng)可以讓聯(lián)通用戶隨時查清每天的流量情況,包括使用位置、3G還是2G,起始時間等。
另一個開始用大數(shù)據(jù)技術(shù)的是國內(nèi)安防類領(lǐng)頭企業(yè)�?低�。海康威視副總裁兼CTO蔣海清介紹,目前全國在部署平安城市的應(yīng)用,而城市視頻監(jiān)控的記錄都是海量的存儲,而大數(shù)據(jù)平臺實現(xiàn)了智能化監(jiān)控。
據(jù)介紹,�?低曢_發(fā)的城市智能交通應(yīng)用典型解決方案,一個城市為例,年過車信息數(shù)據(jù)達到百億級,從信息中提取車牌、車身顏色,就可以很快查出車牌、號碼、軌跡、違章等,而接下來的關(guān)聯(lián)分析就是基于大數(shù)據(jù)的基礎(chǔ)展開。
�?低曔在嘗試做面向公眾的視頻監(jiān)控服務(wù),出現(xiàn)報警情況就可以用手機通知業(yè)主,而平臺會判斷是否為誤判,這樣大基數(shù)數(shù)據(jù)的使用就需要新的技術(shù)。
另外還有北京億贊普這樣的企業(yè),這家企業(yè)為全國各類實業(yè)企業(yè)提供工廠直接傳遞到用戶的信息平臺,使廠商可以通過碎片化的信息分析目標(biāo)市場。
大數(shù)據(jù)并不是一個全新的技術(shù),但從目前的嘗試來看,大數(shù)據(jù)技術(shù)還只是開始實現(xiàn)數(shù)據(jù)的存儲和管理,深入分析能力還達不到行業(yè)的預(yù)期。
IDC對大數(shù)據(jù)的十大預(yù)測
IDC對大數(shù)據(jù)未來的發(fā)展做出了十大預(yù)測,也代表了行業(yè)對大數(shù)據(jù)熱點的預(yù)期。
預(yù)測包括:一、走向商業(yè)化;二、部分早期的Hadoop項目面臨挑戰(zhàn);三、開源軟件帶來機遇;四、大數(shù)據(jù)加劇軟件公司間的并購;五、針對大數(shù)據(jù)的Appliance市場迅速增長;六、大數(shù)據(jù)的網(wǎng)絡(luò)數(shù)據(jù)處理走向企業(yè)級;七、大數(shù)據(jù)催生更多細(xì)分市場;八、打包的大數(shù)據(jù)行業(yè)分析應(yīng)用出現(xiàn);九、基礎(chǔ)架構(gòu)向Scale Out發(fā)展;十、中國成全球最重要的大數(shù)據(jù)市場。
IDC預(yù)測,大數(shù)據(jù)發(fā)展最快的首先是軟件行業(yè),而基于開源平臺的分析類應(yīng)用軟件將快速發(fā)展。有能找到合適的需求而很快做出預(yù)期性能的企業(yè)將出現(xiàn)并購能力。
IDC中國企業(yè)級系統(tǒng)與軟件研究部高級研究經(jīng)理周震剛還認(rèn)為,中國將成為全球最重要的大數(shù)據(jù)市場,而中國企業(yè)在其中有著巨大的發(fā)展機會。
全球性IT巨頭都開始關(guān)注大數(shù)據(jù)的機遇,IBM、微軟、英特爾、甲骨文等都在開發(fā)基于大數(shù)據(jù)需求的IT架構(gòu),而其中硬件提供商有更大的市場動力,因為大數(shù)據(jù)的應(yīng)用都意味著更多的IT采購。
發(fā)展契機是應(yīng)用本身的進步
雖然有巨頭的躍躍欲試,但真正符合大數(shù)據(jù)預(yù)期的仍是以應(yīng)用為主。微博和Facebook時代的到來可以說為大數(shù)據(jù)提供了最好的土壤。對于一個商業(yè)公司,一個能基于社交網(wǎng)絡(luò)龐大信息庫的消費者偏好分析系統(tǒng)的吸引力遠大于一堆IT設(shè)備,而這樣的應(yīng)用才是大數(shù)據(jù)真正的吸引力。
和基于經(jīng)驗的傳統(tǒng)決策不同,大數(shù)據(jù)時代的決策可以提供統(tǒng)計理論上的依據(jù),而之前的行業(yè)經(jīng)驗也在被逐漸搬移到自己的大數(shù)據(jù)系統(tǒng)中。
英特爾軟件與服務(wù)事業(yè)部中國區(qū)總經(jīng)理何京翔認(rèn)為,電信運營商利用大數(shù)據(jù)技術(shù)對用戶的行為習(xí)慣進行分析,就能更有針對性地制訂市場營銷計劃或開發(fā)出更多全新的商業(yè)模式和服務(wù);金融行業(yè)能借該技術(shù)更快速地分析在金融機構(gòu)之間交換的營銷與交易數(shù)據(jù),以確保交易的安全可靠和防欺詐;智能城市及物聯(lián)網(wǎng)領(lǐng)域則可借大數(shù)據(jù)技術(shù)更快實現(xiàn)智能交通監(jiān)控、智能公共安全、氣象和污染變化的智能監(jiān)控及預(yù)測等應(yīng)用。
而這些應(yīng)用對軟件企業(yè)意味著巨大的機遇。因為它們都是行業(yè)應(yīng)用或定制化應(yīng)用,目前還沒有一個通用產(chǎn)品能實現(xiàn)這一切。分析認(rèn)為,隨著企業(yè)的投入,新的行業(yè)領(lǐng)先者將開始誕生。
推薦閱讀
昨天,記者從工信部了解到,較之今年一季度,我國電信用戶在二季度的申訴情況有明顯好轉(zhuǎn),移動和聯(lián)通用戶的申訴率都有明顯下降。 數(shù)據(jù)顯示,二季度,工信部及各省份電信用戶申訴受理機構(gòu)通過申訴熱線、政府網(wǎng)站等渠道>>>詳細(xì)閱讀
本文標(biāo)題:后窗第29期:誰在歡迎大數(shù)據(jù)時代
地址:http://www.xglongwei.com/a/shuju/20120730/78622.html