應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點(diǎn)新聞
企業(yè)注冊(cè)個(gè)人注冊(cè)登錄

美國(guó)中央情報(bào)局迎接大數(shù)據(jù)分析技術(shù)挑戰(zhàn)

2013-09-04 14:44 ZDnet

導(dǎo)讀:與IT相似,情報(bào)機(jī)關(guān)也在努力通過創(chuàng)新獲得快速分析大量來自不同源頭的數(shù)據(jù)能力。雖然最近一段時(shí)間以來,美國(guó)國(guó)家安全局及其它情報(bào)機(jī)關(guān)大規(guī)模收集個(gè)人數(shù)據(jù)的做法引發(fā)了廣泛爭(zhēng)議;但從技術(shù)角度來看,通過分析將數(shù)據(jù)轉(zhuǎn)化為可操作信息仍然是一項(xiàng)巨大挑戰(zhàn),即使是最具權(quán)勢(shì)的機(jī)構(gòu)在面對(duì)此類難題時(shí)也感到有些無可奈何。

  與IT相似,情報(bào)機(jī)關(guān)也在努力通過創(chuàng)新獲得快速分析大量來自不同源頭的數(shù)據(jù)能力。

  雖然最近一段時(shí)間以來,美國(guó)國(guó)家安全局及其它情報(bào)機(jī)關(guān)大規(guī)模收集個(gè)人數(shù)據(jù)的做法引發(fā)了廣泛爭(zhēng)議;但從技術(shù)角度來看,通過分析將數(shù)據(jù)轉(zhuǎn)化為可操作信息仍然是一項(xiàng)巨大挑戰(zhàn),即使是最具權(quán)勢(shì)的機(jī)構(gòu)在面對(duì)此類難題時(shí)也感到有些無可奈何。

  在剛剛于紐約召開的安全創(chuàng)新網(wǎng)絡(luò)峰會(huì)上,中央情報(bào)局科學(xué)與技術(shù)部門副主任Dawn Meyerriecks致辭稱,處理所有業(yè)務(wù)相關(guān)數(shù)據(jù)對(duì)于任何機(jī)構(gòu)而言都仍是一項(xiàng)重大挑戰(zhàn)。甚至在成功收集之后,機(jī)構(gòu)成員以實(shí)時(shí)形式對(duì)數(shù)據(jù)進(jìn)行分析都無法做到。

  “要查看一遍下一分鐘在互聯(lián)網(wǎng)上傳輸?shù)乃幸曨l,我們要花上整整五年時(shí)間,”Meyerriecks解釋道?!耙虼宋覀兏静痪邆涮幚砣楷F(xiàn)有數(shù)據(jù)的能力?!?/P>

  因此,美國(guó)中央情報(bào)局正在集中資金投向分析應(yīng)用程序及系統(tǒng)的研發(fā)領(lǐng)域,旨在幫助自身更便捷地對(duì)來自不同來源的數(shù)據(jù)加以分析——這是為了避免將浩如煙海的數(shù)據(jù)保存在有限的內(nèi)部存儲(chǔ)體系當(dāng)中,Meyerriecks告訴我們。

  大多數(shù)研究與開發(fā)活動(dòng)都通過in-Q-tel(一家由中央情報(bào)局創(chuàng)立的風(fēng)險(xiǎn)投資公司)以及情報(bào)高級(jí)研究項(xiàng)目活動(dòng)機(jī)構(gòu)(簡(jiǎn)稱IARPA,由高級(jí)研究項(xiàng)目署建立)共同負(fù)責(zé)管理。

  根據(jù)Meyerriecks的說明,以IARPA的“集團(tuán)性偶然事件評(píng)估(簡(jiǎn)稱ACE)”為例,該項(xiàng)目希望通過對(duì)先進(jìn)分析技術(shù)的研究簡(jiǎn)化數(shù)據(jù)分析流程。而IARPA的“知識(shí)發(fā)現(xiàn)與傳播”計(jì)劃則意在從適配器及語義技術(shù)角度出發(fā)讓數(shù)據(jù)發(fā)現(xiàn)及實(shí)施變得更加簡(jiǎn)單,最終從中獲取更具價(jià)值的背景信息。

  雖然中情局的運(yùn)營(yíng)規(guī)模明顯超過一般性企業(yè),但德雷斯納咨詢服務(wù)公司首席研究官Howard Dresner表示自身所在機(jī)構(gòu)的IT部門在深入探索大數(shù)據(jù)的過程中,同樣面臨諸多來自高級(jí)分析技術(shù)的挑戰(zhàn)。即使是將Hadoop作為數(shù)據(jù)存儲(chǔ)框架,來自數(shù)據(jù)收集與大規(guī)模數(shù)據(jù)關(guān)聯(lián)的成本仍然相當(dāng)昂貴。

  為了降低這部分成本,技術(shù)人員想出了各種辦法。如果分析能夠針對(duì)來自多種來源的大量數(shù)據(jù),那么處理費(fèi)用將大大減少?!皼]人能有短期之內(nèi)從根本上解決成本問題,”Dresner指出?!拔覀兡茏龅闹皇鞘紫韧ㄟ^標(biāo)準(zhǔn)化方式對(duì)數(shù)據(jù)進(jìn)行索引。”

  當(dāng)然,系統(tǒng)集成商普遍將大數(shù)據(jù)看作一次重大的發(fā)展機(jī)遇。舉例來說,CSCS剛剛收購(gòu)了數(shù)據(jù)分析即服務(wù)廠商Infochimps公司,從而通過Hadoop與NoSQL數(shù)據(jù)庫(kù)的結(jié)合實(shí)現(xiàn)數(shù)據(jù)整理。

  根據(jù)CSC公司數(shù)據(jù)服務(wù)主管Travis Koberg的說法,系統(tǒng)集成商希望大數(shù)據(jù)分析領(lǐng)域能夠?qū)崿F(xiàn)跨應(yīng)用程序起效并進(jìn)一步作用于內(nèi)部及云計(jì)算平臺(tái)?!拔覀冋榇髷?shù)據(jù)打造一套工業(yè)強(qiáng)度級(jí)別的平臺(tái),”Koberg指出?!暗覀?nèi)匀粓?jiān)信大部分應(yīng)用程序都能成功實(shí)現(xiàn)聯(lián)合?!?/P>

  最終形勢(shì)將發(fā)展到何種程度目前還不清楚。就現(xiàn)在來看,命運(yùn)的指針正朝著云聚集數(shù)據(jù)緩緩移動(dòng)。然而將全部數(shù)據(jù)加以聚合的成本將繼續(xù)增加,IT行業(yè)與情報(bào)機(jī)構(gòu)已經(jīng)清醒地意識(shí)到,只有技術(shù)突破才能幫助自己在無關(guān)數(shù)據(jù)保存位置的前提下實(shí)現(xiàn)大數(shù)據(jù)分析目標(biāo)。