進(jìn)行大數(shù)據(jù)分析的原因及其緊迫性
發(fā)布時(shí)間：2012年09月06日 來源：連用科技
為了提高對(duì)公民的服務(wù)和保護(hù)國家利益，政府必須能夠迅速和有效地收集來自世界各地的巨量結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù),，并對(duì)這些大數(shù)據(jù)進(jìn)行分析。隨著全球范圍內(nèi)的大數(shù)據(jù)持續(xù)以驚人的速度增長，而技術(shù)的不斷進(jìn)步,，也促使數(shù)據(jù)收集功能(智能手機(jī)、高清衛(wèi)星影像,、先進(jìn)的傳感器等)持續(xù)增長,。
進(jìn)而帶來了政府部門在各個(gè)關(guān)鍵領(lǐng)域的改進(jìn)：遏制欺詐行為、浪費(fèi)和濫用、加強(qiáng)國土安全,、改善科研,、保護(hù)公眾健康以及更多更多的相關(guān)服務(wù)領(lǐng)域。
對(duì)于政府部門來說,，當(dāng)下的問題不是如何收集數(shù)據(jù),，而是如何避免被快速增長的大數(shù)據(jù)所“淹沒”，而無法對(duì)其數(shù)據(jù)解析工作帶來任何借鑒意義,。此外,，我們的政府已經(jīng)在衛(wèi)星系統(tǒng)技術(shù)、先進(jìn)的數(shù)據(jù)收集技術(shù)與數(shù)據(jù)框架和應(yīng)用程序方面進(jìn)行了重大投資,，因此不會(huì)帶來大量數(shù)據(jù)的產(chǎn)生,。
這就是為什么我們需要大數(shù)據(jù)分析平臺(tái)的原因了。這些平臺(tái)可以存儲(chǔ),、管理,、分析PB、乃至艾字節(jié)規(guī)模數(shù)據(jù)集的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),，提供見解,，可以用來指導(dǎo)決策和加快被動(dòng)和主動(dòng)兩種方式的決策。大數(shù)據(jù)分析可以讓政府全面看待所有數(shù)據(jù)有關(guān)的特定程序,、政策,、或情況。
傳統(tǒng)技術(shù)基本上無法進(jìn)行擴(kuò)展,，以滿足政府機(jī)構(gòu)今天所面臨的無論是數(shù)據(jù)容量或解析方面的要求,。過去，在TB規(guī)模的數(shù)據(jù)中運(yùn)行查詢或統(tǒng)計(jì)模型,，可能需要數(shù)天或數(shù)周的時(shí)間才能返回一個(gè)答案,。更有可能的是，這種努力會(huì)帶來整個(gè)系統(tǒng)運(yùn)行效率變低,。另一方面,，大數(shù)據(jù)分析技術(shù)，可以在幾分鐘乃至幾秒鐘內(nèi)處理這些負(fù)載,，這使得查詢可以迅速完善,，并可以重新分析微調(diào)的見解。
正確實(shí)施大數(shù)據(jù)平臺(tái),，還可以顯著的降低數(shù)據(jù)管理成本,，同時(shí)提高輸出結(jié)果。利用大數(shù)據(jù)平臺(tái),，成千上萬的離散數(shù)據(jù)集可以合并或消除,，降低IT基礎(chǔ)設(shè)施,、軟件許可證和物理遷移的費(fèi)用。
