大數(shù)據(jù)是什么

　　大數(shù)據(jù)(big data)

　　大數(shù)據(jù)是指無法在一定時(shí)間內(nèi)用常規(guī)軟件工具對其內(nèi)容進(jìn)行抓取、管理和處理的數(shù)據(jù)集合。大數(shù)據(jù)技術(shù)是指從各種各樣類型的數(shù)據(jù)中，快速獲得有價(jià)值信息的能力。

　　適用于大數(shù)據(jù)的技術(shù)，包括大規(guī)模并行處理(MPP)數(shù)據(jù)庫，數(shù)據(jù)挖掘電網(wǎng)，分布式文件系統(tǒng)，分布式數(shù)據(jù)庫，云計(jì)算平臺，互聯(lián)網(wǎng)，和可擴(kuò)展的存儲系統(tǒng)。

　　大數(shù)據(jù)由巨型數(shù)據(jù)集組成，這些數(shù)據(jù)集大小常超出人類在可接受時(shí)間下的收集、庋用、管理和處理能力。大數(shù)據(jù)必須借由計(jì)算機(jī)對數(shù)據(jù)進(jìn)行統(tǒng)計(jì)、比對、解析方能得出客觀結(jié)果。

　　具體來說，大數(shù)據(jù)具有4個(gè)基本特征：一是數(shù)據(jù)體量巨大。二是數(shù)據(jù)類型多樣。三是處理速度快。四是價(jià)值密度低。

　　大數(shù)據(jù)的作用

　　大數(shù)據(jù)具有催生社會變革的能量。但釋放這種能量，需要嚴(yán)謹(jǐn)?shù)臄?shù)據(jù)治理、富有洞見的數(shù)據(jù)分析和激發(fā)管理創(chuàng)新的環(huán)境(Ramayya Krishnan，卡內(nèi)基·梅隆大學(xué)海因茲學(xué)院院長)。

　　第一，對大數(shù)據(jù)的處理分析正成為新一代信息技術(shù)融合應(yīng)用的結(jié)點(diǎn)。

　　第二，大數(shù)據(jù)是信息產(chǎn)業(yè)持續(xù)高速增長的新引擎。

　　第三，大數(shù)據(jù)利用將成為提高核心競爭力的關(guān)鍵因素。各行各業(yè)的決策正在從“業(yè)務(wù)驅(qū)動”轉(zhuǎn)變“數(shù)據(jù)驅(qū)動”。

　　第四，大數(shù)據(jù)時(shí)代科學(xué)研究的方法手段將發(fā)生重大改變。

　　眾所周知，大數(shù)據(jù)已經(jīng)不簡簡單單是數(shù)據(jù)大的事實(shí)了，而最重要的現(xiàn)實(shí)是對大數(shù)據(jù)進(jìn)行分析，只有通過分析才能獲取很多智能的，深入的，有價(jià)值的信息。

　　大數(shù)據(jù)分析普遍存在的方法理論有：1?？梢暬治?。2。數(shù)據(jù)挖掘算法。3。預(yù)測性分析。4。語義引擎。5。數(shù)據(jù)質(zhì)量和數(shù)據(jù)管理。

　　大數(shù)據(jù)分析的基礎(chǔ)就是以上五個(gè)方面，當(dāng)然更加深入大數(shù)據(jù)分析的話，還有很多很多更加有特點(diǎn)的、更加深入的、更加專業(yè)的大數(shù)據(jù)分析方法。

　　隨著大數(shù)據(jù)應(yīng)用的爆發(fā)性增長，它已經(jīng)衍生出了自己獨(dú)特的架構(gòu)，而且也直接推動了存儲、網(wǎng)絡(luò)以及計(jì)算技術(shù)的發(fā)展。

　　大數(shù)據(jù)時(shí)代存儲所面對的問題有：容量、延遲、安全、成本、數(shù)據(jù)的積累、靈活性、應(yīng)用感知以及小用戶怎么辦