隨著時代的發(fā)展,目前我們已經(jīng)進(jìn)入大數(shù)據(jù)時代。而在當(dāng)前的大數(shù)據(jù)時代,不僅IT行業(yè)的人們需要了解與大數(shù)據(jù)相關(guān)的知識,而且傳統(tǒng)行業(yè)的從業(yè)人員和普通大學(xué)生也應(yīng)該了解一定數(shù)量的大數(shù)據(jù)知識。在工業(yè)互聯(lián)網(wǎng)和新的基礎(chǔ)設(shè)施計劃的推動下,大數(shù)據(jù)技術(shù)將在未來得到充分應(yīng)用,大數(shù)據(jù)還將重塑整個產(chǎn)業(yè)結(jié)構(gòu)。那么到底大數(shù)據(jù)是什么?大數(shù)據(jù)有哪些特征?
大數(shù)據(jù)是什么?
大數(shù)據(jù)本身是一個抽象的概念。從一般意義上講,大數(shù)據(jù)是指無法在有限時間內(nèi)用常規(guī)軟件工具對其進(jìn)行獲取、存儲、管理和處理的數(shù)據(jù)集合。
大數(shù)據(jù)通常用來形容一個公司創(chuàng)造的大量非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù),這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫用于分析時會花費過多時間和金錢。大數(shù)據(jù)分析常和云計算聯(lián)系到一起,因為實時的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。
大數(shù)據(jù)有哪些特征?
目前,業(yè)界對大數(shù)據(jù)還沒有一個統(tǒng)一的定義,但是大家普遍認(rèn)為,大數(shù)據(jù)具備 Volume、Velocity、Variety 和 Value 四個特征,簡稱“4V”,即數(shù)據(jù)體量巨大、數(shù)據(jù)速度快、數(shù)據(jù)類型繁多和數(shù)據(jù)價值密度低,同時還具有以下特征。
1.Volume:表示大數(shù)據(jù)的數(shù)據(jù)體量巨大。
數(shù)據(jù)集合的規(guī)模不斷擴(kuò)大,已經(jīng)從 GB 級增加到 TB 級再增加到 PB 級,近年來,數(shù)據(jù)量甚至開始以 EB 和 ZB 來計數(shù)。
2.Velocity:表示大數(shù)據(jù)的數(shù)據(jù)產(chǎn)生、處理和分析的速度在持續(xù)加快。
加速的原因是數(shù)據(jù)創(chuàng)建的實時性特點,以及將流數(shù)據(jù)結(jié)合到業(yè)務(wù)流程和決策過程中的需求。數(shù)據(jù)處理速度快,處理模式已經(jīng)開始從批處理轉(zhuǎn)向流處理。
業(yè)界對大數(shù)據(jù)的處理能力有一個稱謂——“ 1 秒定律”,也就是說,可以從各種類型的數(shù)據(jù)中快速獲得高價值的信息。大數(shù)據(jù)的快速處理能力充分體現(xiàn)出它與傳統(tǒng)的數(shù)據(jù)處理技術(shù)的本質(zhì)區(qū)別。
3.Variety:表示大數(shù)據(jù)的數(shù)據(jù)類型繁多。
傳統(tǒng) IT 產(chǎn)業(yè)產(chǎn)生和處理的數(shù)據(jù)類型較為單一,大部分是結(jié)構(gòu)化數(shù)據(jù)。隨著傳感器、智能設(shè)備、社交網(wǎng)絡(luò)、物聯(lián)網(wǎng)、移動計算、在線廣告等新的渠道和技術(shù)不斷涌現(xiàn),產(chǎn)生的數(shù)據(jù)類型無以計數(shù)。
現(xiàn)在的數(shù)據(jù)類型不再只是格式化數(shù)據(jù),更多的是半結(jié)構(gòu)化或者非結(jié)構(gòu)化數(shù)據(jù),如 XML、郵件、博客、即時消息、視頻、照片、點擊流、 日志文件等。企業(yè)需要整合、存儲和分析來自復(fù)雜的傳統(tǒng)和非傳統(tǒng)信息源的數(shù)據(jù),包括企業(yè)內(nèi)部和外部的數(shù)據(jù)。
4.Value:表示大數(shù)據(jù)的數(shù)據(jù)價值密度低。
大數(shù)據(jù)由于體量不斷加大,單位數(shù)據(jù)的價值密 度在不斷降低,然而數(shù)據(jù)的整體價值在提高。以監(jiān)控視頻為例,在一小時的視頻中,有用的數(shù)據(jù)可能僅僅只有一兩秒,但是卻會非常重要。現(xiàn)在許多專家已經(jīng)將大數(shù)據(jù)等同于黃金和石油,這表示大數(shù)據(jù)當(dāng)中蘊含了無限的商業(yè)價值。
以上就是關(guān)于大數(shù)據(jù)是什么,以及大數(shù)據(jù)有哪些特征的全部內(nèi)容,想了解更多關(guān)于大數(shù)據(jù)的信息,請繼續(xù)關(guān)注中培偉業(yè)。