一、傳統(tǒng)處理方法難以應(yīng)付數(shù)據(jù)爆炸式增長

    信息爆炸，海量數(shù)據(jù)單機(jī)難以處理。2013 年全球數(shù)據(jù)量達(dá)到 4.4EB，而到 2020 年，預(yù)計(jì)全球數(shù)據(jù)量將達(dá)到 44ZB。全球消費(fèi)者擁有二十億智能手機(jī)，而世界上 40%的人口已經(jīng)上線。智能設(shè)備帶來全方位全時(shí)段個(gè)人數(shù)據(jù)，極大擴(kuò)展了數(shù)據(jù)來源和種類，導(dǎo)致數(shù)據(jù)特征維數(shù)變高，而新的數(shù)據(jù)資產(chǎn)大多是結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的組合。傳統(tǒng)處理方法較適合低維數(shù)據(jù)問題，當(dāng)輸入高維數(shù)據(jù)時(shí)容易出現(xiàn)過擬合的現(xiàn)象，影響訓(xùn)練效果。所以需要更好的方法去分析現(xiàn)有的數(shù)據(jù)特色。

    輸入端收集的數(shù)據(jù)復(fù)雜多樣，需先集成才能后續(xù)數(shù)據(jù)挖掘。只有將大數(shù)據(jù)進(jìn)行全面分析過后，才能發(fā)現(xiàn)它更多價(jià)值。然而，大家忽略了這些數(shù)據(jù)的來源以及復(fù)雜程度等。應(yīng)用系統(tǒng)越來越多，數(shù)據(jù)格式越來越復(fù)雜，如何將各種類型的數(shù)據(jù)進(jìn)行整合是一個(gè)關(guān)鍵。一般認(rèn)為在數(shù)據(jù)分析的整個(gè)過程中，數(shù)據(jù)清洗及準(zhǔn)備基本要占 80%的時(shí)間。

    平臺(tái)化是企業(yè)數(shù)據(jù)集成的未來。為了打破數(shù)據(jù)孤島，目前已經(jīng)很多企業(yè)的 IT 部門分設(shè)專門“數(shù)據(jù)集成能力部門”，管理各種本地的、云中的、數(shù)據(jù)倉庫等等的數(shù)據(jù)。平臺(tái)化的數(shù)據(jù)集成業(yè)務(wù)則易于重復(fù)使用、重復(fù)部署。

2012~2018 年全球大數(shù)據(jù)市場規(guī)模

    二、大數(shù)據(jù)市場進(jìn)入平穩(wěn)增長的階段

    2015 年我國互聯(lián)網(wǎng)普及率為 50.3%，比上年增長 2 個(gè)百分點(diǎn)。隨著信息技術(shù)的創(chuàng)新，互聯(lián)網(wǎng)的普及，數(shù)據(jù)量會(huì)不斷擴(kuò)大。據(jù)數(shù)據(jù)，2015 年全球大數(shù)據(jù)市場規(guī)模將近 1500 億人民幣，同比增長 24.2%；我國大數(shù)據(jù)市場規(guī)模為 160 億元，僅占全球總市場規(guī)模的 10.7%，但同比增長率為 65.3%，是全球增長率的 2.7 倍。預(yù)計(jì) 2018 年全球大數(shù)據(jù)市場規(guī)模將達(dá)到超過 2500 億元，2015 至 2018 年的復(fù)合增長率為 21.8%。

    相關(guān)報(bào)告：智研咨詢發(fā)布的《2017-2022年中國大數(shù)據(jù)行業(yè)運(yùn)營態(tài)勢及未來前景預(yù)測報(bào)告》

標(biāo)簽： 大數(shù)據(jù) 大數(shù)據(jù)行業(yè) 互聯(lián)網(wǎng) 企業(yè) 數(shù)據(jù)分析 問題 信息技術(shù) 行業(yè) 中國大數(shù)據(jù)

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請與原作者聯(lián)系。