一、 概述
1大數(shù)據(jù)簡介?
1.1起源?
“大數(shù)據(jù)“,近幾年來最火的詞之一。雖然大數(shù)據(jù)這個詞的正式產(chǎn)生也就10年左右,但對大數(shù)據(jù)分析卻早就有之。早在互聯(lián)網(wǎng)初期,就有很多公司通過計(jì)算機(jī)技術(shù)對大量的分析處理,比如各個瀏覽引擎。然而,大數(shù)據(jù)的真正提出卻是源自2008.09.03 《Nature》??囊黄撐模o接著,產(chǎn)業(yè)界也不斷跟進(jìn),麥肯錫于2011.06 發(fā)布麥肯錫全球研究院報告,標(biāo)志著大數(shù)據(jù)在產(chǎn)業(yè)界的真正興起,隨著白宮發(fā)布大數(shù)據(jù)研發(fā)法案,政府開始加入大數(shù)據(jù)的角逐。?
1.2定義?
既然大數(shù)據(jù)這么熱,我們有必要了解一下大數(shù)據(jù)究竟是什么。我們經(jīng)常用4個V來定義大數(shù)據(jù):容量、多樣性、吞吐量、價值。即大數(shù)據(jù)必須是數(shù)量大(至少T、P級別),來源多,大部分為非結(jié)構(gòu)化,且進(jìn)出分析系統(tǒng)的速度快,并以獲取價值為目的的數(shù)據(jù)。
2移動互聯(lián)網(wǎng)的大數(shù)據(jù)特征?
2.1web2.0與廣義移動互聯(lián)網(wǎng)?
Web2.0指以朋友圈、微博等為代表的資訊交流分享型互聯(lián)網(wǎng),而廣義移動互聯(lián)網(wǎng),則是通過無線方式實(shí)現(xiàn)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)和社會網(wǎng)絡(luò)的連接。?
2.2數(shù)據(jù)特征?
移動互聯(lián)網(wǎng)的數(shù)據(jù)具有移動性、復(fù)雜性、社會性的特征。首先,節(jié)點(diǎn)是具有移動性的,它具有普適感知的功能。其次,網(wǎng)絡(luò)是具有復(fù)雜性的,通過網(wǎng)絡(luò)可以進(jìn)行多元感知,最后個體是具有社會性的,所以他也具有社會感知的作用。?
2.3數(shù)據(jù)類型?
移動互聯(lián)網(wǎng)產(chǎn)生兩種類型數(shù)據(jù):一是人傳輸?shù)臄?shù)據(jù)(UGU),它源自人的自我表達(dá)需求。一是機(jī)器產(chǎn)生的數(shù)據(jù)(MGC),其源自科技、軍事、商業(yè)的需求。?
2.4智能感知&服務(wù)?
目前的移動互聯(lián)網(wǎng)有一條缺失的鏈條—智能感知&服務(wù)。我們知道,互聯(lián)網(wǎng)解決的是人與人信息交換的問題,物聯(lián)網(wǎng)解決的是物與物信息交換的問題。而智能化服務(wù)需要人與自然與社會的交叉感知,移動互聯(lián)網(wǎng)和大數(shù)據(jù)技術(shù)就是它的橋梁。?
2.5智慧城市?
我認(rèn)為,智慧城市=數(shù)字城市+移動互聯(lián)網(wǎng)+物聯(lián)網(wǎng)+云計(jì)算,而要實(shí)現(xiàn)則需要移動互聯(lián)網(wǎng)將互聯(lián)網(wǎng)、人際關(guān)系網(wǎng)、物聯(lián)網(wǎng)進(jìn)行三網(wǎng)融合。
3機(jī)遇與挑戰(zhàn)?
3.1機(jī)遇?
大數(shù)據(jù)給我們帶來了機(jī)遇和挑戰(zhàn),我們是否能從中受益則需要看我們怎么對待這些機(jī)遇和挑戰(zhàn)。大數(shù)據(jù)的機(jī)遇是明顯的,各種大平臺的數(shù)據(jù)采集與公開,MapReduce等數(shù)據(jù)分析平臺的開放,以及各領(lǐng)域數(shù)據(jù)挖掘服務(wù)的提供,使我們獲得數(shù)據(jù)變得更加容易。而這些豐富的數(shù)據(jù)更是帶來了眾多的創(chuàng)新機(jī)會,任何領(lǐng)域的數(shù)據(jù)都可能對這個領(lǐng)域造成巨大的影響。?
3.2挑戰(zhàn)?
當(dāng)然大數(shù)據(jù)也給我們帶來了很多挑戰(zhàn)。一、數(shù)據(jù)共享與數(shù)據(jù)私有的矛盾。大數(shù)據(jù)的價值是稀疏的,而大量的數(shù)據(jù)往往被大公司壟斷,因此對于一般人來說,數(shù)據(jù)的共享變得十分重要,而其中一個解決方法就是建立一個共享的數(shù)據(jù)中心。二、數(shù)據(jù)洪流與技術(shù)滯后的矛盾。首先是數(shù)據(jù)存儲能力與處理不匹配,對此我們可以采用對數(shù)據(jù)流進(jìn)行實(shí)時處理、就近原則存儲和處理原始數(shù)據(jù)、購買數(shù)據(jù)存儲和分析服務(wù)等方法進(jìn)行解決。再者,是分析手段與性能需求不匹配,主要原因是因?yàn)閭鹘y(tǒng)數(shù)據(jù)倉庫不再使用于大數(shù)據(jù)分析,對于此我們可以采用大規(guī)模并發(fā)、Map-Reduce分布式計(jì)算、NoSQL管理并發(fā)存取等方法進(jìn)行處理。三是社會需求與人才匱乏的矛盾。對此,培養(yǎng)優(yōu)秀大數(shù)據(jù)人才已是當(dāng)務(wù)之急。四、開放數(shù)據(jù)與保護(hù)隱私的矛盾。?
其中包含用戶隱私成為犧牲品、有可能危害國家安全等問題,我們的解決思路就是發(fā)展隱私保護(hù)數(shù)據(jù)挖掘方法和完善立法。
4未來發(fā)展趨勢?
我認(rèn)為大數(shù)據(jù)將是未來的石油,而移動互聯(lián)網(wǎng)將成為主要上網(wǎng)方式,移動大數(shù)據(jù)也將蓬勃發(fā)展。在此做出幾點(diǎn)預(yù)測:1移動大數(shù)據(jù)分析將逐步成為云計(jì)算和物聯(lián)網(wǎng)的研究聚焦點(diǎn)。2移動互聯(lián)網(wǎng)UGC和MGC數(shù)據(jù)的深度融合將催生新的產(chǎn)業(yè)。3專注于局部領(lǐng)域的數(shù)據(jù)分析服務(wù)將成為近期產(chǎn)業(yè)創(chuàng)新主流。4Map-Reduce將仍保持活力,分布式流數(shù)據(jù)分析方法將成為機(jī)器學(xué)習(xí)理論研究和應(yīng)用研究熱點(diǎn)。5數(shù)據(jù)共享是大勢所趨,但需要特別重視國家信息安全,開放數(shù)據(jù)需要立法支持,信息安全需要自主技術(shù)保障
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點(diǎn)與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。
文章名稱:大數(shù)據(jù)學(xué)習(xí)心得-創(chuàng)新互聯(lián)
分享URL:http://aaarwkj.com/article8/cdhoip.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供虛擬主機(jī)、網(wǎng)站設(shè)計(jì)、移動網(wǎng)站建設(shè)、服務(wù)器托管、關(guān)鍵詞優(yōu)化、App開發(fā)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容