MapReduce Service引爆大數據時代

2013-05-15 分類：網站建設

2012年以來，大數據（big data）成為人們耳熟能詳的詞語，這也是隨著互聯(lián)網信息的發(fā)展產生的新型行業(yè)，人們用它來描述和定義信息爆炸時代產生的海量數據，并命名與之相關的技術發(fā)展與創(chuàng)新。

大數據是人類進入互聯(lián)網時代以來面臨的一個巨大問題：社會生產生活產生的數據量越來越大，數據種類越來越多，數據產生的速度越來越快。傳統(tǒng)的數據處理技術，比如說單機存儲，關系數據庫已經無法解決這些新的大數據問題。

針對上述問題，華為云提供了大數據 MapReduce 服務（MRS），MRS 是一個在華為云上部署和管理 Hadoop 系統(tǒng)的服務，一鍵即可部署 Hadoop 集群。MRS 提供租戶完全可控的企業(yè)級大數據集群云服務，輕松運行 Hadoop、Spark、HBase、Kafka、Storm 等大數據組件。

MRS是 Hadoop 中一種面向大規(guī)模數據處理的并行計算模型和方法。從定義上看，MapReduce 是面向大數據并行處理的計算模型、框架和平臺，其中它隱含了以下三層含義：

1.MapReduce 是一個基于集群的高性能并行計算平臺（Cluster Infrastructure）。它允許用市場上普通的商用服務器構成一個包含數十、數百至數千個節(jié)點的分布和并行計算集群。

2.MapReduce 是一個并行計算與運行軟件框架（Software Framework）。它提供了一個龐大但設計精良的并行計算軟件框架，能自動完成計算任務的并行化處理，自動劃分計算數據和計算任務，在集群節(jié)點上自動分配和執(zhí)行任務以及收集計算結果，將數據分布存儲、數據通信、容錯處理等并行計算涉及到的很多系統(tǒng)底層的復雜細節(jié)交由系統(tǒng)負責處理，大大減少了軟件開發(fā)人員的負擔。

3.MapReduce 是一個并行程序設計模型與方法（Programming Model & Methodology）。它借助于函數式程序設計語言 Lisp 的設計思想，提供了一種簡便的并行程序設計方法，用 Map 和 Reduce 兩個函數編程實現基本的并行計算任務，提供了抽象的操作和并行編程接口，以簡單方便地完成大規(guī)模數據的編程和計算處理。

網站欄目：MapReduce Service引爆大數據時代
當前網址：http://aaarwkj.com/news25/775.html

成都網站建設公司_創(chuàng)新互聯(lián)，為您提供響應式網站、App開發(fā)、做網站、微信小程序、標簽優(yōu)化、建站公司

聲明：本網站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源：創(chuàng)新互聯(lián)

猜你還喜歡下面的內容

丟掉鼠標吧之Eclipse快捷鍵有哪些 2013-05-19
為什么需要https？ 2013-05-03
關系型數據庫（RDS）應用場景！ 2013-05-15
區(qū)塊鏈技術在電子政務領域的應用 2013-04-25
ipconfig命令查看你計算機的IP地址 2013-05-17
文檔數據庫服務有全、多、快、好、省的特點 2013-05-04
增強網站影響力的途徑主要是看以下四個方面 2013-05-14
感恩節(jié)，成都創(chuàng)新互聯(lián)感謝有你！ 2013-05-14
視覺、內容、體驗三個方面考慮網站的實用性 2013-05-14
手機網站建設的流程和注意事項! 2023-04-27
企業(yè)手機網站建設有必要做彈窗設計嗎? 2023-04-25
手機網站建設簡談搜索引擎頁面設計 2023-04-17
影響企業(yè)手機網站建設報價因素有哪些? 2023-04-10

欧美一级特黄大片做受成人-亚洲成人一区二区电影-激情熟女一区二区三区-日韩专区欧美专区国产专区

MapReduce Service引爆大數據時代