這篇文章主要講解了“Map和Reduce的Task數(shù)目由哪些因素決定”，文中的講解內(nèi)容簡單清晰，易于學(xué)習(xí)與理解，下面請(qǐng)大家跟著小編的思路慢慢深入，一起來研究和學(xué)習(xí)“Map和Reduce的Task數(shù)目由哪些因素決定”吧！

高唐網(wǎng)站制作公司哪家好，找創(chuàng)新互聯(lián)！從網(wǎng)頁設(shè)計(jì)、網(wǎng)站建設(shè)、微信開發(fā)、APP開發(fā)、響應(yīng)式網(wǎng)站等網(wǎng)站項(xiàng)目制作，到程序開發(fā)，運(yùn)營維護(hù)。創(chuàng)新互聯(lián)成立與2013年到現(xiàn)在10年的時(shí)間，我們擁有了豐富的建站經(jīng)驗(yàn)和運(yùn)維經(jīng)驗(yàn)，來保證我們的工作的順利進(jìn)行。專注于網(wǎng)站建設(shè)就選創(chuàng)新互聯(lián)。

在不指定的情況下，Map 和Reduce Task 的數(shù)目由這樣幾個(gè)因素決定：

1.輸入數(shù)據(jù)的塊數(shù)，Map 輸出數(shù)據(jù)的塊數(shù)(Reduce數(shù)量是可以設(shè)定)，一個(gè)塊一般由一個(gè)task 來處理（一般，即文件格式是否支持切分）

2.輸入數(shù)據(jù)的文件數(shù)量。一個(gè)文件至少需要1 個(gè)task 來處理（至少，即一個(gè)文件可能是存儲(chǔ)于多個(gè)文件塊）

3.是否對(duì)數(shù)據(jù)進(jìn)行了壓縮，壓縮格式是否可切分（Splitable），如果不可分，即使文件大于64M，也只能由一個(gè)task 來處理 （不支持切分，順序讀?。?/p>

感謝各位的閱讀，以上就是“Map和Reduce的Task數(shù)目由哪些因素決定”的內(nèi)容了，經(jīng)過本文的學(xué)習(xí)后，相信大家對(duì)Map和Reduce的Task數(shù)目由哪些因素決定這一問題有了更深刻的體會(huì)，具體使用情況還需要大家實(shí)踐驗(yàn)證。這里是創(chuàng)新互聯(lián)，小編將為大家推送更多相關(guān)知識(shí)點(diǎn)的文章，歡迎關(guān)注！

當(dāng)前名稱：Map和Reduce的Task數(shù)目由哪些因素決定
本文地址：http://aaarwkj.com/article12/ggpegc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供做網(wǎng)站、全網(wǎng)營銷推廣、微信小程序、品牌網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計(jì)公司、網(wǎng)站策劃

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)