這篇文章將為大家詳細(xì)講解有關(guān)Hive中謂詞下推的示例分析,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
默認(rèn)生成的執(zhí)行計(jì)劃會在可見的位置執(zhí)行過濾器,但在某些情況下,某些過濾器表達(dá)式可以被推到更接近首次看到此特定數(shù)據(jù)的運(yùn)算符的位置。
比如下面的查詢:
select
a.*,
b.*
from
a join b on (a.col1 = b.col1)
where a.col1 > 15 and b.col2 > 16
如果沒有謂詞下推,則在完成JOIN處理之后將執(zhí)行過濾條件**(a.col1> 15和b.col2> 16)**。因此,在這種情況下,JOIN將首先發(fā)生,并且可能產(chǎn)生更多的行,然后在進(jìn)行過濾操作。
使用謂詞下推,這兩個(gè)謂詞**(a.col1> 15和b.col2> 16)**將在JOIN之前被處理,因此它可能會從a和b中過濾掉連接中較早處理的大部分?jǐn)?shù)據(jù)行,因此,建議啟用謂詞下推。
通過將hive.optimize.ppd設(shè)置為true可以啟用謂詞下推。
SET hive.optimize.ppd=true
關(guān)于“Hive中謂詞下推的示例分析”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,使各位可以學(xué)到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。
當(dāng)前名稱:Hive中謂詞下推的示例分析-創(chuàng)新互聯(lián)
當(dāng)前地址:http://aaarwkj.com/article18/icegp.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供域名注冊、網(wǎng)站維護(hù)、品牌網(wǎng)站制作、網(wǎng)站策劃、移動網(wǎng)站建設(shè)、外貿(mào)網(wǎng)站建設(shè)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容