這篇文章將為大家詳細(xì)講解有關(guān)hive支持MongoDB具體的連接方法,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
創(chuàng)新互聯(lián)-專業(yè)網(wǎng)站定制、快速模板網(wǎng)站建設(shè)、高性價(jià)比甘谷網(wǎng)站開發(fā)、企業(yè)建站全套包干低至880元,成熟完善的模板庫(kù),直接使用。一站式甘谷網(wǎng)站制作公司更省心,省錢,快速模板網(wǎng)站建設(shè)找我們,業(yè)務(wù)覆蓋甘谷地區(qū)。費(fèi)用合理售后完善,10年實(shí)體公司更值得信賴。
hive支持mongodb,具體的連接方法如下:
創(chuàng)建基于MongoDB的Hive表是通過(guò)MongoStorageHandler來(lái)處理的。它同樣處理從Hive表里查詢與插入數(shù)據(jù)(通過(guò)select與insert)。
CREATE [EXTERNAL] TABLE <tablename>
(<schema>)
STORED BY 'com.mongodb.hadoop.hive.MongoStorageHandler'
[WITH SERDEPROPERTIES('mongo.columns.mapping'='<JSON mapping>')]
TBLPROPERTIES('mongo.uri'='<MongoURI>');
有兩種方式來(lái)指定所需連接的Mongo Collection。
1. 在上述示例里面,通過(guò)mongo.uri這個(gè)表屬性來(lái)指定,屬性的值填入的是MongoDB connection string,通過(guò)它來(lái)指向具體的collection。這種方式會(huì)將這個(gè)URI存入表的metadata里面,如果需要填寫連接的一些認(rèn)證信息(如username:password等),該方式不太適合。
2. 第二種方式是把connection string填入一個(gè)properties文件,如:
# HiveTable.properties
mongo.input.uri=mongodb://...
然后提供這個(gè)文件的路徑給mongo.properties.path這個(gè)表參數(shù),如
CREATE TABLE ...
TBLPROPERTIES('mongo.properties.path'='HiveTable.properties')
備注:在創(chuàng)建相應(yīng)Hive表時(shí)所引用的MongoDB collection不一定要空的。
在創(chuàng)建Hive表的時(shí)候,也可以選擇性的指定MongoDB collection里的字段與Hive的列字段或struct字段的映射。指定的方式是在SERDEPROPERTIES里通過(guò)mongo.columns.mapping屬性來(lái)指定。在創(chuàng)建基于BSON文件的Hive表時(shí)也可以用到。
如果創(chuàng)建的表是EXTERNAL的,那么在Hive里刪除這張表時(shí),不會(huì)影響MongoDB里面的數(shù)據(jù),只會(huì)刪除這張表的metadata。如果沒有指定EXTERNAL,那么刪除表的時(shí)候會(huì)連帶MongoDB里的數(shù)據(jù)一并刪除,因此最好是指定創(chuàng)建的表為EXTERNAL。
關(guān)于hive支持mongodb具體的連接方法就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,可以學(xué)到更多知識(shí)。如果覺得文章不錯(cuò),可以把它分享出去讓更多的人看到。
網(wǎng)站名稱:hive支持mongodb具體的連接方法
網(wǎng)站路徑:http://aaarwkj.com/article30/jechso.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供商城網(wǎng)站、自適應(yīng)網(wǎng)站、建站公司、營(yíng)銷型網(wǎng)站建設(shè)、企業(yè)建站、關(guān)鍵詞優(yōu)化
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)