本篇內(nèi)容主要講解“Hive行轉(zhuǎn)列的實現(xiàn)方式”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“Hive行轉(zhuǎn)列的實現(xiàn)方式”吧!
創(chuàng)新互聯(lián)公司專注為客戶提供全方位的互聯(lián)網(wǎng)綜合服務(wù),包含不限于網(wǎng)站建設(shè)、網(wǎng)站設(shè)計、東洲網(wǎng)絡(luò)推廣、小程序開發(fā)、東洲網(wǎng)絡(luò)營銷、東洲企業(yè)策劃、東洲品牌公關(guān)、搜索引擎seo、人物專訪、企業(yè)宣傳片、企業(yè)代運營等,從售前售中售后,我們都將竭誠為您服務(wù),您的肯定,是我們最大的嘉獎;創(chuàng)新互聯(lián)公司為所有大學生創(chuàng)業(yè)者提供東洲建站搭建服務(wù),24小時服務(wù)熱線:13518219792,官方網(wǎng)址:m.rwnh.cn
傳統(tǒng)關(guān)系型數(shù)據(jù)庫中,無論是Oracle(11g之后)還是SQLserver(2005之后),都自帶了Pivot函數(shù)實現(xiàn)行轉(zhuǎn)列功能,本文主要講述在Hive中實現(xiàn)行轉(zhuǎn)列的兩種方式。
這種方式是借鑒在Oracle或者SQLserver在支持Pivot函數(shù)之前實現(xiàn)行轉(zhuǎn)列的方式,實際上語法沒有什么變化,只是換成了Hive。
with testtable(
select 1 id,'k1' key,123 value
union all
select 1,'k2' key,124 value
union all
select 2,'k1',234 value
)
select id,
max(case when key='k1' then value else null end) k1,
max(case when key='k2' then value else null end) k2
from testtable
group by id
這種方式的思路是把需要轉(zhuǎn)列的字段及其值字段拼接成一個Hive上的key-value的map數(shù)據(jù),具體Sql如下:
with testtable(
select 1 id,'k1' key,123 value
union all
select 1,'k2' key,124 value
union all
select 2,'k1',234 value
)
select id,kv['k1'],kv['k2']
from (
select id,str_to_map(concat_ws(',', collect_set(concat(key, '-', value))),',','-') kv
from testtable
group by id)t
兩種方式都可以實現(xiàn)行轉(zhuǎn)列的功能,傳統(tǒng)的方式易于理解,但在key的取值比較多的時候,寫起來會相當繁瑣,map的方式相對要簡便一些。但map的方式所有的數(shù)據(jù)都collect到一起了,對內(nèi)存的要求會高一些,而傳統(tǒng)的方式通過聚合函數(shù)直接reduce,可以邊運行邊求值。
到此,相信大家對“Hive行轉(zhuǎn)列的實現(xiàn)方式”有了更深的了解,不妨來實際操作一番吧!這里是創(chuàng)新互聯(lián)網(wǎng)站,更多相關(guān)內(nèi)容可以進入相關(guān)頻道進行查詢,關(guān)注我們,繼續(xù)學習!
當前文章:Hive行轉(zhuǎn)列的實現(xiàn)方式
本文鏈接:http://m.rwnh.cn/article6/jcjiog.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供虛擬主機、企業(yè)建站、移動網(wǎng)站建設(shè)、云服務(wù)器、網(wǎng)站改版、小程序開發(fā)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)