hive的常用函数工作总结

1、concat_ws

它是一个特殊形式的 CONCAT()

concat_ws(分隔符,参数1,参数2.。。。。。。) as 字段

2、split

返回值为一个数组

a.基本用法：

例1：split('a,b,c,d',',')

得到的结果：["a","b","c","d"]

b.截取字符串中的某个值：

当然，我们也可以指定取结果数组中的某一项

例2：split('a,b,c,d',',')[0]

得到的结果：a

c.特殊字符的处理：

特殊分割符号

regex 为字符串匹配的参数，所以遇到特殊字符的时候需要做特殊的处理

例3: "." 点

split('192.168.0.1','.')

得到的结果：[]

正确的写法：split('192.168.0.1','\\.')

得到的结果：["192","168","0","1"]

需要注意的是：

当然当split包含在 "" 之中时需要加4个\

如 hive -e ".... split('192.168.0.1','\\\\.') ... " 不然得到的值是null

同样的 | 等特殊符号也需要做类似处理。

指定多个分隔符时，多个分隔符使用 | 连接

测试：

drop table test;

create table if not exists test(

name string,

age string,

sex string

)row format delimited fields terminated by ','

lines terminated by '\n'

stored as textfile;

load data local inpath '/usr/test.txt' overwrite into table test;

栗子：想通过分割得到name中的li和i，指定;和-两个分隔符；注意分割之后得到的是一个数组array，下标从0开始

select split(a.name,'-|;')[],split(a.name,'-|;')[] from test a ;

巴特西

hive的常用函数工作总结

1、concat_ws

2、split

最新文章

热门文章