1.concat函数   
    CONCAT（）函数用于将多个字符串连接成一个字符串。
    返回结果为连接参数产生的字符串。如有任何一个参数为NULL ，则返回值为 NULL。可以有一个或多个参数。

    hive> select concat('a','b');
    ab

    hive> select concat('a','b',null);
    NULL

2.concat_ws函数
    是CONCAT()的特殊形式。第一个参数是其它参数的分隔符。分隔符的位置放在要连接的两个字符串之间。
    CONCAT_WS()不会忽略任何空字符串。 (然而会忽略所有的 NULL）。
    concat_ws函数在连接字符串的时候，只要有一个字符串不是NULL，就不会返回NULL。  

  hive> select concat_ws('-','a','b');
    a-b

    hive> select concat_ws('-','a','b',null);
    a-b

    hive> select concat_ws('','a','b',null);
    ab

3.group_concat函数
group_concat()会计算哪些行属于同一组，将属于同一组的列显示出来。要返回哪些列，由数参数(就是字段名)决定。分组必须有个标准，就是根据group by指定的列进行分组。

+----------+----+--------------------------+
| locus    | id | day                      |
+----------+----+--------------------------+
| 27       |  1 | Unpublished              |
| 27       |  2 | Submitted (20-11-2020)   |
| 64       | 23 | Unpublished              |
| 64       | 24 | Submitted (31-10-2020)   |
+----------+----+--------------------------+
 SELECT locus,GROUP_CONCAT(distinct id ORDER BY id DESC SEPARATOR '_') FROM info WHERE locus IN('27','64') GROUP BY locus;
 +----------+----------------------------------------------------------+
| locus    | GROUP_CONCAT(distinct id ORDER BY id DESC SEPARATOR '_') |
+----------+----------------------------------------------------------+
| 27       | 2_1                                                      |
| 64       | 24_23                                                    |
+----------+----------------------------------------------------------+

4.str_to_map函数
STR_TO_MAP(VARCHAR text, VARCHAR listDelimiter, VARCHAR keyValueDelimiter)
text是由map集合组成的，有listDelimiter分割map，keyValueDelimiter连接key,value.

str_to_map('1001=2020-10-30,1002=2020-10-30',  ','  ,  '=')
输出
{"1001":"2020-10-30","1002":"2020-10-30"}

hive常用的正则函数

LIKE

语法1: A LIKE B
语法2: LIKE(A, B)
操作类型: strings
返回类型: boolean或null
描述: 如果字符串A或者字符串B为NULL，则返回NULL；如果字符串A符合表达式B的正则语法，则为TRUE；否则为FALSE。B中字符"_"表示任意单个字符，而字符"%"表示任意数量的字符

hive> select 'football' like '%ba';
OK
false
 
 
hive> select 'football' like '%ba%';
OK
true
 
 
hive> select 'football' like '__otba%';
OK
true
 
 
hive> select like('football', '__otba%');
OK
true

RLIKE

语法1: A RLIKE B
语法2: RLIKE(A, B)
操作类型: strings
返回类型: boolean或null
描述: 如果字符串A或者字符串B为NULL，则返回NULL；如果字符串A符合JAVA正则表达式B的正则语法，则为TRUE；否则为FALSE。

hive> select 'football' rlike 'ba';
OK
true
 
 
hive> select 'football' rlike '^footba';
OK
true
 
 
hive> select rlike('football', 'ba');
OK
true

Java正则:

"." 任意单个字符
"*" 匹配前面的字符0次或多次
"+" 匹配前面的字符1次或多次
"?" 匹配前面的字符0次或1次
"\d" 等于 [0-9]，使用的时候写成'\d'
"\D" 等于 [^0-9]，使用的时候写成'\D'

hive> select 'does' rlike 'do(es)?';
OK
true

hive> select '\\';
OK
\

hive> select '2314' rlike '\\d+';
OK
true

REGEXP

语法1: A REGEXP B
语法2: REGEXP(A, B)
操作类型: strings
返回类型: boolean或null
描述: 功能与RLIKE相同

hive> select 'football' regexp 'ba';
OK
true


hive> select 'football' regexp '^footba';
OK
true


hive> select regexp('football', 'ba');
OK
true


语法: regexp_replace(string A, string B, string C)
操作类型: strings
返回值: string
说明: 将字符串A中的符合java正则表达式B的部分替换为C。

hive> select regexp_replace('h234ney', '\\d+', 'o');
OK
honey

REGEXP_REPLACE

语法: regexp_replace(string A, string B, string C)
操作类型: strings
返回值: string
说明: 将字符串A中的符合java正则表达式B的部分替换为C。

hive> select regexp_replace('h234ney', '\\d+', 'o');
OK
honey

REGEXP_EXTRACT

语法: regexp_extract(string A, string pattern, int index)
返回值: string
说明：将字符串A按照pattern正则表达式的规则拆分，返回index指定的字符，index从1开始计。

hive> select regexp_extract('honeymoon', 'hon(.*?)(moon)', 0);
OK
honeymoon
 
 
hive> select regexp_extract('honeymoon', 'hon(.*?)(moon)', 1);
OK
ey
 
 
hive> select regexp_extract('honeymoon', 'hon(.*?)(moon)', 2);
OK
moon

 

 

 

 

 

参考：多彩海洋