Hive：map字段存储和取用 ( str_to_map函数 )

最新推荐文章于 2025-08-24 20:31:23 发布

转载最新推荐文章于 2025-08-24 20:31:23 发布 · 7.5k 阅读

12 ·

本内容遵循CC 4.0 BY-SA版权协议

原文链接：http://www.cnblogs.com/skyEva/p/10168402.html

标签

#大数据 #json

本文详细介绍了Hive中str_to_map函数的使用方法，包括如何创建map字段、使用concat与str_to_map函数组合进行字段转换，以及如何从map中获取特定值。通过具体示例展示了str_to_map函数的强大功能。

Hive：map字段存储和取用 ( str_to_map函数 )

str_to_map(字符串参数, 分隔符1, 分隔符2)

使用两个分隔符将文本拆分为键值对。

分隔符1将文本分成K-V对，分隔符2分割每个K-V对。对于分隔符1默认分隔符是 ','，对于分隔符2默认分隔符是 '='。

例子：

1. 创建map字段

DROP TABLE IF EXISTS tmp.tmp_str_to_map;
CREATE TABLE IF NOT EXISTS tmp.tmp_str_to_map
(
ocolumn string comment '原始字段', 
rcolumn map<string,string> comment 'map字段'
);

2. concat + str_to_map函数

用concat + & 取表字段拼接成map类型

insert overwrite table tmp.tmp_str_to_map
SELECT 
concat('&crowd:', m0.id,'&clicker:',m0.dui_leader,'&sen:',m0.application_type) ocolumn,
str_to_map(concat('column1:', m0.id,'&column2:',m0.dui_leader,'&column3:',m0.application_type), '&', ':') rcolumn
FROM tmp.tmp_adhoc_detail_20180927 m0
limit 1
;

3. 取用map里的字段，用[""]即可

select 
rcolumn,
rcolumn["column1"] column1
from tmp.tmp_str_to_map;

4. 也可以直接转换取用，而不需要存储字段

SELECT 
  m0.id column1,
  str_to_map(concat('column1:', m0.id,'&column2:',m0.dui_leader,'&column3:',m0.application_type), '&', ':')["column1"] column1_1
from tmp.tmp_adhoc_detail_20180927 m0 
limit 1