解析json数组的函数通常有

  • get_json_object() 
  • json_tuple() 
  • split() 
  • explode() 
  • regexp_replace() 
  • lateral view 

get_json_object() 一次只能解析一个key,当需要解析多个字段时,不好用

于是使用 json_tuple() 函数,结合lateral view() 使用

一个解析json数组的思路:

对于如下的字段,其中内容是

[{"website":"baidu.com","name":"百度"},{"website":"google.com","name":"谷歌"}]

思路如下:

1. 先用 regexp_replace('[ ...]'  , ' \\[ | \\] ' , ' ' )  来去掉数组两边的中括号 

2. 再用 regexp_replace(1的结果,  '\\}\\,\\{' ,  '\\}\\;\\{' )   将json数组元素之间的逗号换成分号,以便后面使用split()分隔 

3. 使用split(2的结果, ’\\;‘)     按分号切割元素

4. explode(3的结果)   

将上述4步作为一个子查询,外面套一个lateral view形成侧写表。注意:当有多个explode()时,用多个 lateral view 形成多个侧写表,解决遇到UDTF时,select 只支持一个字段的问题

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐