在spark sql中解析json格式数据

一、实际的sql语句:
select app_id,
event_time,
event,
spm_b_code,
spm_c_code,
spm_d_code,
spm_biz_type,
user_id,
user_id_type,
seat_code,
spm_content_type,
source
from xxx_yyy_zzz t
lateral view_json_tuplet(t.ext_props,
'user_id',
'user_id_type',
'seat_code',
'spm_content_type',
'source')a
as user_id,
user_id_type,
seat_code,
spm_content_type,
source

其中:ext_props为表t的一个字段,其中的数据为json格式。

二、相关的函数:
get_json_object
from_json
to_json
explode
selectExpr

posted @ 2024-02-27 22:10  chy_cug  阅读(772)  评论(0)    收藏  举报