Spark中group_concap替换函数concat_ws,collect_set-实现数分组后,将分组后字段连接排序连接起来

group_concat 可以在mysql中 group_concat(distinct pap_src order by data_date)

hive中group_concat 函数只能分组后连接起来,不能order by data_date排序

spark中用concat_ws(  ',' , sort_array(collect_set(nvl(pap_flag,'false'))) 实现分组字段

 

 

posted @ 2022-08-13 09:15  每天都要进步啊  阅读(902)  评论(0编辑  收藏  举报