摘要：今天用spark sql的时候碰到了一个需求：根据id进行聚合，如果遇到数组，那么就取数组的并集，一开始我寻思i应该挺简单的 ，但是紧接着就碰到了问题：数组聚合用什么函数 我在spark sql官方提供的文档里面是没有找到类似的函数的，我第一个想法就是自己写一个，很遗憾失败了，可能因为我个人水平有限 阅读全文