2020年4月3日
spark DataFrame新增一列id列(单调递增，不重复)的几种方法
摘要： 方案一：使用functions里面的monotonically_increasing_id(),生成单调递增，不保证连续，最大64bit，的一列.分区数不变。 import org.apache.spark.sql.functions._ val df1 = spark.range(0,1000). 阅读全文
posted @ 2020-04-03 17:41 吊车尾88 阅读(2647) 评论(0) 推荐(0)