学习内容:

  • 理解Spark SQL的执行原理。
  • 学习如何使用DataFrame进行数据处理。

学习进度:

  • 通过SQL语法与DataFrame API进行数据分析。
  • val df = spark.read.json("people.json")
    df.createOrReplaceTempView("people")
    spark.sql("SELECT name FROM people WHERE age BETWEEN 13 AND 19").show()