星光下的学者

导航

 

情景描述IDEA控制台出现如下情况:

  错误: 无法初始化主类 com.ibeifeng.sparkproject.spark.UserVisitSessionAnalyzeSpark
  原因: java.lang.NoClassDefFoundError: org/apache/spark/sql/SQLContext

  Process finished with exit code 1

 

此次情况出现原因为MAVEN 的 pom.xml依赖中 关于sparksql的依赖多了<scope>provided</scope> ,情况如下:

<dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-sql_2.11</artifactId>
            <version>2.2.1</version>
            <scope>provided</scope>
        </dependency>

解决办法:去掉<scope>provided</scope>,并重新加载 maven 依赖,如此即可。

posted on 2021-09-03 23:14  我觉得我还能挣扎一下  阅读(2218)  评论(0)    收藏  举报