Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/spark/sql/SparkSession$

原创

红目香薰 2022-08-14 00:57:42 博主文章分类：面试 ©著作权

文章标签 spark java 大数据 ide spring 文章分类 后端开发

©著作权归作者所有：来自51CTO博客作者红目香薰的原创作品，请联系作者获取转载授权，否则将追究法律责任

java.lang.NoClassDefFoundError: org/apache/spark/sql/SparkSession$

Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/spark/sql/SparkSession$_spark

在【pom】中有【scope】的这个子节点，把这个子节点的限制去掉就行。

scope provided的作用

标记为scope:provided的jar在编译和运行时有作用，表明了运行时dependency 由JDK或者容器提供。

所以，想解决这个问题，直接删掉【scope】这个子节点就行了。

java.lang.NoClassDefFoundError: org/apache/spark/sql/SparkSession$

Demo问题：

有个项目，依赖了jar包A，然后A又依赖B，B又依赖C，C又依赖D，现在给A加了scope:provided，那么运行时的B\C\D也是由JDK或者容器提供吗？

springboot启动分析：

1、不加provided启动
        项目正常，走的是springboot内嵌的tomcat
2、加上provided启动
        再启动项目，发现走的还是springboot内嵌的tomcat
3、给子依赖加上provided启动
  启动起来，发现没走springboot的内嵌容器，而是走的JDK配置tomcat容器