在idea中pom.xml添加sparkSQL依赖

在idea中pom.xml添加sparkSQL依赖

 在idea中 ,如果没有sparkSQL的依赖，需要现在pom.xml 中添加依赖，

    org.apache.spark
    spark-sql_2.12
    3.0.3

如果不确定下载哪个版本，Apache可以查看对应的 版本。

下载链接：     Downloads | Apache Spark

第一个框选对应的 spark版本，

第3个可以直接下载 全部依赖。

下载好后，可以解压看下 jars 文件夹内，对应的 各个组件版本。

ps: 最后要注意 sparkSQL的版本 要和spark-core的版本一致，不然会报错 noSuchMethodError

Exception in thread “main“ java.lang.NoSuchMethodError: org.apache.spark.ContextCleaner.registerSpar_hzp666的博客-CSDN博客