java.lang.NoClassDefFoundError: org/apache/spark/sql/sources/v2/ReadSupport - 从数据湖读取数据到 spark 时出错

问题描述

我创建了一个新的 databricks 集群,并安装了以下库。 集群版本 - 7.6(包括 Apache Spark 3.0.1、Scala 2.12)

spark_cdm_connector_0_19_1.jar,neo4j_connector_apache_spark_2_12_4_0_1_for_spark_3.jar,com.microsoft.azure:spark-cdm-connector:0.19.1 - maven 文件, neo4j-contrib:neo4j-connector-apache-spark_2.12:4.0.1_for_spark_3 - maven 文件

但是在将 CDM 数据从 datalake 借给 databrick 时,我遇到了错误 java.lang.NoClassDefFoundError: org/apache/spark/sql/sources/v2/ReadSupport

我是否需要更改databricks集群的配置或更新配置文件? 谢谢

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)