如何从 Spark 中的 Https 读取 XML 数据

问题描述

我在 Apache Spark 中有一个带有 databricks 和 xml 的程序。

object leerDatos {
  def main(args: Array[String]): Unit = {

    val spark = SparkSession.builder
      .master("local[*]")
      .appName("LeerDatos")
      .getOrCreate()

   val df = spark.read.option("rowTag","pm")
      .format("com.databricks.spark.xml")
      .load("/home/example.xml")

    df.show()

XML 文件在我的电脑中手动定位，并且显示正确。

但是，我想从 Https 方向读取一个 XML 文件

    val df = spark.read.option("rowTag","pm")
      .format("com.databricks.spark.xml")
      .load("http://urlexample.com/example/example.xml")

    df.show()

此代码显示错误：

Exception in thread "main" java.io.IOException: No FileSystem for scheme: https

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）