Spark-Hudi:另存为表到 Glue/Hive 目录

问题描述

场景: 使用 saveAsTable(data frame writer) 方法存储 Hudi Spark 数据帧,这样 Hudi 支持的表与 org.apache.hudi.hadoop.HoodieParquetInputFormat 输入格式架构是自动生成的。

目前,saveAsTable 在正常(非 Hudi 表)下工作正常,生成认输入格式。 我想使用支持的输入文件格式自动创建 Hudi 表,或者使用一些覆盖版本 saveAsTable 或其他方式保留在 spark 的前提下。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)