在 Spark 中的 HDFS 上写入 csv/parquet 时如何“强制”显示 CRC 文件

问题描述

我似乎遇到了与 Internet 其他部分相反的问题 - 对该主题的任何搜索都会抛出数以千计的关于如何在写出时抑制 CRC 文件的问题使用 Spark。

在集群上使用 Spark 并将内容写入 HDFS 时,我看不到我通常在本地系统上看到的任何 .crc 文件。任何想法如何“强迫”他们出现?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)