Parquet 中的 Athena 类型 INT64 与表架构中定义的类型 double 不兼容

问题描述

我已使用 pyspark 推断架构将数据从 csv 转换为 parquet 文件格式，并尝试使用 Athena 读取数据。

    df.printSchehma()
    test_num : double (nullable = true)

当我们使用 glue 爬虫创建表时，Athena 也使用双数据类型，我们无法查询具有以下问题的表。

错误：

   test_num : type INT64 in parquet is incompatible with type double defined in table schema

有什么建议可以解决这个问题吗？感谢您的帮助。

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）