pyarrow.lib.ArrowNotImplementedError:从不支持的Parquet文件中读取结构列表:paygw_etp_typs:list <array:struct

问题描述

我正在使用Great Expectations测试ETL管道中的数据。我拥有的数据文件为Parquet格式,并且确实包含一些数组,当我尝试创建新套件或尝试使用pyarrow / fastparquet转换为可读格式时,我面临以下错误

enter image description here

但是对于其他没有Arrays结构的Parquet数据文件,一切正常。

我将AWS cloud 9用作IDE,无法解决此问题。任何帮助将不胜感激。请以正确的方式指导我如何处理镶木地板数据文件中的那些阵列?我已经尝试了几乎所有东西,但没有运气:(

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)