getiing RecursionError:在大熊猫或泡菜包装中读取泡菜文件时,超出了最大递归深度?

问题描述

我正在从pandas数据帧中创建泡菜文件解决内存问题,将其另存为泡菜文件,并且在那台机器上我能够读取和解析泡菜文件,但是当我下载该泡菜文件时尝试使用它们google colab中的pickle文件(我这样做是因为要利用GPU)我可以加载pickle文件,但是当我尝试解析它时,出现以下错误

enter image description here

当我尝试打印该数据框时,出现以下错误

enter image description here

我正在使用以下代码从数据框中保存泡菜文件

for store in df['store_id'].unique():
    store_data = df[df['store_id']==store]
    store_data.to_pickle(f'{store}.pkl')
    gc.collect();

为什么我遇到这些错误,请帮助我解决这些问题

解决方法

当我尝试使用 python 3.7 打开 pickle 文件(保存在 python 3.6 中)时遇到同样的问题。切换回3.6版本就解决了。