从谷歌驱动器导入一个巨大的 csv 文件以 GB 为单位到 python

问题描述

orig_url='https://drive.google.com/file/d/xxxx/view'
file_id = orig_url.split('/')[-2]

dwn_url='https://drive.google.com/uc?export=download&id=' + file_id
url = requests.get(dwn_url).text
csv_raw = StringIO(url)
dfs = pd.read_csv(csv_raw)
print(dfs.head(10))

在上面的代码中,加载的是 html 文件而不是 csv,因为驱动器给出了警告: Google 云端硬盘无法扫描此文件是否有病毒。

data.csv (4.4G) 太大,Google 无法扫描病毒。您仍要下载此文件吗?

如何导入如此庞大的数据?

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)