jupyter 中 tf-idf 的内存问题

问题描述

无法为形状为 (50000,223369) 且数据类型为 float64 的数组分配 83.2 GiB

我的代码：

from sklearn.feature_extraction.text import TfidfVectorizer
vectorizer = TfidfVectorizer(analyzer = message_cleaning)
x = vectorizer.fit_transform(corpus)

x = pd.DataFrame(x.toarray())

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）