运行tfidf vectorizer内存不足，怎么办？

水木社区手机版

主题:运行tfidf vectorizer内存不足，怎么办？
楼主|Xjt|2021-01-31 13:48:07|展开
有483万行评论，用jieba做了分词，然后想用python sklearn的tfidf vectorizer算出一些有价值的关键词，结果笔记本电脑死活跑不起来，跑一半就会崩溃

大家一般在什么地方跑类似运算呢？
--
FROM 223.104.210.*
2楼|Xjt|2021-01-31 14:45:49|展开
大家一般用多大内存的？
【在 zszqzzzf 的大作中提到: 】
: 服务器。
: 笔记本是计算机群里最弱的存在，除了便携一无是处。
:
--
FROM 223.104.210.*

BYR-Team©2010. KBS Dev-Team©2011 登录完整版