python 做推荐算法，遇到MemoryError错误，求破

2015-04-09 10:24:26 393 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

pcat2015 墨衍会员 · AI 创作全网分发关注 + 加入社区

【深度剖析】Python MemoryError：从表象到根源的排查与优化本文深度剖析Python中的MemoryError错误，从表象到根源提供全面的排查与优化方案。探讨32位Python的4GB内存限制、虚拟内存配置陷阱及IDE隐藏参数等常见问题，并介绍tracemalloc、objgraph等工具精准定位内存泄漏。针对大数据处理，提出分块处理、高效数据类型和内存映射等实用技巧，最后推荐Dask等分布式解决方案。阅读详情

[code=python]
def ItemSim(self,train = None):
train = train or self.traindata()
Item_count = dict() #浏览过每种物品的人数#
ItemSimcount = dict() #既浏览过i，又浏览过j的某人的时间加权#
for users,items in train.items():
for i,tui in items.items():
Item_count.setdefault(i,0)
Item_count[i] += 1
for j,tuj in items.items():
if i == j:
continue
ItemSimcount.setdefault(users,{})
ItemSimcount[users].setdefault(i,{})
ItemSimcount[users][i].setdefault(j,0)
ItemSimcount[users][i][j] += 1
self.ItemSimlist = dict()
for user,rec in ItemSimcount.items():
self.ItemSimlist.setdefault(user,{})
for i ,related_items in rec.items():
self.ItemSimlist[user].setdefault(i,{})
for j, cij in related_items.items(): #cij：计算出的分子，存放喜欢i和j的某用户的时间加权#
self.ItemSimlist[user][i].setdefault(j,0)
self.ItemSimlist[user][i][j] = cij / math.sqrt(Item_count[i] * Item_count[j] * 1.0)
[code]
报错：
cf.ItemSim()
File "F:\PPractice\ml-100k\log.py", line 97, in ItemSim
self.ItemSimlist[user][i].setdefault(j,0)
MemoryError

怎么破，求助

...全文