Python内存限制

Question

很显然，Python中不能有无限的内存。我正在编写一个脚本来创建字典列表。但是每个列表有250K到6M的对象（有6个列表）。

有没有一种方法可以实际计算（可能基于机器的RAM）运行脚本所需的最大内存和内存？

实际的问题，我碰到：

在运行填充有1.25-1.5亿词典列表，当它击中1.227的脚本之一......它只是停止，但没有返回错误独处MemoryError。所以我甚至不确定这是否是内存限制。我有打印语句，所以我可以观察正在发生的事情，并且它似乎永远缓冲，因为没有任何内容正在打印，直到该特定部分，代码每秒运行几千行。 关于什么让它停止的任何想法？这是记忆还是别的吗？

Answer 1

如果您需要存储多个对象，则需要将它们存储在磁盘上，而不是存储器中。 考虑使用数据库。

如果您导入sys模块，您将有权访问功能sys.getsizeof()。您必须查看列表中的每个对象，并为每个字典计算每个键的值。有关此更多信息，请参阅此前一个问题 - In-memory size of a Python structure。