通过Python的__slots__节省9GB内存

我们之前提到过，Oyster.com基于Python的web服务器缓存了大量Python字典（dicts）（哈希表（hash tables））的静态内容。好啦，我们最近使用一行代码——在我们的Image类中使用__slots__，使得每个6GB的服务器在处理中都节省超过2GB内存。

这是使用前和使用这一改变后再部署的RAM用量截图：

我们大概分配了一百万个下面这个类的实例：

pythonclass Image(object):def __init__(self, id, caption, url):self.id = idself.caption = captionself.url = urlself._setup()# ... other methods ...

Python默认使用一个字典来存储一个对象的实例属性。一般说来，这很不错，而且还支持完全动态性，比如在运行时设置任意新的属性。

然而，对于一个“小类”来说，有一些在“编译时”就已经固定的属性，这样一来，字典实际上是在消耗内存，在创建一百万个这样的类的时候，消耗更是显而易见。你可以跟Python说不使用字典，而是仅为某些固定的属性分配空间，可以通过在类中将__slots__设置为一个固定列表来实现这个效果：

pythonclass Image(object):__slots__ = ['id', 'caption', 'url']def __init__(self, id, caption, url):self.id = idself.caption = captionself.url = urlself._setup()# ... other methods ...

需要特别说到的是，你也可以使用 collections.namedtuple，它仅限定元组空间(the space of a tuple)中的属性能够访问，这与在类中使用__slots__相似。但是，在我看来，从一个命名元组（namedtuple）类中继承令人感到怪异。并且，如果你想自定义初始化器（initializer），你还必须重写__new__而不是用__init__。

警告：别过早优化或者将此应用在所有场景！这个方法并不利于代码维护，而且在你真的有成千个实例的时候才有显著效果。

来自：Saving 9 GB of RAM with Python’s __slots__

通过Python的slots节省9GB内存相关推荐

python内存技巧_使用__slots__节省python内存技巧
__slots__作用 __slots__有一个作用是:限制类实例绑定的属性,但是它有一个更重要的作用就是节省内存,当然更适用于数据量大的情况(万量级以上). __slots__节省内存的原理 cla ...
python的`__slots__`属性
1. 引言我们先看一个问题: 对象(通过类实例化后的对象)如何储存自己的属性? 1.1. 默认情况下:对象如何储存自己的属性为了说明这个问题, 我们先在交互式模式中做一个简单的测试: >&g ...
独家｜测量、建议、快速上手！你所使用的Python对象占用了多少内存？（附代码）...
作者:Gigi Sayfan 翻译:吴振东校对:吴金笛本文约3300字,建议阅读10分钟. 本文将介绍多种Python对象分别所占用的内存,并解释所选择的测量方法和函数,为节省内存提供建议. Py ...
Python中__slots__的使用
摘要当一个类需要创建大量实例时,可以通过__slots__声明实例所需要的属性, 例如,class Foo(object): __slots__ = ['foo'].这样做带来以下优点: 更快的属性 ...
python 释放变量所指向的内存_通俗易懂的Python垃圾回收机制及内存管理
Python垃圾回收机制及内存管理内存管理: 先定义一个变量 name='wxl' 那么python会在内存中开辟一小块区域存放"wxl",此时变量的值是我们真正想要存储的,wx ...
python有内存处理模块吗_使用Python多处理的高内存使用
我已经看到一些使用Python多处理模块的内存使用的帖子.但问题似乎并不能解决我在这里遇到的问题.我发表了我的分析,希望有人能帮助我. 问题我正在使用多进程并行执行任务,我注意到,工作进程的内存消耗 ...
当退出python时是否释放全部内存_Python面试题：高级特性考察
1.函数装饰器有什么作用?请列举说明? 答: 装饰器就是一个函数,它可以在不需要做任何代码变动的前提下给一个函数增加额外功能,启动装饰的效果. 它经常用于有切面需求的场景,比如:插入日志.性能测试.事 ...
当退出python时是否释放全部内存_python 关于高级特性的问题
1.函数装饰器有什么作用?请列举说明? 2. Python 垃圾回收机制? 3. 魔法函数 _call_怎么使用? 4. 如何判断一个对象是函数还是方法? 5. @classmethod 和 @sta ...
python 指针_C++的动态内存：C++的指针
在C++里,指针(pointer)变量被用来存储内存地址.C++要求使用特定的类型来定义指针.这个类型被用来指示需要如何去解释内存地址里的数据.我们已经知道,在计算机的内部,内存存储的是1和0,而C+ ...

通过Python的slots节省9GB内存

通过Python的slots节省9GB内存相关推荐

最新文章

热门文章

通过Python的__slots__节省9GB内存

通过Python的__slots__节省9GB内存相关推荐

最新文章

热门文章

通过Python的slots节省9GB内存

通过Python的slots节省9GB内存相关推荐