大家或许知道,Python 为了提高内存的利用效率,采用了一套共用对象内存的分配策略。

例如,对于那些数值较小的数字对象([-5, 256])、布尔值对象、None 对象、较短的字符串对象( 通常 是 20)等等,字面量相等的对象实际上是同一个对象。

我很早的时候曾写过一篇《Python中的“特权种族”是什么?》,把这些对象统称为“特权种族”,它们是 Python 在内存管理机制上使用的优化技巧。

前不久,我还写了一篇《Python 内存分配时的小秘密》,也是介绍内存管理的技巧。

这两篇文章有所区别: 旧文主要涉及了内存共用与对象驻留的机制,而新文介绍的是内存分配、动态扩容以及内存回收的相关机制。

它们令我不由自主地想到两个词: 共享经济与供需平衡。

如果你没有读过那两篇文章,我强烈建议你先回看一下,然后再看看我的联想是否有道理:那几类特权种族对象其实是在共享内存,表面上的不同对象,其实是在循环利用;至于供需平衡也好理解,创建某些对象时,按照预期的诉求去分配内存,在扩容时则灵活调节,达到了供需之间的平衡。

透过现象看本质,Python 可以很有趣。

但是,Python 的有趣之处还不止于此,本文要继续分享另一种内存管理机制,在某种程度上,它实现了共享经济与供需平衡的融合,我们从中可揭开 Python 的另一重身份……

1、不可变对象的共享经济

上面列出的"特权种族"都是不可变对象(而“供需平衡”主要出现于可变对象),对于这些不变的对象,当出现多处使用时,共用一个对象似乎是种不错的优化方法。

我曾有一种猜想: Python 的不可变对象都可能是特权种族。

我没有试图去完全证实它,本文只想考察其中一种不可变对象:元组。它是不可变对象,那么,是否有共用对象的机制呢?

下面把它跟列表作一下对比:

由此可见,两个空列表是不同的对象,而两个空元组其实是同一个对象。这至少说明了,空元组在内存中只有一个,它属于已提到的特权种族。

将实验延伸到集合与字典,它们是可变对象,你会发现结果跟列表一样,存在多个副本,即不是特权种族。我就不举例了。

由上述的实验结果,还能引出两个问题,但是它们偏离了本文主题,我不打算深入辨析,简单列一下:

  • 除了空元组,还有什么样的元组是“特权种族”?( PS :从元素的数量、类型、元素自身的大小考虑,就我小范围试验,还没发现。所以,空元组是独特的唯一?)
  • 编译期与运行期有所区别,这在之前写字符串的 intern 机制时(《Intern机制的软肋》)也分析过。(PS:print(id([]) == id([])),结果为 True,与上例先赋值再比较不同。)

2、可变对象的共享经济

空元组体现了共享经济,但由于它是不可变对象,所以不存在动态扩容,就只体现了极少的供需平衡。

作为对照,列表等可变对象充分表现了供需平衡,却似乎没办法体现共享经济。

比如说,我们把一个列表想象成一个可自增的杯子(毕竟它是某种容器),再把它的元素想象成不同种类的液体(水、可乐、酒……)。

那么,我们的问题是:两杯东西是否可以共享为一个对象呢?或者说,有没有可能共享那只杯子呢?这样就可以节省内存(在那篇讲小秘密的文章中展示过:“空杯子”占用的内存可不少),提升效率啦。

对于第一个问题,答案为否,验证过程略。对于第二个问题,在上一节中,我们已验证过两个空杯子(即空列表),答案也为否。

但是,第二个问题还有其它的可能!下面让我们换一种实验方法:

以上代码在不同环境中,执行结果可能有所差异。我执行的一次结果如下:

分析结果可知:列表对象在被回收之后,并不会彻底消除,它的内存地址会传递给新创建的列表,也就是说,新创建的列表其实共享了旧列表的内存地址!

再结合前面的例子,我们可以说,先后静态创建的两个列表会分配不同的内存地址,但是,经过动态回收之后,先后创建的列表可能是同一个内存地址!(注意:这里说的是“可能”,因为在新列表创建前,若有其它地方也在创建列表,那后者可能夺去先机。)

延伸到其它基本的可变对象,例如集合与字典,也有同样的共享策略,其目的显而易见: 循环利用这些对象的“残躯”,可以避免内存碎片,提高执行性能。

共享一只杯子,总比重新创造一只杯子,要更高效便捷,对吧?

Python 解释器在实现这个机制时,使用了一个叫做free_list的全局变量,其工作原理是:

  • 当创建新的对象时,则检查 free_list 内是否有可用对象,有则取出使用,没有则创建
  • 当这些对象被析构时,则检查 free_list 是否有剩余空间,有则存入其中
  • 某类对象存入 free_list 时,只保留“躯壳”,而清空其内部所有的元素(即只共享杯子,不共享杯中物)

好了,现在我们可以说,列表、集合与字典这些可变对象,它们都不是前文所说的特权种族,但是,在它们背后都藏着循环使用的共享思想,这一点却是相通的。

Python 解释器在内存管理上真是煞费苦心啊,在那些司空见惯的基本对象上,它施加了诸多的小魔法,在我们毫不觉察的时候,它们有条不紊地运作,而当我们终于见识清楚后,就不得不感叹它的精妙了。如果大家对Python感兴趣的话,可以加一下我的微信哦:abb436574,免费领取一套学习资料和视频课程哟~

Python 算是一个精打细算的“经济学家”了。

回顾全文,最后作一个小结:

  • 较小的数字、较短的字符串、布尔值与空元组等不可变对象,它们存在着“共享经济”的机制,提升了内存的使用效率
  • 列表、集合与字典等可变对象,它们存在着预分配及超额分配等“供需平衡”的机制,提升了内存的分配效率
  • 列表等对象还存在着共享“容器外壳”的机制,循环利用空闲资源,综合提升程序性能

Python 为了提升性能,竟运用了共享经济!赶紧看看!!相关推荐

  1. Python 为了提升性能,竟运用了共享经济

    大家或许知道,Python 为了提高内存的利用效率,采用了一套共用对象内存的分配策略. 例如,对于那些数值较小的数字对象([-5, 256]).布尔值对象.None 对象.较短的字符串对象(通常是 2 ...

  2. python 经济论文_Python 为了提升性能,竟运用了共享经济

    大家或许知道,Python 为了提高内存的利用效率,采用了一套共用对象内存的分配策略. 例如,对于那些数值较小的数字对象([-5, 256]).布尔值对象.None 对象.较短的字符串对象(通常 是 ...

  3. ​复盘共享经济2020:陷入艰难求生困境,转型能否拯救亏损怪圈

    2020年对于共享经济而言,不啻于一场灾难. 从诞生至今,短短几年间,共享经济已经走过了初兴.热潮.乱象与复归平稳,唯一不变的对于这种模式能否走得通的质疑声从未间断.进入2020年因黑天鹅事件,对共享 ...

  4. 共享经济+信用评分:一种新的财富打开方式

    五一期间,马云正式宣布:ofo.永安行.小蓝.funbike.优拜等共享单车品牌与蚂蚁金服达成合作.从4月29日起,用户直接通过支付宝扫一扫,就可解锁这些品牌的共享单车. 同时宣布:接入支付宝的共享单 ...

  5. 【Python】提升Python程序性能的好习惯2

    掌握一些技巧,可尽量提高Python程序性能,也可以避免不必要的资源浪费. 追求性能极限是一个有趣的游戏, 而过度优化就会变成嘲弄了.虽然Python授予你与C接口无缝集成的能力, 你必须问自己你花数 ...

  6. 利用Python延迟初始化提升性能

    所谓类属性的延迟计算就是将类的属性定义成一个property,只在访问的时候才会计算,而且一旦被访问后,结果将会被缓存起来,不用每次都计算.构造一个延迟计算属性的主要目的是为了提升性能 propert ...

  7. python之提升程序性能的解决方案

    Python在性能方面不卓越,但是使用一些小技巧,可以提高Python程序的性能,避免不必要的资源浪费. 1. 使用局部变量 尽可能使用局部变量替代全局变量,可以是程序易于维护并且有助于提高性能节约成 ...

  8. 十步,教你把Python运行速度提升 30%

    作者 | Martin Heinz 译者 | 陆离 编辑 | Jane 出品 | AI科技大本营(ID:rgznai100) [导读]一直以来,诟病 Python语言的人经常说,他们不想使用的一个原因 ...

  9. paip. 提升性能---hibernate的缓存使用 总结

    paip. 提升性能---hibernate的缓存使用 总结 作者Attilax  艾龙,  EMAIL:1466519819@qq.com  来源:attilax的专栏 地址:http://blog ...

最新文章

  1. 半监督目标检测相关方法总结
  2. 2.7 usb摄像头之usb摄像头描述符打印
  3. python的字符串_百度资讯搜索_python的字符串
  4. 为什么LED灯会越用越暗?
  5. python json数组解析_Python读取JSON数据操作实例解析
  6. mac下自带apache
  7. MEF董事、中国电信云计算中心主任赵慧玲:MEF第三类网络
  8. Pytorch1.7.1与SimpleITK2.0.0在centos7上终端运行冲突的情况
  9. java三年技术差_3年经验Java程序员面阿里P6 差距在哪里
  10. soap xml_SOAP XML消息–使用Liquid XML Studio进行了解和创建
  11. DataFormatString格式字符串
  12. 计算机文献检索语言,计算机文献检索论文参考文献集 计算机文献检索论文参考文献数量是多少...
  13. 【mininet 0x02】如何使用mn工具来操作mininet
  14. 广东工业大学计算机专业课程,广东工业大学在职研究生计算机专业课程安排
  15. html svg标签中插入img image标签不显示的问题
  16. Rebuttal得来的经验
  17. CDH6.2.0安装教程
  18. pap.er - Mac必备5K壁纸下载软件
  19. 【转帖】一些常用网站列表
  20. mapinfo11 安装报错

热门文章

  1. 张一鸣这一条微博,阿里P8的我,竟然想了一夜
  2. 软件开发包(SDK)安全与合规报告(2020)
  3. 晚上八点半,一起来聊聊
  4. java 缓存 30秒后失效_如何处理缓存失效、缓存穿透、缓存并发等问题
  5. php 取数组数量_PHP array_slice():截取数组的一部分
  6. 《大数据》2015年第2期“研究”——特异群组挖掘:框架与应用
  7. 【软件测试】测试驱动开发
  8. 【C语言】《程序设计基础(C语言)》自编题解索引
  9. 【数据结构与算法】顺序栈的Java实现
  10. gitlab重置root密码