Python内存管理机制

1 概述



对于Python这样的动态语言,如何高效的管理内存,是很重要的一部分,在很大程度上决定了Python的执行效率。与大多数编程语言不同,Python中的变量无需事先申明,变量无需指定类型,程序员无需关心内存管理,Python解释器给你自动回收。我们知道在变量分配内存时,是借用系统资源,在使用完成后,应该归还所借用的系统资源,Python承担了这个复杂的内存管理工作,从而让程序员更加的关注程序的编写质量上。

在执行过程中,Python会频繁的创建和销毁大量的对象,这些都涉及到内存的管理。以下从三个方面来分析Python是如何进行内存管理的。

2 对象的引用计数机制



在Python中是通过引用计数来保持对内存中的变量追踪的,也就是做Python内部记录中所有在使用对象各有多少个引用。Python中有个内部跟踪变量叫做引用计数器,每个变量有多少个引用,简称引用计数。当某个对象的引用计数为0时,就列入了垃圾回收队列。

引用计数增加的情况:

1. 一个对象分配一个新名称

2. 将其放入一个容器中(如列表、元组或字典)

引用计数减少的情况:

1. 使用del语句对对象别名显式的销毁

2. 引用超出作用域或被重新赋值

sys.getrefcount( )函数可以获得对象的当前引用计数

多数情况下,引用计数比你猜测得要大得多。对于不可变数据(如数字和字符串),解释器会在程序的不同部分共享内存,以便节约内存。

3 垃圾回收机制



3.1 当一个对象的引用计数归零时,与该对象对应的析构函数就会被调用,但调用析构函数并不意味着最终一定要调用free释放内存空间,通常是将该对象通过垃圾收集机制处理,将其占用的空间归还到内存池中。

3.2 当两个对象a和b相互引用时,del语句可以减少a和b的引用计数,并销毁用于引用底层对象的名称。然而由于每个对象都包含一个对其他对象的应用,因此引用计数不会归零,对象也不会销毁。(从而导致内存泄露)。为解决这一问题,解释器会定期执行一个循环检测器,搜索不可访问对象的循环并删除它们。

4 内存池机制



Python提供了对内存的垃圾回收机制,但是它将不用的内存放到内存池而不是返回给操作系统。



4.1 小块内存池机制Pymalloc机制



在Python中,许多时候申请的内存都是小块的内存,这些小块内存在申请后,很快又会被释放,由于这些内存的申请并不是为了创建对象,所以并没有对象一级的内存池机制。这就意味着在运行期间,Python会大量的执行malloc和free操作。为了加速Python的执行效率,Python引入了一个内存池机制,用于管理对小块内存的申请和释放,即Pymalloc机制。

1. 当申请的内存小于256字节时,PyObject_Malloc会在内存池中申请内存;当申请的内存大于256字节时,PyObject_Malloc的行为将蜕化为malloc的行为。当然,通过修改Python源代码,我们可以改变这个默认值,从而改变Python的默认内存管理行为。

2. 对于Python对象,如整数,浮点数和List,都有其独立的私有内存池,对象间不共享他们的内存池。也就是说如果你分配又释放了大量的整数,用于缓存这些整数的内存就不能再分配给浮点数。

——游响云停



本文出自 “游响云停” 博客,请务必保留此出处http://rangochen.blog.51cto.com/2445286/1405762

Python内存管理机制,布布扣,bubuko.com

时间: 2024-11-07 18:51:15

Python内存管理机制的相关文章

(重点)Python深入之Python内存管理机制你会吗?

前言本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理.作者:醍醐三叶 请注意:如果你平时学Python遇到问题找不到人解答?或者没有较全面的教程?可以点我进裙里面都有,自行去拿! 关于python的存储问题 (1)由于python中万物皆对象,所以python的存储问题是对象的存储问题,并且对于每个对象,python会分配一块内存空间去存储它 (2)对于整数和短小的字符等,python会执行缓存机制,即将这些对象进行缓存,不会为

[转] Python内存管理机制

转自:https://www.cnblogs.com/51try-again/p/11099999.html 一.引用计数 1.变量与对象 变量赋值的时候才创建,它可以指向(引用)任何类型的对象 python里每一个东西都是对象,它们的核心就是一个结构体:PyObject 变量必须先赋值,再引用. 比如,你定义一个计数器,你必须初始化成0,然后才能自增. 每个对象都包含两个头部字段(类型标识符和引用计数器) 关系图如下: 变量名没有类型,类型属于对象(因为变量引用对象,所以类型随对象),在Pyt

《python源码剖析》笔记 pythonm内存管理机制

本文为senlie原创,转载请保留此地址:http://blog.csdn.net/zhengsenlie 1.内存管理架构 Python的内存管理机制都有两套实现:debug模式和release模式 Python内存管理机制的层次结构: 图16-1 第0层是操作系统提供的内存管理接口,如malloc.free 第1层是Python基于第0层操作系统的内存管理接口包装而成的,主要是为了处理与平台相关的内存分配行为. 实现是一组以PyMem_为前缀的函数族 两套接口:函数和宏. 宏,可以避免函数调

深入详解python传值问题及内存管理机制

在比较浅层次上我们通过说明如下问题来进一步深入了解python内存管理机制: python中到底是"传引用"还是"传值"呢??? 这个问题的回答是:看情况.有的是传值,有的是传引用. 判断的依据是看对象的可变性,而这一点又取决于对象的类型.故在python中的说法是对象可变的还是不可变的. 基本数据类型(整型及其他数据类型,字符串)及元组是不可变的,参数传递的是形参,也就是传过来的是原值的一个拷贝,在函数中改变形参的值实参不会发生变化: def func(a) 列表

转发:[Python]内存管理

本文为转发,原地址为:http://chenrudan.github.io/blog/2016/04/23/pythonmemorycontrol.html 本文主要为了解释清楚python的内存管理机制,首先介绍了一下python关于内存使用的一些基本概念,然后介绍了引用计数和垃圾回收gc模块,并且解释了分代回收和"标记-清除"法,然后分析了一下各种操作会导致python变量和对象的变化,最后做了一下小结.本来是为了解决前几天遇到把服务器内存耗光的问题,结果后来检查发现并不是因为内存

[转载] python的内存管理机制

本文为转载,原作为http://www.cnblogs.com/CBDoctor/p/3781078.html,请大家支持原作者 先从较浅的层面来说,Python的内存管理机制可以从三个方面来讲 (1)垃圾回收 (2)引用计数 (3)内存池机制 一.垃圾回收: python不像C++,Java等语言一样,他们可以不用事先声明变量类型而直接对变量进行赋值.对Python语言来讲,对象的类型和内存都是在运行时确定的.这也是为什么我们称Python语言为动态类型的原因(这里我们把动态类型可以简单的归结

python的内存管理机制

先从较浅的层面来说,Python的内存管理机制可以从三个方面来讲 (1)垃圾回收 (2)引用计数 (3)内存池机制 一.垃圾回收: python不像C++,Java等语言一样,他们可以不用事先声明变量类型而直接对变量进行赋值.对Python语言来讲,对象的类型和内存都是在运行时确定的.这也是为什么我们称Python语言为动态类型的原因(这里我们把动态类型可以简单的归结为对变量内存地址的分配是在运行时自动判断变量类型并对变量进行赋值). 二.引用计数: Python采用了类似Windows内核对象

python的内存管理机制(zz)

本文转载自:http://www.cnblogs.com/CBDoctor/p/3781078.html 先从较浅的层面来说,Python的内存管理机制可以从三个方面来讲 (1)垃圾回收 (2)引用计数 (3)内存池机制 一.垃圾回收: python不像C++,Java等语言一样,他们可以不用事先声明变量类型而直接对变量进行赋值.对Python语言来讲,对象的类型和内存都是在运行时确定的.这也是为什么我们称Python语言为动态类型的原因(这里我们把动态类型可以简单的归结为对变量内存地址的分配是

【python】python值传递问题和内存管理机制

1)值传递问题 python中到底是"值传递"还是"引用传递",主要取决于对象是否是可变的.     1)函数传参:    ·基本数据类型:int.float.str:元祖属于不可变对象:传递的是"原值"的拷贝    ·列表.字典.类.类实例属于可变对象:传递的是"值引用"          2)变量复制    ·python中的变量复制(a=b)也是同样的道理,不可变对象被真正复制:而可变对象只是传递了一个     &quo