精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

聊一聊Python中的“垃圾”回收

開發 后端
對于python來說,一切皆為對象,所有的變量賦值都遵循著對象引用機制。程序在運行的時候,需要在內存中開辟出一塊空間,用于存放運行時產生的臨時變量;計算完成后,再將結果輸出到永久性存儲器中。

前言

對于python來說,一切皆為對象,所有的變量賦值都遵循著對象引用機制。程序在運行的時候,需要在內存中開辟出一塊空間,用于存放運行時產生的臨時變量;計算完成后,再將結果輸出到永久性存儲器中。如果數據量過大,內存空間管理不善就很容易出現 OOM(out of memory),俗稱爆內存,程序可能被操作系統中止。而對于服務器,內存管理則顯得更為重要,不然很容易引發內存泄漏- 這里的泄漏,并不是說你的內存出現了信息安全問題,被惡意程序利用了,而是指程序本身沒有設計好,導致程序未能釋放已不再使用的內存。- 內存泄漏也不是指你的內存在物理上消失了,而是意味著代碼在分配了某段內存后,因為設計錯誤,失去了對這段內存的控制,從而造成了內存的浪費。也就是這塊內存脫離了gc的控制。

計數引用

因為python中一切皆為對象,你所看到的一切變量,本質上都是對象的一個指針。當一個對象不再調用的時候,也就是當這個對象的引用計數(指針數)為 0 的時候,說明這個對象永不可達,自然它也就成為了垃圾,需要被回收??梢院唵蔚睦斫鉃闆]有任何變量再指向它。 

  1. import os  
  2. import psutil   
  3.  
  4. # 顯示當前 python 程序占用的內存大小 
  5.  
  6. def show_memory_info(hint):  
  7.     pid = os.getpid()  
  8.     p = psutil.Process(pid)  
  9.     info = p.memory_full_info()  
  10.     memory = info.uss / 1024.1024  
  11. print {} memory used: {} MB .format(hint, memory)) 

可以看到調用函數 func(),在列表 a 被創建之后,內存占用迅速增加到了 433 MB:而在函數調用結束后,內存則返回正常。這是因為,函數內部聲明的列表 a 是局部變量,在函數返回后,局部變量的引用會注銷掉;此時,列表 a 所指代對象的引用數為 0,Python 便會執行垃圾回收,因此之前占用的大量內存就又回來了。 

  1. def func():  
  2.     show_memory_info( 
  3.  initial  
  4.  
  5. global 
  6. a = [i for  i in  range( 10000000 )]  
  7.     show_memory_info( after a created ) 
  8. func()  
  9. show_memory_info( 
  10.  finished  
  11. ) 
  12. ########## 輸出 ##########  
  13. initial memory used: 48.88671875 MB  
  14. after a created memory used:433.94921875 MB  
  15. finished memory used:433.94921875 MB 

新的這段代碼中,global a 表示將 a 聲明為全局變量。那么,即使函數返回后,列表的引用依然存在,于是對象就不會被垃圾回收掉,依然占用大量內存。同樣,如果我們把生成的列表返回,然后在主程序中接收,那么引用依然存在,垃圾回收就不會被觸發,大量內存仍然被占用著:

  1. def func():  
  2.     show_memory_info(  initial  
  3.     a = [i for  i in  derange( 10000000 )]  
  4.     show_memory_info(  after a created 
  5.  
  6. return a  
  7. a = func() 
  8. show_memory_info( finished) 
  9.  
  10. ########## 輸出 ##########  
  11. initial memory used:  47.96484375 MB 
  12. after a created memory used:434.515625 MB 
  13. finished memory used: 434.515625 MB 

那怎么可以看到變量被引用了多少次呢?通過 sys.getrefcount。 

  1. import sys  
  2. a = []  
  3. # 兩次引用,一次來自 a,一次來自 getrefcount 
  4. print (sys.getrefcount(a))  
  5.  
  6. def func(a):  
  7. # 四次引用,a,python 的函數調用棧,函數參數,和 getrefcount  
  8. print (sys.getrefcount(a))  
  9. func(a)  
  10. # 兩次引用,一次來自 a,一次來自 getrefcount,函數 func 調用已經不存在  
  11. print (sys.getrefcount(a))   
  12. ########## 輸出 ##########  
  13.  
  14.  

如果其中涉及函數調用,會額外增加兩次1. 函數棧2. 函數調用。

從這里就可以看到python不再需要像C那種的認為的釋放內存,但是python同樣給我們提供了手動釋放內存的方法 gc.collect()。

  1. import gc  
  2. show_memory_info( initial 
  3. a = [i for  i in range( 10000000 )]  
  4. show_memory_info(  after a created
  5. del a 
  6. gc.collect() 
  7. show_memory_info( finish  
  8. print (a)  
  9. ########## 輸出 ########## 
  10. initial memory used: 48.1015625 MB 
  11. after a created memory used: 434.3828125 MB  
  12. finish memory used: 48.33203125 MB 
  13. --------------------------------------------------------------------------- 
  14. NameErrorTraceback (most recent call last
  15.  
  16. <ipython-input- 12 153e15063d8a > in<module>  
  17. 11  
  18. 12 show_memory_info(  finish ) 
  19. --->  13 print (a) 
  20.  
  21. NameError : name  a  isnotdefined 

截止目前,貌似python的垃圾回收機制非常的簡單,只要對象引用次數為0,必定為觸發gc,那么引用次數為0是否是觸發gc的充要條件呢?

循環回收

如果有兩個對象,它們互相引用,并且不再被別的對象所引用,那么它們應該被垃圾回收嗎? 

  1. def func(): 
  2.     show_memory_info( initial  
  3.     a = [i for  i in  range(10000000)] 
  4.     b = [i for  in  range(10000000)]  
  5.     show_memory_info(  after a, b created  
  6.     a.append(b)  
  7.     b.append(a) 
  8. func() 
  9. show_memory_info(  finished  
  10. ########## 輸出 ##########  
  11. initial memory used: 47.984375 MB  
  12. after a, b created memory used:822.73828125 MB  
  13. finished memory used:  821.73046875 MB 

從結果顯而易見,它們并沒有被回收,但是從程序上來看,當這個函數結束的時候,作為局部變量的a,b就已經從程序意義上不存在了。但是因為它們的互相引用,導致了它們的引用數都不為0。這時要如何規避呢1. 從代碼邏輯上進行整改,避免這種循環引用2. 通過人工回收。 

  1. import gc 
  2. def func():  
  3.     show_memory_info( initial 
  4.     a = [i for  i in  range(10000000)]  
  5.     b = [i for  i in  range(10000000)] 
  6.     show_memory_info( after a, b created 
  7.     a.append(b) 
  8.     b.append(a) 
  9. func() 
  10. gc.collect() 
  11. show_memory_info( finished  
  12. ########## 輸出 ##########  
  13. initial memory used:49.51171875 MB  
  14. after a, b created memory used: 824.1328125 MB  
  15. finished memory used:49.98046875 MB 

python針對循環引用,有它的自動垃圾回收算法1. 標記清除(mark-sweep)算法2. 分代收集(generational)。

標記清除

標記清除的步驟總結為如下步驟1. GC會把所有的『活動對象』打上標記2. 把那些沒有標記的對象『非活動對象』進行回收那么python如何判斷何為非活動對象?通過用圖論來理解不可達的概念。對于一個有向圖,如果從一個節點出發進行遍歷,并標記其經過的所有節點;那么,在遍歷結束后,所有沒有被標記的節點,我們就稱之為不可達節點。顯而易見,這些節點的存在是沒有任何意義的,自然的,我們就需要對它們進行垃圾回收。但是每次都遍歷全圖,對于 Python 而言是一種巨大的性能浪費。所以,在 Python 的垃圾回收實現中,mark-sweep 使用雙向鏈表維護了一個數據結構,并且只考慮容器類的對象(只有容器類對象,list、dict、tuple,instance,才有可能產生循環引用)。

 

圖中把小黑圈視為全局變量,也就是把它作為root object,從小黑圈出發,對象1可直達,那么它將被標記,對象2、3可間接到達也會被標記,而4和5不可達,那么1、2、3就是活動對象,4和5是非活動對象會被GC回收。 

分代回收

分代回收是一種以空間換時間的操作方式,Python將內存根據對象的存活時間劃分為不同的集合,每個集合稱為一個代,Python將內存分為了3“代”,分別為年輕代(第0代)、中年代(第1代)、老年代(第2代),他們對應的是3個鏈表,它們的垃圾收集頻率與對象的存活時間的增大而減小。新創建的對象都會分配在年輕代,年輕代鏈表的總數達到上限時(當垃圾回收器中新增對象減去刪除對象達到相應的閾值時),Python垃圾收集機制就會被觸發,把那些可以被回收的對象回收掉,而那些不會回收的對象就會被移到中年代去,依此類推,老年代中的對象是存活時間最久的對象,甚至是存活于整個系統的生命周期內。同時,分代回收是建立在標記清除技術基礎之上。事實上,分代回收基于的思想是,新生的對象更有可能被垃圾回收,而存活更久的對象也有更高的概率繼續存活。因此,通過這種做法,可以節約不少計算量,從而提高 Python 的性能。所以對于剛剛的問題,引用計數只是觸發gc的一個充分非必要條件,循環引用同樣也會觸發。

調試

可以使用 objgraph來調試程序,因為目前它的官方文檔,還沒有細讀,只能把文檔放在這供大家參閱啦~其中兩個函數非常有用 1. show_refs() 2. show_backrefs()。

 

責任編輯:龐桂玉 來源: 機器學習算法與Python學習
相關推薦

2018-03-13 09:09:07

閃存垃圾回收

2024-03-28 09:02:25

PythonGetattr工具

2022-08-30 07:39:57

C++namespace隔離

2020-12-11 11:11:44

原子類JavaCAS

2021-01-04 08:09:07

Linux內核Watchdog

2023-11-02 08:37:46

Python換行轉義

2021-06-30 07:19:35

微服務業務MySQL

2022-11-09 08:05:15

JavaScriptsuper()

2019-12-12 14:52:10

數據庫腳本

2020-09-08 06:54:29

Java Gradle語言

2022-03-06 20:35:41

并發串行CAP

2024-10-16 15:11:58

消息隊列系統設計

2023-07-06 13:56:14

微軟Skype

2024-04-29 14:58:48

Python內置函數

2024-02-23 15:51:40

PythonBlaze延遲計算

2018-06-07 13:17:12

契約測試單元測試API測試

2021-01-28 22:31:33

分組密碼算法

2020-05-22 08:16:07

PONGPONXG-PON

2023-09-22 17:36:37

2018-07-23 15:28:29

HTTPCookieHeader
點贊
收藏

51CTO技術棧公眾號

一区二区国产日产| 国产成人精品一区| 99久久综合网| 亚洲a级黄色片| 九九热最新视频| 91综合视频| 日韩视频在线永久播放| www.99热这里只有精品| 成年网站在线| 国产成人一级电影| 午夜精品一区二区三区在线视频| 国产精品扒开腿做爽爽| 91麻豆精品国产91久久久更新资源速度超快| 亚洲美腿欧美偷拍| 欧美久久综合性欧美| 国产孕妇孕交大片孕| 99综合精品| 久久精品夜夜夜夜夜久久| 男人网站在线观看| 欧美在线一级| 动漫精品一区二区| 中文字幕中文字幕99| 五十路在线视频| 国产在线视频不卡二| 欧洲美女免费图片一区| 青青草免费av| 色综合咪咪久久网| 日韩精品免费在线视频| 日本亚洲一区二区三区| 欧美123区| 五月激情综合色| 91麻豆天美传媒在线| 国产中文字幕在线播放| www.亚洲在线| 亚洲淫片在线视频| 一区二区视频播放| 久久久噜噜噜| 97香蕉久久超级碰碰高清版 | 久草视频在线资源| re久久精品视频| 日韩高清有码在线| 麻豆短视频在线观看| 中文字幕免费视频| 欧美裸体视频| 亚洲高清久久久| 精品国产一区二区三区在线| jizz在线免费观看| 久久夜色精品国产噜噜av| 精品国产乱码一区二区三区四区| 99久久久无码国产精品免费| 九一九一国产精品| 国产精品视频成人| 69av视频在线观看| 久久这里有精品15一区二区三区| 97精品一区二区三区| 久久久久久久福利| 欧美日韩国产色综合一二三四| 久久久999国产精品| 天堂а√在线中文在线鲁大师| 欧美日韩中字| 一个人看的www久久| 中文字幕成人动漫| 经典一区二区| 中文字幕一精品亚洲无线一区| 国产精久久一区二区三区| 九九综合在线| 一本色道久久88亚洲综合88| 日韩欧美视频免费观看| 国产精品久久久久久久久久10秀| 深夜福利91大全| 日韩免费av一区| 国产精品久久久久一区二区三区厕所 | 欧美日本三级| 日韩一区二区免费在线电影| 亚洲精品乱码久久久久久9色| 亚洲精品不卡在线观看| 亚洲精品二三区| 美女爆乳18禁www久久久久久 | 一区二区不卡视频| 哥也色在线视频| 亚洲一区二区不卡免费| 欧美精品久久久久久久自慰 | 日本黄区免费视频观看| 99久久亚洲精品蜜臀| 蜜臀久久99精品久久久久久宅男| 欧产日产国产v| aⅴ色国产欧美| 日本中文字幕成人| 国产一区二区三区在线观看| 国产成人aaaa| 欧美精品国产精品久久久| 在线观看av的网站| 夜夜嗨av一区二区三区网页 | 日本人妖一区二区| 成人精品在线观看| 男人的天堂a在线| 久久久久久久精| 在线电影看在线一区二区三区| 色老头在线观看| 欧美性高潮在线| 一起操在线视频| 看全色黄大色大片免费久久久| 亚洲人线精品午夜| 97视频免费看| 亚洲精品一区二三区| 国产激情91久久精品导航 | 久久久久久午夜| 久久精品视频2| 国产高清一区日本| 日韩欧美第二区在线观看| 午夜伦理在线视频| 在线观看视频一区二区欧美日韩| 亚洲av无码久久精品色欲| 免费看日本一区二区| 欧美俄罗斯乱妇| 在线免费观看国产精品| 国产成人精品网址| 视频一区二区三区免费观看| 182在线视频观看| 欧美日韩精品三区| 免费a在线观看播放| 中文在线日韩| 国产精品激情自拍| 四虎精品一区二区三区| 综合久久久久久| 久久综合久久色| 国产精品网站在线看| 国产精品国产自产拍在线| 欧美—级a级欧美特级ar全黄| 亚洲av无码不卡| 99视频一区二区三区| 国产又粗又爽又黄的视频| 日韩大尺度黄色| 亚洲精品国产精品国产自| 欧美又粗又大又长| 美国毛片一区二区三区| 日本一区二区不卡高清更新| 在线男人天堂| 日韩av在线网| 黄网站免费在线| 国产精品一二三| 男女啪啪的视频| 亚洲精品aaa| 中文字幕一精品亚洲无线一区 | 国产精品久久久久久久av福利| 一区二区三区免费高清视频| 99国内精品| 精品蜜桃传媒| 国产亚洲成av人片在线观看 | 精品国产精品| 日本久久中文字幕| 天天综合天天色| 午夜欧美视频在线观看| 91九色蝌蚪porny| 韩国自拍一区| 999国产在线| 天使と恶魔の榨精在线播放| 欧美一级黄色录像| 欧美另类videoxo高潮| 久久99精品视频| 黄瓜视频免费观看在线观看www| 色综合一区二区日本韩国亚洲| 最近2019中文字幕mv免费看 | 精品国产区在线| 91吃瓜在线观看| 日韩av综合中文字幕| 在线观看国产亚洲| 蜜臀av国内免费精品久久久夜夜| 91精品国产麻豆| 国产va在线播放| 成人黄色一级视频| av动漫在线看| 国产欧美日韩| 国产美女搞久久| 主播国产精品| 亚洲国模精品一区| av片免费观看| 国产精品国产自产拍高清av王其| 日本免费色视频| 国内精品美女在线观看| 国产欧美日韩在线播放| 老司机深夜福利在线观看| 精品视频久久久| 一级视频在线播放| 亚洲一区在线视频观看| 国产xxxxxxxxx| 人禽交欧美网站| 美国av在线播放| 另类在线视频| 国产精品久久久久久五月尺| а√中文在线8| 日韩av最新在线| 91精品人妻一区二区三区果冻| 亚洲天堂av一区| 波多野结衣影院| 精品中文字幕一区二区| 亚洲精品无码国产| 成人在线免费观看91| 99免费在线观看视频| 成人免费短视频| 久热在线中文字幕色999舞| 人妻视频一区二区三区| 欧美日韩一卡二卡| 久久精品视频日本| 国产精品福利电影一区二区三区四区 | 少妇无套高潮一二三区| 麻豆91在线播放免费| 无码人妻少妇伦在线电影| 日本久久一二三四| 国产成人免费观看| 欧洲亚洲精品| 欧美一级黄色网| wwwav在线| 亚洲视频综合网| 亚洲精品一区二区三区四区| 欧美伊人久久久久久久久影院| 欧美激情国产精品免费| 日本一区二区三区四区在线视频| 久久精品国产第一区二区三区最新章节 | 欧美亚洲日本在线观看| 国产精品vip| 亚洲亚洲精品三区日韩精品在线视频| 另类ts人妖一区二区三区| 亚洲一区二区中文| 97成人超碰| 欧美又大又粗又长| 波多野结衣视频一区二区| 久久精品国产精品亚洲| 超碰国产在线观看| 亚洲欧洲国产精品| 免费国产羞羞网站视频| 日韩西西人体444www| 一区二区三区黄| 在线免费观看日韩欧美| 天天爽夜夜爽夜夜爽精品| 亚洲国产精品久久久久婷婷884| 亚洲国产123| 国产精品美女久久久久久久久久久| 在线观看av中文字幕| 粉嫩一区二区三区在线看| 久久精品亚洲天堂| 久久精品国产网站| 天天爱天天操天天干| 奶水喷射视频一区| 久久久999免费视频| 亚洲国产激情| 免费看黄在线看| 亚洲成人中文| 自拍日韩亚洲一区在线| 激情综合中文娱乐网| 日韩精品在线视频免费观看| 国内揄拍国内精品久久| 成人在线视频一区二区三区 | 国产一区二区三区乱码| 午夜精品婷婷| 高清无码一区二区在线观看吞精| 亚洲欧美日韩高清在线| 国产一二三四区在线观看| 亚洲香蕉av| 精品人妻人人做人人爽| 国产精品www.| 少妇人妻在线视频| 老鸭窝91久久精品色噜噜导演| 哪个网站能看毛片| 日韩av一区二区在线影视| 麻豆一区二区三区视频| 精品一区二区三区av| 男插女视频网站| 成人国产精品免费观看动漫| 日本少妇xxxx| 久久精品一区二区| 美女网站视频色| 亚洲精品免费在线播放| 精品午夜福利在线观看| 欧美日韩中文字幕在线| 国产99在线免费| 蜜桃精品在线| 国产啪精品视频网站| 国产精品一区二区三区www| 91视频网页| 美女视频亚洲色图| 日本一区二区三区免费观看| 日本久久一二三四| 日韩成人三级视频| 噜噜噜久久亚洲精品国产品小说| 成年人在线观看视频免费| 国产真实乱偷精品视频免| 国产白袜脚足j棉袜在线观看| 久久综合九色综合欧美亚洲| 青青草华人在线视频| 亚洲一区二区三区四区中文字幕| 欧美 日韩 精品| 欧美久久婷婷综合色| 亚洲AV午夜精品| 亚洲日本成人网| 成人免费视屏| 日本精品一区二区三区在线播放视频| 欧美一级网址| 精品日韩电影| 99久久激情| 六月丁香婷婷激情| 久久99精品一区二区三区三区| 午夜男人的天堂| 中文字幕一区二区三区色视频| 日韩毛片在线播放| 欧美日韩夫妻久久| 少妇高潮一区二区三区69| 在线观看视频亚洲| 国产ktv在线视频| 91手机视频在线观看| 西瓜成人精品人成网站| 免费成人进口网站| 先锋a资源在线看亚洲| 在线成人免费av| 欧美激情在线一区二区三区| 国产无码精品在线观看| 6080亚洲精品一区二区| 免费资源在线观看| 久久人人爽人人爽人人片av高清| 久久亚洲精品中文字幕| 欧美大陆一区二区| 亚洲一级一区| 911福利视频| 久久久久久电影| 国产在线视频卡一卡二| 555www色欧美视频| 国产女人在线观看| 日本乱人伦a精品| 欧美调教视频| 少妇大叫太大太粗太爽了a片小说| 蜜臀av一区二区在线观看| 国产麻豆天美果冻无码视频| 亚洲自拍偷拍综合| aaa一区二区三区| 日韩中文字幕网站| 8av国产精品爽爽ⅴa在线观看| 久久青青草原| 99riav国产精品| 久久久久亚洲av无码专区首jn| 性欧美1819sex性高清| 痴汉一区二区三区| 午夜天堂精品久久久久| 欧美专区第二页| 亚洲色图一区二区三区| 亚洲综合五月天婷婷丁香| 中文字幕国产精品| 成人va天堂| 日韩高清dvd| 视频一区二区三区中文字幕| 国产特黄级aaaaa片免| 狠狠躁夜夜躁人人躁婷婷91| 亚州男人的天堂| 韩国一区二区电影| 欧美综合自拍| av之家在线观看| 久久亚洲私人国产精品va媚药| 久久久久亚洲av成人毛片韩| 精品无人区太爽高潮在线播放 | 日本老师69xxx| 亚洲第一二三区| 熟女人妇 成熟妇女系列视频| 欧美激情资源网| 国产又爽又黄免费软件| 九九九久久久久久| 爱爱精品视频| 国产日产欧美视频| 国产日韩欧美不卡在线| 亚洲图片小说视频| 美日韩丰满少妇在线观看| 中文字幕一区二区三区四区久久| 又大又硬又爽免费视频| 99精品桃花视频在线观看| 免费的毛片视频| 在线观看视频亚洲| 国产va免费精品观看精品| 亚洲精品天堂成人片av在线播放 | 亚洲最大av在线| 亚洲激情网址| 免费在线观看你懂的| 欧美日韩视频在线第一区| 91小视频xxxx网站在线| 国产日韩亚洲精品| 蜜桃精品视频在线| 免费无码毛片一区二区app| 亚洲国产精品小视频| 精品视频在线一区二区在线| 欧美日韩亚洲国产成人| 99视频精品全部免费在线| 丰满人妻一区二区三区四区| 久久视频在线免费观看| 全国精品免费看| 五月婷婷六月合| 亚洲福利一区二区三区| 草草影院在线观看| 成人欧美一区二区| 日韩不卡在线观看日韩不卡视频| 欧美激情图片小说| 日韩精品视频三区| 成人污版视频| 欧美 日韩 国产一区|