亚洲免费在线-亚洲免费在线播放-亚洲免费在线观看-亚洲免费在线观看视频-亚洲免费在线看-亚洲免费在线视频

為什么從Python 3.6開始字典有序并效率更高

系統 1524 0

在Python 3.5(含)以前,字典是不能保證順序的,鍵值對A先插入字典,鍵值對B后插入字典,但是當你打印字典的Keys列表時,你會發現B可能在A的前面。

但是從Python 3.6開始,字典是變成有順序的了。你先插入鍵值對A,后插入鍵值對B,那么當你打印Keys列表的時候,你就會發現B在A的后面。

不僅如此,從Python 3.6開始,下面的三種遍歷操作,效率要高于Python 3.5之前:

            
for key in 字典

for value in 字典.values()

for key, value in 字典.items()
          

從Python 3.6開始,字典占用內存空間的大小,視字典里面鍵值對的個數,只有原來的30%~95%。

Python 3.6到底對字典做了什么優化呢?為了說明這個問題,我們需要先來說一說,在Python 3.5(含)之前,字典的底層原理。

當我們初始化一個空字典的時候,CPython的底層會初始化一個二維數組,這個數組有8行,3列,如下面的示意圖所示:

            
my_dict = {}

'''
此時的內存示意圖
[[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---]]
'''
          

現在,我們往字典里面添加一個數據:

            
my_dict['name'] = 'kingname'

'''
此時的內存示意圖
[[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[1278649844881305901, 指向name的指針, 指向kingname的指針],
[---, ---, ---],
[---, ---, ---]]
'''
          

這里解釋一下,為什么添加了一個鍵值對以后,內存變成了這個樣子:

首先我們調用Python 的hash函數,計算name這個字符串在當前運行時的hash值:

            
>>> hash('name')
1278649844881305901
          

特別注意,我這里強調了『當前運行時』,這是因為,Python自帶的這個hash函數,和我們傳統上認為的Hash函數是不一樣的。Python自帶的這個hash函數計算出來的值,只能保證在每一個運行時的時候不變,但是當你關閉Python再重新打開,那么它的值就可能會改變,如下圖所示:

為什么從Python 3.6開始字典有序并效率更高_第1張圖片

假設在某一個運行時里面,hash('name')的值為1278649844881305901。現在我們要把這個數對8取余數:

            
>>> 1278649844881305901 % 8
5
          

余數為5,那么就把它放在剛剛初始化的二維數組中,下標為5的這一行。由于name和kingname是兩個字符串,所以底層C語言會使用兩個字符串變量存放這兩個值,然后得到他們對應的指針。于是,我們這個二維數組下標為5的這一行,第一個值為name的hash值,第二個值為name這個字符串所在的內存的地址(指針就是內存地址),第三個值為kingname這個字符串所在的內存的地址。

現在,我們再來插入兩個鍵值對:

            
my_dict['age'] = 26
my_dict['salary'] = 999999

'''
此時的內存示意圖
[[-4234469173262486640, 指向salary的指針, 指向999999的指針],
[1545085610920597121, 執行age的指針, 指向26的指針],
[---, ---, ---],
[---, ---, ---],
[---, ---, ---],
[1278649844881305901, 指向name的指針, 指向kingname的指針],
[---, ---, ---],
[---, ---, ---]]
'''
          

那么字典怎么讀取數據呢?首先假設我們要讀取age對應的值。

此時,Python先計算在當前運行時下面,age對應的Hash值是多少:

            
>>> hash('age')
1545085610920597121
          

余數為1,那么二維數組里面,下標為1的這一行就是需要的鍵值對。直接返回這一行第三個指針對應的內存中的值,就是age對應的值26。

當你要循環遍歷字典的Key的時候,Python底層會遍歷這個二維數組,如果當前行有數據,那么就返回Key指針對應的內存里面的值。如果當前行沒有數據,那么就跳過。所以總是會遍歷整個二位數組的每一行。

每一行有三列,每一列占用8byte的內存空間,所以每一行會占用24byte的內存空間。

由于Hash值取余數以后,余數可大可小,所以字典的Key并不是按照插入的順序存放的。

注意,這里我省略了與本文沒有太大關系的兩個點:

  1. 開放尋址,當兩個不同的Key,經過Hash以后,再對8取余數,可能余數會相同。此時Python為了不覆蓋之前已有的值,就會使用開放尋址技術重新尋找一個新的位置存放這個新的鍵值對。
  2. 當字典的鍵值對數量超過當前數組長度的2/3時,數組會進行擴容,8行變成16行,16行變成32行。長度變了以后,原來的余數位置也會發生變化,此時就需要移動原來位置的數據,導致插入效率變低。

在Python 3.6以后,字典的底層數據結構發生了變化,現在當你初始化一個空的字典以后,它在底層是這樣的:

            
my_dict = {}

'''
此時的內存示意圖
indices = [None, None, None, None, None, None, None, None]

entries = []
'''
          

當你初始化一個字典以后,Python單獨生成了一個長度為8的一維數組。然后又生成了一個空的二維數組。

現在,我們往字典里面添加一個鍵值對:

            
my_dict['name'] = 'kingname'

'''
此時的內存示意圖
indices = [None, 0, None, None, None, None, None, None]

entries = [[-5954193068542476671, 指向name的指針, 執行kingname的指針]]
'''
          

為什么內存會變成這個樣子呢?我們來一步一步地看:

在當前運行時,name這個字符串的hash值為-5954193068542476671,這個值對8取余數是1:

            
>>> hash('name')
-5954193068542476671
>>> hash('name') % 8
1
          

所以,我們把indices這個一維數組里面,下標為1的位置修改為0。

這里的0是什么意思呢?0是二位數組entries的索引。現在entries里面只有一行,就是我們剛剛添加的這個鍵值對的三個數據:name的hash值、指向name的指針和指向kinganme的指針。所以indices里面填寫的數字0,就是剛剛我們插入的這個鍵值對的數據在二位數組里面的行索引。

好,現在我們再來插入兩條數據:

            
my_dict['address'] = 'xxx'
my_dict['salary'] = 999999

'''
此時的內存示意圖
indices = [1, 0, None, None, None, None, 2, None]

entries = [[-5954193068542476671, 指向name的指針, 執行kingname的指針],
     [9043074951938101872, 指向address的指針,指向xxx的指針],
     [7324055671294268046, 指向salary的指針, 指向999999的指針]
     ]
'''
          

現在如果我要讀取數據怎么辦呢?假如我要讀取salary的值,那么首先計算salary的hash值,以及這個值對8的余數:

            
>>> hash('salary')
7324055671294268046
>>> hash('salary') % 8
6
          

那么我就去讀indices下標為6的這個值。這個值為2.

然后再去讀entries里面,下標為2的這一行的數據,也就是salary對應的數據了。

新的這種方式,當我要插入新的數據的時候,始終只是往entries的后面添加數據,這樣就能保證插入的順序。當我們要遍歷字典的Keys和Values的時候,直接遍歷entries即可,里面每一行都是有用的數據,不存在跳過的情況,減少了遍歷的個數。

老的方式,當二維數組有8行的時候,即使有效數據只有3行,但它占用的內存空間還是 8 * 24 = 192 byte。但使用新的方式,如果只有三行有效數據,那么entries也就只有3行,占用的空間為3 * 24 =72 byte,而indices由于只是一個一維的數組,只占用8 byte,所以一共占用 80 byte。內存占用只有原來的41%。

參考:[ Python-Dev] More compact dictionaries with faster iteration

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對腳本之家的支持。


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 国产精品一级 | 免费一级特黄欧美大片久久网 | 四虎4hu永久免费国产精品 | 亚洲精品视频在线观看免费 | 免费爱爱小视频 | 日本一区二区三区在线观看 | 日韩51| 中国特黄特级真人毛片 | 91精品福利视频 | 97视频| 久久国产综合尤物免费观看 | 美女日日日 | 亚洲精品综合久久中文字幕 | 成人a毛片久久免费播放 | 老子影院午夜伦不卡手机 | 天天色天天射天天操 | 国产精品伦理一区二区三区 | 四虎影院紧急入口 | 成人黄色毛片 | 99视频免费播放 | 成年午夜性视频免费播放 | 在线播放精品视频 | 中中文字幕亚州无线码 | 尤物91| 狠狠操天天操 | 久久精品综合视频 | 亚洲精品一区二区乱码在线观看 | 色婷婷综合久久久久中文一区二区 | 亚洲国产精品高清在线一区 | 九九看片 | 中文字幕专区 | 国产在线精品网址你懂的 | 国内精品福利在线视频 | 韩日一区二区三区 | 国产精品视频专区 | 在线看片亚洲 | 天天躁狠狠躁夜躁2021 | 亚洲视频综合 | 台湾亚洲精品一区二区tv | 日本波多野结衣在线 | 久久精品视频在线播放 |