亚洲免费在线-亚洲免费在线播放-亚洲免费在线观看-亚洲免费在线观看视频-亚洲免费在线看-亚洲免费在线视频

MongoDB數據文件內部結構

系統 1875 0

MongoDB數據文件內部結構

有人在Quora上提問: MongoDB 數據文件 內部的組織 結構 是什么樣的。隨后10gen的工程師 Jared Rosoff 出來做了簡短的回答。

每一個數據庫都有自己獨立的文件。如果你開啟了directoryperdb選項,那你每個庫的文件會單獨放在一個文件夾里。

數據庫文件在內部會被切分成單個的塊,每個塊只保存一個名字空間的數據。在MongoDB中,名字空間用于區分不同的存儲類別。比如每個collection有一個獨立的名字空間,每個索引也有自己的名字空間。

在一個塊中,會保存多條記錄,每條記錄是BSON格式的,記錄與記錄之間通過雙向鏈表進行連接。

索引數據也存在數據文件中,不過索引是被組織成B Tree結構,而不是雙向鏈表。

對每個數據庫,有一個命名空間文件,用于保存每個名字空間對應的元數據。我們通過查詢這些元數據來找到對應的名字空間的存儲塊位置。

如果你開啟了jorunaling日志,那么還會有一些文件存儲著你所有的操作記錄。

下面圖片摘自10gen工程師Mathias Stearn在MongoSV2011大會上的發言稿,手繪的數據文件結構。

1.每個數據庫有相應的數據文件和命名空間文件

preview_slide_1

2.數據文件從16MB開始,新的數據文件比上一個文件大一倍,最大為2GB

preview_slide_2

3.文件使用MMAP進行內存映射,會將所有數據文件映射到內存中,但是只是虛擬內存,只有訪問到這塊數據時才會交換到物理內存。

preview_slide_4

preview_slide_3

4.MongoDB的數據文件映射到內存表中的位置

preview_slide_5

preview_slide_7

5.使用32位機器的話,內存地址最大可以標識4GB內存

preview_slide_8

preview_slide_6

6.但是在32位機器上,4GB內存會有1GB被內核戰用,大約0.5GB會用于mongod進程的stack空間,只剩下大約2.5GB可用于映射數據文件。

preview_slide_9

preview_slide_10

preview_slide_11

7.在64位機器上則最多可以表示128TB的空間

preview_slide_12

preview_slide_13

preview_slide_14

8.每個數據文件會被分成一個一個的數據塊,塊與塊之間用雙向鏈表連接

preview_slide_16

preview_slide_15

9.在名字空間文件中,保存的是一個hash table,保存了每個名字空間的存儲信息元數據,包括其大小,塊數,第一塊位置,最后一塊位置,被刪除的塊的鏈表以及索引信息

preview_slide_17

preview_slide_18

10.這些位置通過DiskLoc數據結構進行存儲,存儲了數據文件編號和塊在文件中的位置

preview_slide_20

preview_slide_19

preview_slide_22

preview_slide_21

11.對每一個塊來說,其頭部包含了一些塊的元數據,比如自己的位置,上一個和下一個塊的位置以及塊中第一條和最后一條記錄的位置指針。剩下的部分用于存儲具體的數據,具體數據之間也是通過雙向鏈接來進行連接。

preview_slide_23

preview_slide_24

preview_slide_25

12.下面是B Tree的存儲結構和工作原理

preview_slide_26

preview_slide_27

preview_slide_28

preview_slide_30

preview_slide_29

preview_slide_31

preview_slide_32

preview_slide_33

preview_slide_34

anyShare 贈人玫瑰,手有余香,分享知識,德藝雙馨!

MongoDB數據文件內部結構


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 视频一区亚洲 | 中中文字幕亚州无线码 | 成人激情在线视频 | 狠狠色伊人亚洲综合成人 | 久草综合在线视频 | 91成年人视频 | 2020国产成人精品免费视频 | 五月婷婷丁香在线视频 | 男人天堂一区 | 日韩三级久久 | 久久成人乱小说 | 亚洲精品777 | 欧美人猛交日本人xxx | 毛片一级视频 | 日韩中文一区 | 在线观看免费视频a | 久久婷婷一区二区三区 | 日本一本不卡 | 九九热精品国产 | 717影院理论午夜伦八戒 | 色婷婷色综合缴情在线 | 久久99精品久久久久久园产越南 | 久久精品国产99精品最新 | 亚洲国产另类久久久精品小说 | 青青操在线观看 | 欧美a视频在线观看 | 天天操夜夜操夜夜操 | 久久国产一区二区三区 | 日本高清中文字幕一区二区三区 | 国产成 人 综合 亚洲网 | 欧美国产日韩在线 | 国产成人精品综合 | 国产亚洲欧美日韩综合另类 | 久久精品首页 | 91热精品 | 国产精品日本一区二区在线看 | 一个色的综合 | 波多野结衣一区二区三区高清在线 | 中国性猛交xxxxx免费看 | 免费中日高清无专码有限公司 | 久久久亚洲欧洲日产国码二区 |