青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

posts - 15, comments - 10, trackbacks - 0, articles - 0

KFS代碼分析1(meta內存結構)

Posted on 2013-10-23 01:36 whspecial 閱讀(1262) 評論(0)  編輯 收藏 引用 所屬分類: KFS分析

此處的KFS是指Kosmos distributed file system,代碼位于http://sourceforge.net/projects/kosmosfs/,之后會寫幾篇相關的文章,以供后來者參考。

KFS里Meta的內存結構主要是一棵B+樹,保存在內存里,具體分析如下:

B-樹,B+樹的定義

關于這些樹的定義,最好還是參考算法導論等經典書,網路上的信息有些不是很準確,為了方便大家還是貼一個鏈接:

http://www.cnblogs.com/oldhorse/archive/2009/11/16/1604009.html

KFS為何選用B+樹而非B樹?

這是我個人的理解:

雖然B樹可以在非葉子節點命中,會縮短一些平均查找長度,但是B+樹在這種應用一個優勢就是每個節點都有指向next節點的指針,對于范圍查詢或者遍歷操作很適合。對于文件系統的一個ls某個子目錄的需求,用B+樹可以較高效的解決。

KFSB+樹的類圖


MetaNode
base class for both internal and leaf nodes

Metabase class for data objects (leaf nodes)

Nodean internal node in the KFS search tree

MetaChunkInfochunk information for a given file offset

MetaDentry Directory entry, mapping a file name to a file id

MetaFattrFile or directory attributes

各節點的介紹

1Meta類是子節點的父類,其最主要的成員變量是fid

有三個葉子節點:MetaChunkInfoMetaDentryMetaFattr

2MetaDentry實現從文件名到fid的映射,對于每個文件(目錄)都擁有1MetaDentry

成員變量包括:

dir:文件父目錄的fid

namedentry的名稱,實際就是文件名

3MetaFattr實現從fid到文件屬性的映射,對于每個文件(目錄)都擁有一個MetaFattr

成員變量包括:

Type:文件還是目錄

numReplicas:文件有幾份副本

mtime:修改時間

ctime:屬性修改時間

crtime:文件創建時間

chunkcount:連續的chunk數目

filesize:文件大小

nextChunkOffset:最后一個chunk在文件的所處的offset

mode_t mode:文件屬性(rwx位)

key:由KFS_FATTRfid來構成,可以通過fid直接找到保存文件屬性的節點。

4MetaChunkInfo標志某個文件對應的chunk信息,如果一個文件包含多個chunk,那么需要有多個MetaChunkInfo

成員變量包括:

offsetchunk在文件中的偏移量,因為一個文件可能由多個chunk組成

chunkIdchunkid

chunkVersionchunkversion

5Node實現的是B+樹的內部節點,這種節點僅僅作為索引用途,存儲實際元數據信息的節點位于最底部的葉子節點。

成員變量包括:

NKEY = 32:每個節點最多擁有的關鍵字數目,實際上也就是最多擁有的子節點數目,如果多余這個值節點進行分裂

NSPLIT = NKEY / 2:分裂之后每個節點的關鍵字數目

NFEWEST = NKEY - NSPLIT:每個節點最少擁有的關鍵字數目,如果少于這個值兩個節點進行合并

count:節點實際擁有的關鍵字數目

Key childKey[NKEY]:節點存儲的關鍵字列表

MetaNode *childNode[NKEY]:節點指向子節點的指針列表

Node *next:指向下一個同級節點的指針

實際上每個內部節點的階數為32,可以有32個子節點,而每個葉子節點只保存一個key值。

三類子節點在B+樹中如何分布?

可以想象,必定是將同一類的節點聚集在一起。因此對于排序函數就是先比較節點類型,然后再對節點內部的成員變量進行比較。MetaDentry是根據dir(父目錄的id),MetaFattr是根據fidMetaChunkInfo是根據idchunkId來排序。

一個不太相關的思考

看上面的三類子節點,我們可以發現chunk的位置信息并沒有保存在B+樹里,它是單獨保存在一個Map數據結構里的,也不會在meta server里進行持久化,而是每次chunk啟動時向meta server來報告。之所以不做持久化,可以這樣來理解:

只有Chunk服務器才能最終確定一個Chunk是否在它的硬盤上。Chunk服務器的錯誤可能會導致Chunk自動消失(比如,硬盤損壞了或者無法訪問了),亦或者操作人員可能會重命名一個Chunk服務器,還是由chunk server來報告比較靠譜。

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            亚洲人成高清| 红桃视频成人| 99国产精品一区| 欧美成人一区二免费视频软件| 亚洲日本中文字幕| 国外成人网址| 亚洲尤物在线| 欧美日韩在线精品一区二区三区| 在线一区二区三区四区| 欧美激情亚洲另类| 欧美日韩免费区域视频在线观看| 欧美成人国产一区二区| 欧美激情偷拍| 欧美 日韩 国产在线 | 99精品福利视频| 日韩视频免费观看高清在线视频| 亚洲精品乱码久久久久久蜜桃91| 99精品欧美一区二区三区综合在线 | 国产亚洲综合性久久久影院| 在线看欧美日韩| 久久精品国产99| 国产精品久久久久久影视| 男男成人高潮片免费网站| 美女视频黄 久久| 亚洲视频精品| 欧美日韩一区二区三区免费| 午夜免费久久久久| 亚洲片在线资源| 91久久精品国产| 欧美色欧美亚洲另类二区| 夜夜嗨av一区二区三区| 蜜桃av综合| 欧美激情女人20p| 午夜精品www| 欧美日韩精品在线观看| 欧美精品免费在线| 久久综合九色| 亚洲国产精品一区二区尤物区| 欧美久久影院| 欧美激情精品久久久久久黑人| 久久精品在这里| 久久女同精品一区二区| 免费成年人欧美视频| 免费一区视频| 欧美日本不卡视频| 国产午夜精品理论片a级大结局 | 精品成人在线视频| 亚洲天堂网在线观看| 欧美xx视频| 亚洲影院在线观看| 欧美日韩在线一区二区三区| 亚洲精品日韩久久| 欧美激情在线观看| 久久久亚洲影院你懂的| 在线观看av一区| 亚洲人成网站777色婷婷| 免费看成人av| 亚洲深夜激情| 久久蜜桃精品| 亚洲一区二区精品| 另类尿喷潮videofree| 欧美韩日一区| 久久免费国产精品1| 欧美无乱码久久久免费午夜一区 | 亚洲午夜黄色| 久久亚洲国产成人| 亚洲欧美国产精品桃花| 欧美精品一区二区三区蜜臀| 午夜亚洲福利| 亚洲国产99| 久久精品72免费观看| 怡红院av一区二区三区| 在线免费精品视频| 久久一区免费| 欧美成人tv| 亚洲麻豆av| 亚洲人成在线观看一区二区| 亚洲欧美另类在线观看| 国产精品免费一区豆花| 欧美一区日韩一区| 久久久久国产精品一区三寸 | 免费观看日韩av| 国内久久婷婷综合| 香蕉久久a毛片| 久久激情五月丁香伊人| 国产一区二区黄色| 久久激情综合网| 亚洲女人天堂成人av在线| 欧美一区二区三区播放老司机| 国产精品一区二区a| 久久久精品tv| 国产毛片精品国产一区二区三区| 欧美一区二区高清在线观看| 另类天堂av| 亚洲免费精品| 亚洲一区二区黄| 激情视频一区| 亚洲欧美一区二区三区在线| 中文国产一区| 亚洲小视频在线观看| 亚洲精品综合久久中文字幕| 国产在线精品成人一区二区三区| 欧美日韩蜜桃| 欧美成人嫩草网站| 国产精品羞羞答答xxdd| 欧美二区不卡| 国产欧美日韩视频在线观看| 欧美xart系列在线观看| 国产免费成人在线视频| 久久不射2019中文字幕| 国产一区日韩一区| 欧美成人69av| 在线看成人片| 亚洲尤物视频在线| 亚洲午夜精品17c| 欧美精品xxxxbbbb| 一区二区高清在线| 亚洲一区免费| 激情欧美丁香| 欧美精品日韩精品| 一区二区欧美日韩| 亚洲一区二区毛片| 亚洲欧美视频在线| 国产午夜精品一区二区三区视频 | 久久精品一区蜜桃臀影院| 中日韩美女免费视频网址在线观看| 亚洲国产成人精品视频| 欧美福利专区| 亚洲人被黑人高潮完整版| 亚洲精品四区| 狂野欧美激情性xxxx| 久久久水蜜桃| 国产精品美女诱惑| 99精品久久免费看蜜臀剧情介绍| 欧美在线视频二区| 99re热这里只有精品免费视频| 在线观看91久久久久久| 在线精品视频一区二区| 99精品视频免费全部在线| 亚洲黄一区二区| 亚洲欧美一区二区三区在线| 久久爱www久久做| 欧美成人精品一区| 欧美色欧美亚洲另类七区| 久久综合图片| 亚洲精品免费观看| 亚洲精选成人| 久久成人这里只有精品| 亚洲精品精选| 亚洲精选久久| 亚洲狼人精品一区二区三区| 欧美亚洲成人免费| 蜜臀av在线播放一区二区三区| 欧美xxxx在线观看| 欧美大片18| 欧美成人免费观看| 欧美国产高清| 欧美成人精品激情在线观看| 欧美激情第8页| 欧美精品在线观看播放| 欧美激情一区二区三区蜜桃视频 | 亚洲图片自拍偷拍| 一级日韩一区在线观看| 午夜精品福利视频| 免费成人性网站| 欧美视频手机在线| 国产主播一区二区| 亚洲一区视频在线| 午夜日韩在线| 国产精品久久久久久久浪潮网站| 亚洲福利一区| 久久久久国内| 久久不射中文字幕| 久久精品99国产精品日本| 久久久999精品免费| 久久蜜桃av一区精品变态类天堂| 欧美一区影院| 欧美顶级大胆免费视频| 99视频一区二区| 午夜天堂精品久久久久| 亚洲精品视频免费在线观看| 亚洲茄子视频| 最新日韩在线| 亚洲精品在线免费| 国产精品乱码一区二区三区| 亚洲小说欧美另类社区| 久久亚洲一区二区| 亚洲国产精品久久91精品| 欧美在线视频网站| 欧美黄色片免费观看| 国产综合欧美| 欧美视频在线观看免费| 亚洲男同1069视频| 亚洲国产经典视频| 新67194成人永久网站| 亚洲日韩欧美视频| 国产精品亚洲综合久久| 欧美成人在线影院| 亚洲一区中文字幕在线观看| 亚洲激情黄色|