青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

那誰的技術博客

感興趣領域:高性能服務器編程,存儲,算法,Linux內核
隨筆 - 210, 文章 - 0, 評論 - 1183, 引用 - 0
數據加載中……

tokyocabinet1.4.19閱讀筆記(五)hash數據庫插入數據流程

有了前面的基礎,本節講解插入數據的流程.

插入數據的實現代碼,在函數tchdbputimpl中,首先這個函數會查找要插入記錄的key是否已經存在,如果存在了,有很多case需要處理,在這里就不一一關注了,僅關注缺省的行為:如果key已經存在,那么覆蓋原來的記錄.否則,就插入新的記錄.

所以,這里僅關注最簡單的兩種情況:如果存在就覆蓋,如果不存在則插入新的記錄.

1) 覆蓋原記錄
這里又區分兩種情況:
a) 原有記錄的尺寸不夠插入新的記錄,比如原有的記錄是10個字節,但是新的記錄需要20字節.這時候,首先會去調用上一節提到的tchdbfbpsplice 函數去嘗試著合并該記錄鄰近的空閑記錄形成一個更大尺寸的記錄塊,上一節中沒有仔細說明這個函數.tchdbfbpsplice 的偽碼大致如下:
當還有空閑塊可以合并
       繼續合并空閑塊
如果合并之后的尺寸仍然不能滿足要求,返回false
如果合并之后的尺寸大于所要求尺寸的兩倍
       將多余的部分寫入合適的freepool中
返回true,表示找到合適的塊
所以,假如合并成功有足夠的尺寸,那么就直接將新的記錄寫入就好了.
否則,如果不能夠滿足又合并不到更大的塊,則會將原先的記錄塊首先寫入到freepool中(tchdbwritefb函數 ),接著直接在當前的freepool中查找合適的塊(tchdbfbpsearch函數),如果找到合適的塊,那么也寫入新的記錄即可.否則,上面的合并和查找空閑塊的操作都失敗了,則需要增加數據庫文件的尺寸插入新的記錄了.

b) 原有記錄足夠插入新的記錄
這種情況下,還要判斷舊的尺寸對于新的記錄是不是過大了,過大的話也需要調整.

2) 新增新的記錄
這種情況的處理很簡單了,可以看作是上面的情況a)的一種情況,即接著直接在當前的freepool中查找合適的塊(tchdbfbpsearch函數),如果找到合適的塊,那么也寫入新的記錄即可.否則,則需要增加數據庫文件的尺寸插入新的記錄了.

注意,在上面的查找freepool過程中,如果失敗的話,將增加一個計數,當這個計數大于一個值時,將對整個freepool做一個調整,調整算法前一節已經提及.

以上,就是插入新紀錄的兩種最簡單情況的流程,如果對之前的freepool管理很清楚的話,理解起來不是難事,因為插入新的記錄主要還是考慮如何回收利用原有的空閑塊罷了.




posted on 2010-01-25 23:21 那誰 閱讀(7022) 評論(4)  編輯 收藏 引用 所屬分類: tokyo cabinet

評論

# re: tokyocabinet1.4.19閱讀筆記(五)hash數據庫插入數據流程  回復  更多評論   

·空閑塊池默認1024個,超過1024怎么辦?
·空閑塊池中的按位置排序和按大小排序的實現和目的是什么?
我讀源碼的時候這部分還沒搞懂,有什么心得可以交流下!
:-)
2010-01-27 12:58 | 阿福

# re: tokyocabinet1.4.19閱讀筆記(五)hash數據庫插入數據流程  回復  更多評論   

@阿福
當當前freepool超過一定數量時,會進行merge操作進行整理。

按位置排序是為了merge合并方便。
按尺寸排序是為了根據所要求的尺寸進行二分查找方便。
這兩點前面一節都有提到。

2010-01-29 12:21 | 那誰

# re: tokyocabinet1.4.19閱讀筆記(五)hash數據庫插入數據流程  回復  更多評論   

感覺對freepool這塊的設計并不是很好,首先它是定量的,這樣很容易出現超過且又無法合并的情況。不過它這樣設計確保查找 free 塊的速度。

此外不知tc在設計時是否采用了“對齊”或 block 的作法,這樣對于長短相差不多的存取有點優勢,雖然浪費了點空間。


2010-02-01 23:36 | hightman

# re: tokyocabinet1.4.19閱讀筆記(五)hash數據庫插入數據流程  回復  更多評論   

tchdbputimpl函數里面
rec.rsiz = hdb->ba64 ? sizeof(uint8_t) * 2 + sizeof(uint64_t) * 2 + sizeof(uint16_t) :
sizeof(uint8_t) * 2 + sizeof(uint32_t) * 2 + sizeof(uint16_t);
if(ksiz < (1U << 7)){
rec.rsiz += 1;
} else if(ksiz < (1U << 14)){
rec.rsiz += 2;
} else if(ksiz < (1U << 21)){
rec.rsiz += 3;
} else if(ksiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}
if(vsiz < (1U << 7)){
rec.rsiz += 1;
} else if(vsiz < (1U << 14)){
rec.rsiz += 2;
} else if(vsiz < (1U << 21)){
rec.rsiz += 3;
} else if(vsiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}
if(!tchdbfbpsearch(hdb, &rec)){
HDBUNLOCKDB(hdb);
return false;
}
rec.hash = hash;
rec.left = 0;
rec.right = 0;
rec.ksiz = ksiz;
rec.vsiz = vsiz;
rec.psiz = 0;
rec.kbuf = kbuf;
rec.vbuf = vbuf;
if(!tchdbwriterec(hdb, &rec, bidx, entoff)){
HDBUNLOCKDB(hdb);
return false;
}
這段程序進行tchdbfbpsearch之前rec.rsiz應該不是記錄的總長度吧,還應該要加上ksiz和vsiz吧,代碼改為
rec.rsiz = hdb->ba64 ? sizeof(uint8_t) * 2 + sizeof(uint64_t) * 2 + sizeof(uint16_t) :
sizeof(uint8_t) * 2 + sizeof(uint32_t) * 2 + sizeof(uint16_t);
if(ksiz < (1U << 7)){
rec.rsiz += 1;
} else if(ksiz < (1U << 14)){
rec.rsiz += 2;
} else if(ksiz < (1U << 21)){
rec.rsiz += 3;
} else if(ksiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}
if(vsiz < (1U << 7)){
rec.rsiz += 1;
} else if(vsiz < (1U << 14)){
rec.rsiz += 2;
} else if(vsiz < (1U << 21)){
rec.rsiz += 3;
} else if(vsiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}

//此處添加代碼
rec.rsiz += ksiz+vsiz

if(!tchdbfbpsearch(hdb, &rec)){
HDBUNLOCKDB(hdb);
return false;
}
rec.hash = hash;
rec.left = 0;
rec.right = 0;
rec.ksiz = ksiz;
rec.vsiz = vsiz;
rec.psiz = 0;
rec.kbuf = kbuf;
rec.vbuf = vbuf;
if(!tchdbwriterec(hdb, &rec, bidx, entoff)){
HDBUNLOCKDB(hdb);
return false;
}


還是我理解有誤啊,求指教
2015-01-15 21:14 | hm
青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            欧美大片一区| 国产精品乱码一区二区三区| 亚洲精品欧洲精品| 亚洲欧洲精品一区二区| 免费亚洲电影在线观看| 欧美超级免费视 在线| 欧美高清视频一区| 亚洲精品久久久久久久久久久久久| 亚洲电影有码| 一区二区欧美视频| 先锋影音一区二区三区| 久久久久久国产精品一区| 欧美激情精品| 国产美女精品| 亚洲日本视频| 午夜影院日韩| 美女图片一区二区| 亚洲美女免费视频| 欧美自拍丝袜亚洲| 欧美激情国产精品| 国产午夜久久| 一本大道久久a久久综合婷婷| 久久se精品一区二区| 亚洲第一综合天堂另类专| 欧美黄色成人网| 99在线观看免费视频精品观看| 中日韩美女免费视频网址在线观看| 欧美一级夜夜爽| 欧美激情亚洲视频| 精品999日本| 午夜精品在线观看| 亚洲精品九九| 欧美成人福利视频| 在线观看三级视频欧美| 午夜日韩福利| 99热精品在线| 欧美精品尤物在线| 亚洲国产精品一区二区www| 午夜精品www| 亚洲裸体视频| 欧美国产视频在线| 亚洲欧洲日韩在线| 免费成人高清视频| 久久精品99久久香蕉国产色戒| 国产精品理论片| 亚洲一区国产视频| 亚洲精品一区二区三区蜜桃久 | 国产日韩在线亚洲字幕中文| 亚洲伦伦在线| 欧美激情精品久久久久久大尺度| 欧美在线欧美在线| 国产视频久久| 久久精品国产精品亚洲| 99视频精品在线| 欧美日本一区二区高清播放视频| 亚洲看片网站| 91久久精品一区| 欧美激情一区二区三区全黄| 亚洲国产成人午夜在线一区| 久久欧美肥婆一二区| 久久国产日韩欧美| 激情一区二区三区| 久久综合给合| 老司机精品福利视频| 亚洲国产网站| 亚洲电影天堂av| 欧美国产精品久久| 亚洲一区二区三区在线观看视频| 99精品国产一区二区青青牛奶| 欧美日韩人人澡狠狠躁视频| 亚洲一区二区免费看| 亚洲一区二区三区在线视频| 国产精品一区二区三区乱码| 久久av最新网址| 亚洲免费视频网站| 国产视频一区在线观看一区免费| 午夜久久一区| 久久久综合网| 亚洲免费av片| 一区二区三区视频在线播放| 国产精品综合不卡av| 裸体歌舞表演一区二区| 久热国产精品视频| 欧美大片在线观看一区二区| 欧美激情第10页| 亚洲欧美日韩国产中文| 性欧美video另类hd性玩具| 精品动漫3d一区二区三区免费版| 亚洲国产美女| 国产精品亚洲美女av网站| 米奇777超碰欧美日韩亚洲| 欧美日韩另类一区| 久久综合久久久| 欧美日韩网址| 狂野欧美一区| 欧美日韩中文字幕在线视频| 久久福利毛片| 欧美激情一区二区三区在线| 午夜综合激情| 欧美丰满高潮xxxx喷水动漫| 欧美一区二区免费| 欧美国产日本高清在线| 久久精品女人的天堂av| 欧美精品久久久久a| 久久久亚洲国产天美传媒修理工| 欧美高清视频在线播放| 午夜精品久久久久久久久| 久久久久9999亚洲精品| 亚洲天堂激情| 欧美国产日韩二区| 久久亚洲风情| 国产欧美日本一区视频| 日韩亚洲精品视频| 亚洲精品久久久久久久久久久| 亚洲在线电影| 99re热精品| 老司机久久99久久精品播放免费| 欧美在线一级视频| 国产精品久久一级| 一区二区欧美亚洲| 在线视频精品一区| 欧美大片在线看免费观看| 久久这里只有| 狠狠色狠色综合曰曰| 欧美一区三区三区高中清蜜桃| 亚洲综合好骚| 欧美性大战久久久久久久| 日韩香蕉视频| 亚洲欧美欧美一区二区三区| 欧美午夜剧场| 亚洲午夜免费福利视频| 亚洲综合电影一区二区三区| 欧美日韩人人澡狠狠躁视频| 亚洲理论在线| 亚洲视频网站在线观看| 欧美欧美午夜aⅴ在线观看| 亚洲欧洲精品一区二区| 夜夜夜精品看看| 国产精品久久久久久户外露出 | 亚洲欧美日韩国产一区二区三区| 亚洲午夜国产成人av电影男同| 欧美日韩成人综合| 日韩亚洲欧美一区| 亚洲视屏在线播放| 国产精品草草| 亚洲欧美综合v| 猫咪成人在线观看| 亚洲精品久久久久中文字幕欢迎你 | 亚洲高清成人| 模特精品裸拍一区| 亚洲精品午夜| 亚洲一区综合| 国产亚洲人成网站在线观看| 久久精品国产第一区二区三区最新章节| 久久色中文字幕| 亚洲国产裸拍裸体视频在线观看乱了中文 | 亚洲精品你懂的| 亚洲精品中文字幕女同| 欧美日韩国产一区二区三区地区 | 欧美国产乱视频| 一区二区精品在线观看| 久久国产精品久久久久久| 一区二区在线观看av| 欧美精品三级| 亚洲在线视频一区| 蜜臀a∨国产成人精品| 日韩午夜av电影| 国产毛片精品视频| 免费在线看一区| 一区二区三区视频在线播放| 久久这里有精品15一区二区三区| 日韩视频在线观看| 国产亚洲一区二区三区| 欧美v日韩v国产v| 亚洲免费影院| 亚洲人体大胆视频| 久久亚洲国产精品一区二区| 亚洲午夜一区二区| 亚洲福利视频网| 国产麻豆成人精品| 欧美日本高清一区| 久久嫩草精品久久久久| 亚洲神马久久| 亚洲韩国日本中文字幕| 久久久久久高潮国产精品视| 一本久道久久久| 1024亚洲| 国产一区二区欧美| 欧美三级午夜理伦三级中文幕 | 正在播放亚洲一区| 欧美激情一区二区三区成人| 香蕉免费一区二区三区在线观看 | 亚洲少妇在线| 91久久一区二区| 国产一区二区三区在线播放免费观看 | 一区二区三区我不卡| 久久亚洲国产精品一区二区| 亚洲午夜黄色| 亚洲精品欧洲精品| 你懂的视频欧美|