青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

那誰(shuí)的技術(shù)博客

感興趣領(lǐng)域:高性能服務(wù)器編程,存儲(chǔ),算法,Linux內(nèi)核
隨筆 - 210, 文章 - 0, 評(píng)論 - 1183, 引用 - 0
數(shù)據(jù)加載中……

tokyocabinet1.4.19閱讀筆記(五)hash數(shù)據(jù)庫(kù)插入數(shù)據(jù)流程

有了前面的基礎(chǔ),本節(jié)講解插入數(shù)據(jù)的流程.

插入數(shù)據(jù)的實(shí)現(xiàn)代碼,在函數(shù)tchdbputimpl中,首先這個(gè)函數(shù)會(huì)查找要插入記錄的key是否已經(jīng)存在,如果存在了,有很多case需要處理,在這里就不一一關(guān)注了,僅關(guān)注缺省的行為:如果key已經(jīng)存在,那么覆蓋原來(lái)的記錄.否則,就插入新的記錄.

所以,這里僅關(guān)注最簡(jiǎn)單的兩種情況:如果存在就覆蓋,如果不存在則插入新的記錄.

1) 覆蓋原記錄
這里又區(qū)分兩種情況:
a) 原有記錄的尺寸不夠插入新的記錄,比如原有的記錄是10個(gè)字節(jié),但是新的記錄需要20字節(jié).這時(shí)候,首先會(huì)去調(diào)用上一節(jié)提到的tchdbfbpsplice 函數(shù)去嘗試著合并該記錄鄰近的空閑記錄形成一個(gè)更大尺寸的記錄塊,上一節(jié)中沒(méi)有仔細(xì)說(shuō)明這個(gè)函數(shù).tchdbfbpsplice 的偽碼大致如下:
當(dāng)還有空閑塊可以合并
       繼續(xù)合并空閑塊
如果合并之后的尺寸仍然不能滿足要求,返回false
如果合并之后的尺寸大于所要求尺寸的兩倍
       將多余的部分寫(xiě)入合適的freepool中
返回true,表示找到合適的塊
所以,假如合并成功有足夠的尺寸,那么就直接將新的記錄寫(xiě)入就好了.
否則,如果不能夠滿足又合并不到更大的塊,則會(huì)將原先的記錄塊首先寫(xiě)入到freepool中(tchdbwritefb函數(shù) ),接著直接在當(dāng)前的freepool中查找合適的塊(tchdbfbpsearch函數(shù)),如果找到合適的塊,那么也寫(xiě)入新的記錄即可.否則,上面的合并和查找空閑塊的操作都失敗了,則需要增加數(shù)據(jù)庫(kù)文件的尺寸插入新的記錄了.

b) 原有記錄足夠插入新的記錄
這種情況下,還要判斷舊的尺寸對(duì)于新的記錄是不是過(guò)大了,過(guò)大的話也需要調(diào)整.

2) 新增新的記錄
這種情況的處理很簡(jiǎn)單了,可以看作是上面的情況a)的一種情況,即接著直接在當(dāng)前的freepool中查找合適的塊(tchdbfbpsearch函數(shù)),如果找到合適的塊,那么也寫(xiě)入新的記錄即可.否則,則需要增加數(shù)據(jù)庫(kù)文件的尺寸插入新的記錄了.

注意,在上面的查找freepool過(guò)程中,如果失敗的話,將增加一個(gè)計(jì)數(shù),當(dāng)這個(gè)計(jì)數(shù)大于一個(gè)值時(shí),將對(duì)整個(gè)freepool做一個(gè)調(diào)整,調(diào)整算法前一節(jié)已經(jīng)提及.

以上,就是插入新紀(jì)錄的兩種最簡(jiǎn)單情況的流程,如果對(duì)之前的freepool管理很清楚的話,理解起來(lái)不是難事,因?yàn)椴迦胄碌挠涗浿饕€是考慮如何回收利用原有的空閑塊罷了.




posted on 2010-01-25 23:21 那誰(shuí) 閱讀(7022) 評(píng)論(4)  編輯 收藏 引用 所屬分類: tokyo cabinet

評(píng)論

# re: tokyocabinet1.4.19閱讀筆記(五)hash數(shù)據(jù)庫(kù)插入數(shù)據(jù)流程  回復(fù)  更多評(píng)論   

·空閑塊池默認(rèn)1024個(gè),超過(guò)1024怎么辦?
·空閑塊池中的按位置排序和按大小排序的實(shí)現(xiàn)和目的是什么?
我讀源碼的時(shí)候這部分還沒(méi)搞懂,有什么心得可以交流下!
:-)
2010-01-27 12:58 | 阿福

# re: tokyocabinet1.4.19閱讀筆記(五)hash數(shù)據(jù)庫(kù)插入數(shù)據(jù)流程  回復(fù)  更多評(píng)論   

@阿福
當(dāng)當(dāng)前freepool超過(guò)一定數(shù)量時(shí),會(huì)進(jìn)行merge操作進(jìn)行整理。

按位置排序是為了merge合并方便。
按尺寸排序是為了根據(jù)所要求的尺寸進(jìn)行二分查找方便。
這兩點(diǎn)前面一節(jié)都有提到。

2010-01-29 12:21 | 那誰(shuí)

# re: tokyocabinet1.4.19閱讀筆記(五)hash數(shù)據(jù)庫(kù)插入數(shù)據(jù)流程  回復(fù)  更多評(píng)論   

感覺(jué)對(duì)freepool這塊的設(shè)計(jì)并不是很好,首先它是定量的,這樣很容易出現(xiàn)超過(guò)且又無(wú)法合并的情況。不過(guò)它這樣設(shè)計(jì)確保查找 free 塊的速度。

此外不知tc在設(shè)計(jì)時(shí)是否采用了“對(duì)齊”或 block 的作法,這樣對(duì)于長(zhǎng)短相差不多的存取有點(diǎn)優(yōu)勢(shì),雖然浪費(fèi)了點(diǎn)空間。


2010-02-01 23:36 | hightman

# re: tokyocabinet1.4.19閱讀筆記(五)hash數(shù)據(jù)庫(kù)插入數(shù)據(jù)流程  回復(fù)  更多評(píng)論   

tchdbputimpl函數(shù)里面
rec.rsiz = hdb->ba64 ? sizeof(uint8_t) * 2 + sizeof(uint64_t) * 2 + sizeof(uint16_t) :
sizeof(uint8_t) * 2 + sizeof(uint32_t) * 2 + sizeof(uint16_t);
if(ksiz < (1U << 7)){
rec.rsiz += 1;
} else if(ksiz < (1U << 14)){
rec.rsiz += 2;
} else if(ksiz < (1U << 21)){
rec.rsiz += 3;
} else if(ksiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}
if(vsiz < (1U << 7)){
rec.rsiz += 1;
} else if(vsiz < (1U << 14)){
rec.rsiz += 2;
} else if(vsiz < (1U << 21)){
rec.rsiz += 3;
} else if(vsiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}
if(!tchdbfbpsearch(hdb, &rec)){
HDBUNLOCKDB(hdb);
return false;
}
rec.hash = hash;
rec.left = 0;
rec.right = 0;
rec.ksiz = ksiz;
rec.vsiz = vsiz;
rec.psiz = 0;
rec.kbuf = kbuf;
rec.vbuf = vbuf;
if(!tchdbwriterec(hdb, &rec, bidx, entoff)){
HDBUNLOCKDB(hdb);
return false;
}
這段程序進(jìn)行tchdbfbpsearch之前rec.rsiz應(yīng)該不是記錄的總長(zhǎng)度吧,還應(yīng)該要加上ksiz和vsiz吧,代碼改為
rec.rsiz = hdb->ba64 ? sizeof(uint8_t) * 2 + sizeof(uint64_t) * 2 + sizeof(uint16_t) :
sizeof(uint8_t) * 2 + sizeof(uint32_t) * 2 + sizeof(uint16_t);
if(ksiz < (1U << 7)){
rec.rsiz += 1;
} else if(ksiz < (1U << 14)){
rec.rsiz += 2;
} else if(ksiz < (1U << 21)){
rec.rsiz += 3;
} else if(ksiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}
if(vsiz < (1U << 7)){
rec.rsiz += 1;
} else if(vsiz < (1U << 14)){
rec.rsiz += 2;
} else if(vsiz < (1U << 21)){
rec.rsiz += 3;
} else if(vsiz < (1U << 28)){
rec.rsiz += 4;
} else {
rec.rsiz += 5;
}

//此處添加代碼
rec.rsiz += ksiz+vsiz

if(!tchdbfbpsearch(hdb, &rec)){
HDBUNLOCKDB(hdb);
return false;
}
rec.hash = hash;
rec.left = 0;
rec.right = 0;
rec.ksiz = ksiz;
rec.vsiz = vsiz;
rec.psiz = 0;
rec.kbuf = kbuf;
rec.vbuf = vbuf;
if(!tchdbwriterec(hdb, &rec, bidx, entoff)){
HDBUNLOCKDB(hdb);
return false;
}


還是我理解有誤啊,求指教
2015-01-15 21:14 | hm
青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            久久频这里精品99香蕉| 欧美日韩国内| 欧美国产先锋| 免费成人你懂的| 欧美一级播放| 久久九九精品| 欧美在线观看视频一区二区| 亚洲免费观看| 一区二区av在线| 亚洲性图久久| 午夜精品视频| 免费人成精品欧美精品| 欧美成人自拍视频| 亚洲欧洲三级| 一本一道久久综合狠狠老精东影业 | 怡红院精品视频| 亚洲综合精品自拍| 一区二区三区视频免费在线观看| 亚洲区中文字幕| 亚洲影音先锋| 欧美黄在线观看| 国产欧美精品日韩| 亚洲国产精品va在线看黑人动漫| 亚洲狼人精品一区二区三区| 一本色道88久久加勒比精品| 久久精品一区二区三区不卡| 欧美电影专区| 午夜欧美精品| 欧美视频官网| av不卡在线| 久久免费视频网| 亚洲午夜一级| 国产精品久久久久9999吃药| 亚洲精品国产精品国自产在线| 久久国产66| 亚洲免费视频成人| 国产精品成人国产乱一区| 亚洲美女av网站| 欧美成人中文字幕| 欧美v亚洲v综合ⅴ国产v| 黄色国产精品一区二区三区| 午夜老司机精品| 性欧美大战久久久久久久久| 国产精品久久久久一区二区三区共 | 一本色道久久综合精品竹菊| 免费观看欧美在线视频的网站| 欧美一区二区视频网站| 99人久久精品视频最新地址| 欧美成年人视频网站欧美| 在线看不卡av| 亚洲人成免费| 国产精品成人免费| 久久三级视频| 欧美精品一区二区三区在线播放 | 国产婷婷精品| 性欧美精品高清| 久久久久久久一区二区| 亚洲国产裸拍裸体视频在线观看乱了| 欧美激情亚洲精品| 国产精品久久99| 欧美激情第一页xxx| 国产精品男女猛烈高潮激情| 免费日韩视频| 国产一区二区三区视频在线观看| 免费观看成人www动漫视频| 欧美黄在线观看| 美女日韩欧美| 国模精品一区二区三区色天香| 9色精品在线| 亚洲欧洲免费视频| 久久精品免费| 久久精品在线视频| 国产色综合久久| 香蕉久久夜色精品| 久久九九国产精品| 欧美福利电影网| 国产亚洲精久久久久久| 一区二区欧美亚洲| 亚洲视频导航| 欧美日韩一区综合| 日韩视频精品在线| 中文网丁香综合网| 欧美国产日韩在线| 99re8这里有精品热视频免费 | 狠狠久久五月精品中文字幕| 亚洲激情午夜| 中文国产成人精品久久一| 欧美日韩中文字幕精品| 国产精品99久久久久久久久| 亚洲一区二区三区四区视频| 国产精自产拍久久久久久蜜| 午夜亚洲激情| 亚洲激情女人| 欧美影院久久久| 亚洲精品资源| 国产一区二区三区久久久| 久久影院午夜论| 亚洲另类视频| 狂野欧美一区| 这里只有精品丝袜| 亚洲国产黄色片| 国产视频一区免费看| 欧美a级大片| 久久动漫亚洲| 亚洲一区在线播放| 欧美激情小视频| 久久夜色精品国产| 亚洲欧美日韩天堂| 亚洲精品在线观看免费| 中文网丁香综合网| 免费一区视频| 久久久久一区二区| 欧美一级艳片视频免费观看| 99精品国产一区二区青青牛奶| 在线精品视频一区二区| 国产精品视频xxx| 美女任你摸久久| 久久精品日韩一区二区三区| 亚洲欧美激情诱惑| 亚洲在线播放电影| 亚洲一级二级| 久久av一区二区| 久久中文精品| 亚洲国产精品视频一区| 国产主播一区二区三区四区| 在线综合欧美| 欧美成人69av| 欧美韩日亚洲| 国产一区三区三区| 激情校园亚洲| 亚洲精品日韩在线观看| 亚洲麻豆av| 亚洲综合色激情五月| 欧美亚洲网站| 久色婷婷小香蕉久久| 狂野欧美激情性xxxx欧美| 免费在线日韩av| 亚洲视频一二| 欧美国产激情二区三区| 国产精品日韩一区二区三区| 亚洲福利国产| 欧美亚洲视频| 99视频精品| 欧美大色视频| 亚洲福利视频免费观看| 欧美一区激情| 夜夜爽www精品| 欧美久久综合| 日韩午夜三级在线| 国产一区二区三区在线观看精品| 免费观看一区| 国产精品久久久一区二区三区| 一区免费观看| 欧美粗暴jizz性欧美20| 久久久国产91| 国产欧美视频一区二区三区| 亚洲免费中文字幕| 国产精品99久久不卡二区| 欧美大香线蕉线伊人久久国产精品| 亚洲欧美日韩精品久久| 欧美片在线观看| 亚洲欧美综合v| 久久狠狠婷婷| 亚洲精品视频一区| 亚洲毛片在线免费观看| 国产精品久久久久一区二区三区共 | 亚洲在线电影| 韩国av一区| 亚洲香蕉伊综合在人在线视看| 国产精品日韩高清| 欧美激情精品久久久久久黑人| 欧美日韩亚洲一区三区| 久久午夜激情| 国产精品h在线观看| 欧美1区视频| 国产欧美日韩视频一区二区三区| 久热精品在线视频| 国产乱码精品1区2区3区| 亚洲欧洲日本一区二区三区| 国产精品日韩在线播放| 亚洲美女av网站| 亚洲区国产区| 免费日韩一区二区| 美国十次成人| 1024成人网色www| 久久久www| 蜜臀av国产精品久久久久| 国产精品综合久久久| 一区二区三区四区五区在线| 99视频一区二区| 欧美了一区在线观看| 91久久精品一区| 一本一道久久综合狠狠老精东影业| 久久噜噜噜精品国产亚洲综合 | 国产精品白丝jk黑袜喷水| 欧美国产日本在线| 亚洲欧洲一区二区在线播放 | 一本色道久久88综合日韩精品| 久久综合九色综合欧美就去吻| 久久成人精品|