青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

loop_in_codes

低調做技術__歡迎移步我的獨立博客 codemaro.com 微博 kevinlynx

libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)

Author : Kevin Lynx

前言

    可以說對于任何網絡庫(模塊)而言,一個緩沖模塊都是必不可少的。緩沖模塊主要用于緩沖從網絡接收到的數據,以及
用戶提交的數據(用于發送)。很多時候,我們還需要將網絡模塊層(非TCP層)的這些緩沖數據拷貝到用戶層,而這些內存拷貝
都會消耗時間。
    在這里,我簡要分析下libevent的相關代碼(event.h和buffer.c)。

結構

    關于libevent的緩沖模塊,主要就是圍繞evbuffer結構體展開。先看下evbuffer的定義:

/*event.h*/
struct evbuffer {
    u_char 
*buffer;
    u_char 
*orig_buffer; 

    size_t misalign;
    size_t totallen;
    size_t off; 

    
void (*cb)(struct evbuffer *, size_t, size_t, void *);
    
void *cbarg;
}
;


    libevent的緩沖是一個連續的內存區域,其處理數據的方式(寫數據和讀數據)更像一個隊列操作方式:從后寫入,從前
讀出。evbuffer分別設置相關指針(一個指標)用于指示讀出位置和寫入位置。其大致結構如圖:

evbuffer_str
    orig_buffer指向由realloc分配的連續內存區域,buffer指向有效數據的內存區域,totallen表示orig_buffer指向的內存
區域的大小,misalign表示buffer相對于orig_buffer的偏移,off表示有效數據的長度。

實際運作

    這里我將結合具體的代碼分析libevent是如何操作上面那個隊列式的evbuffer的,先看一些輔助函數:

evbuffer_drain:
    該函數主要操作一些指標,當每次從evbuffer里讀取數據時,libevent便會將buffer指針后移,同時增大misalign,減小off,
而該函數正是做這件事的。說白了,該函數就是用于調整緩沖隊列的前向指標。

evbuffer_expand:
    該函數用于擴充evbuffer的容量。每次向evbuffer寫數據時,都是將數據寫到buffer+off后,buffer到buffer+off之間已被
使用,保存的是有效數據,而orig_buffer和buffer之間則是因為讀取數據移動指標而形成的無效區域。
    evbuffer_expand的擴充策略在于,首先判斷如果讓出orig_buffer和buffer之間的空閑區域是否可以容納添加的數據,如果
可以,則移動buffer和buffer+off之間的數據到orig_buffer和orig_buffer+off之間(有可能發生內存重疊,所以這里移動調用的
是memmove),然后把新的數據拷貝到orig_buffer+off之后;如果不可以容納,那么重新分配更大的空間(realloc),同樣會移動
數據。
    擴充內存的策略為:確保新的內存區域最小尺寸為256,且以乘以2的方式逐步擴大(256、512、1024、...)。

    了解了以上兩個函數,看其他函數就比較簡單了。可以看看具體的讀數據和寫數據:

evbuffer_add:
    該函數用于添加一段用戶數據到evbuffer中。很簡單,就是先判斷是否有足夠的空閑內存,如果沒有則調用evbuffer_expand
擴充之,然后直接memcpy,更新off指標。

evbuffer_remove:
    該函數用于將evbuffer中的數據復制給用戶空間(讀數據)。簡單地將數據memcpy,然后調用evbuffer_drain移動相關指標。

其他

    回過頭看看libevent的evbuffer其實是非常簡單的(跟我那個kl_net里的buffer一樣),不知道其他人有沒有更優的緩沖管理
方案。evbuffer還提供了兩個函數:evbuffer_write和evbuffer_read,用于直接在套接字(其他文件描述符)上寫/讀數據。

    另外,關于libevent,因為官方提供的VC工程文件有問題,很多人在windows下編譯不過。金慶曾提供過一種方法。其實主要
就是修改event-config.h文件,修改編譯相關配置。這里我也提供一個解決步驟,順便提供完整包下載:

1. vs2005打開libevent.dsw,轉換四個工程(event_test, libevent, signal_test, time_test)
2. 刪除libevent項目中所有的文件,重新添加文件,文件列表如下:
   buffer.c
   evbuffer.c
   evdns.c
   evdns.h
   event.c
   event.h
   event_tagging.c
   event-config.h
   event-internal.h
   evhttp.h
   evrpc.h
   evrpc.c
   evrpc-internal.h
   evsignal.h
   evutil.c
   evutil.h
   http.c
   http-internal.h
   log.c
   log.h
   min_heap.h
   strlcpy.c
   strlcpy-internal.h
   tree.h
   win32.c
   config.h
   signal.c
3. 替換event-config.h,使用libevent-iocp中的
4. 項目設置里添加HAVE_CONFIG_H預處理宏
5. 修改win32.c中win32_init函數,加入WSAStartup函數,類似于:
       WSADATA wd;   
        int err;
        struct win32op *winop;
        size_t size;
        if( ( err = WSAStartup( MAKEWORD( 2, 2 ), &wd ) ) != 0 )
            event_err( 1, "winsock startup failed : %d", err );
6. 修改win32.c中win32_dealloc函數,在函數末尾加上WSACleanup的調用:
        WSACleanup();
6. 至此libevent編譯成功;
7. 幾個例子程序,只需要加入HAVE_CONFIG_H預處理宏,以及連接ws2_32.lib即可;
   (time_test需要修改time-test.c文件,即在包含event.h前包含windows.h)

libevent-1.4.5-stable-vs2005.zip下載

 

posted on 2008-07-16 14:28 Kevin Lynx 閱讀(9572) 評論(14)  編輯 收藏 引用 所屬分類: 通用編程network

評論

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-07-16 15:09 true

寫的好!  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-08-12 10:32 白云哥

這個libevent的vs2005包很好,謝謝

自己偷懶了一把 :)  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-08-25 21:25 weber

寫得不錯,正在做基于libevent的項目, 一起交流. qq群:64559783  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-10-23 18:07 浪跡天涯

libevent用于改造網絡模型需要了解哪些知識?  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄] 2008-10-23 20:43 Kevin Lynx

@浪跡天涯
改造網絡模型?不清楚。我只知道使用別人的庫。- -|  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2008-12-09 18:42 vcclass

不錯,分析的很好,很實用。libevent相對于ACE來說輕量級多了,ACE 學習曲線比較陡峭,不建議初學者學習。libevent里面還是有很多東西值得借鑒的。
ACE用了很多設計模式的思想來封裝,如果對設計模式趕興趣的話可以研究,否則實際意義不是很大。  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄] 2009-04-28 20:06 小馬

新手請教 evbuffer用在什么地方了 libevent是事件響應模型 但是具體事件處理還是要使用者自己的代碼來實現的 不是么  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-04-28 22:41 Kevin Lynx

@小馬
在我印象里,evbuffer用于緩存邏輯層(即l基于libevent那一層)將要發送的數據,以及緩存從設備(fd)里讀取出的數據。
  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載)[未登錄] 2009-04-30 17:08 小馬

@Kevin Lynx
是不是這樣 libevent代碼里本身沒有用到evbuffer 只是我們在用libevent開發自己的應用的時候可以使用evbuffer ?  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-04-30 21:40 Kevin Lynx

@小馬
為什么你不打開libevent的源代碼搜索下evbuffer呢??  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2009-06-26 21:11 taozzee

請問 libevent 中類型 struct event_list 在哪定義的呢??

在VC6下編譯通不過啊。  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2010-05-24 09:09 周江濤

寫的好,表達能力強,分析透徹!  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2011-05-07 21:49 dourgulf

其實,這個buffer管理方法效率很差了,涉及很多內存的移動。
其實,很多socket I/O都提供了buffer數組的發送方式,使用這種方式高效而且簡單。最新的libevent已經放棄了LZ說的這個buffer管理方法了。  回復  更多評論   

# re: libevent 源碼分析:evbuffer緩沖(附帶libevent vs2005完整包下載) 2014-05-19 15:53 coderchen

@dourgulf
現在libevent的buffer應該是多個內存塊組成的chain,但是由于內存不連續,作為接收緩沖區反序列化的時候,還要多拷貝一次數據。  回復  更多評論   

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            在线观看欧美| 亚洲激情另类| 国产精品亚洲片夜色在线| 在线观看av一区| 亚洲无毛电影| 另类激情亚洲| 欧美一区二区三区电影在线观看| 欧美成人精品一区| 国内精品久久久久影院薰衣草| 小黄鸭精品密入口导航| 欧美成人一区二免费视频软件| 亚洲尤物在线| 国产欧美精品一区二区三区介绍| 99re热这里只有精品视频 | 欧美三级第一页| 久久裸体艺术| 一区二区在线视频| 欧美在线中文字幕| 亚洲自拍电影| 欧美午夜在线一二页| 99成人在线| 一区二区三区日韩精品视频| 欧美日韩免费视频| 国产亚洲精品激情久久| 久久久噜噜噜| 久久久久久一区二区三区| 精品91久久久久| 欧美成人精品在线播放| 欧美高清视频一区| 亚洲视频综合在线| 亚洲少妇最新在线视频| 国产精品毛片一区二区三区| 欧美在线|欧美| 久久精品系列| 日韩一区二区精品在线观看| aa级大片欧美三级| 国产精品自在线| 欧美激情精品久久久六区热门| 欧美日本精品一区二区三区| 欧美不卡一区| 亚洲一区二区在线视频| 欧美亚洲综合另类| 亚洲日韩欧美视频一区| 亚洲五月六月| 伊人久久婷婷| 亚洲精品一区中文| 国产一区二区三区在线免费观看| 欧美福利视频在线| 国产精品福利在线观看网址| 久久免费偷拍视频| 欧美日本中文字幕| 亚洲欧美日韩精品久久亚洲区| 欧美一区二区三区四区在线| 一区在线免费观看| 欧美高清视频免费观看| 国产精品久久一区二区三区| 久久尤物视频| 久久久久久久久久久久久9999| 国产精品国产福利国产秒拍| 欧美专区在线| 欧美激情va永久在线播放| 欧美专区在线观看| 牛夜精品久久久久久久99黑人| 午夜久久福利| 欧美不卡视频一区发布| 亚洲美女精品一区| 欧美在线视频免费观看| 亚洲区在线播放| 欧美一区二区成人6969| 99av国产精品欲麻豆| 亚洲欧美电影在线观看| 夜夜嗨av色一区二区不卡| 亚洲女人天堂av| 9色精品在线| 久久国产福利| 亚洲在线成人| 欧美jizzhd精品欧美巨大免费| 亚洲欧美日韩一区在线| 欧美区在线播放| 久久婷婷av| 国产精品久久久久久超碰| 亚洲精品久久久久久久久久久久久 | 欧美大片免费看| 国产一区二区按摩在线观看| 亚洲精品在线三区| 一本色道久久综合亚洲精品不| 在线看不卡av| 欧美一级欧美一级在线播放| 欧美一区国产一区| 欧美日本中文| 久久久久在线观看| 国产综合视频| 亚洲在线一区二区| 欧美亚洲在线| 欧美日韩一区自拍| 老司机精品福利视频| 国产在线日韩| 午夜久久久久| 久久一区二区三区av| 国产亚洲成av人片在线观看桃| 亚洲国产精品久久精品怡红院| 亚洲国产日韩欧美在线图片| 久久久夜夜夜| 亚洲国产精品99久久久久久久久| 亚洲欧洲精品一区二区| 亚洲欧美日韩中文播放| 香蕉乱码成人久久天堂爱免费 | 一区二区不卡在线视频 午夜欧美不卡在 | 久久国产婷婷国产香蕉| 国产日韩精品一区二区三区| 一本色道久久综合亚洲精品婷婷 | 老司机免费视频一区二区三区| 国产精品99久久久久久久女警| 欧美日韩国语| 亚洲免费av片| 欧美亚洲免费在线| 国产视频在线一区二区 | 欧美一级久久久| 久久亚洲美女| 亚洲第一综合天堂另类专| 欧美精品 日韩| 亚洲片在线资源| 亚洲第一在线视频| 欧美午夜www高清视频| 亚洲午夜精品久久| 久久人91精品久久久久久不卡| 在线成人中文字幕| 欧美a级片网| 亚洲一区二区av电影| 欧美亚洲一区二区在线观看| 亚洲盗摄视频| 欧美人在线观看| 亚洲一区二区三区乱码aⅴ蜜桃女| 玖玖玖国产精品| 日韩小视频在线观看专区| 国产欧美精品一区二区三区介绍| 久久九九热re6这里有精品| 欧美激情一区二区| 久久精品系列| 最新热久久免费视频| 国产欧美一区二区色老头| 久久香蕉精品| 日韩午夜免费视频| 美女在线一区二区| 亚洲午夜av电影| 在线免费高清一区二区三区| 欧美日韩国产免费观看| 亚洲另类视频| 欧美激情第三页| 亚洲综合日韩| 在线亚洲免费| 影音先锋在线一区| 国产欧美日韩三级| 欧美精品啪啪| 久久精品91| 亚洲在线不卡| 欧美护士18xxxxhd| 久久精品亚洲一区二区三区浴池| 亚洲日本中文| 国产自产女人91一区在线观看| 欧美日韩综合视频网址| 久久夜色精品| 久久精品人人爽| 亚洲自拍电影| 久久人人爽人人爽爽久久| 欧美在线三级| 亚洲在线第一页| 亚洲男人的天堂在线aⅴ视频| 亚洲激情网址| 91久久国产综合久久91精品网站| 国产免费成人| 欧美色区777第一页| 欧美日韩精品一区| 久久米奇亚洲| 久久久91精品国产一区二区三区| 亚洲一区中文| 欧美国产日韩视频| 欧美成人中文字幕| 玖玖国产精品视频| 欧美高清视频一区二区三区在线观看| 久久精品视频免费播放| 久久成人精品一区二区三区| 亚洲综合丁香| 亚洲男同1069视频| 国产亚洲成av人片在线观看桃| 欧美日韩一区二区三区四区在线观看 | 狠狠干成人综合网| 国产女人精品视频| 国产精品系列在线播放| 久久福利资源站| 久久成人精品| 久久精品免费| 老司机aⅴ在线精品导航| 久久精品国产99国产精品| 中文欧美日韩| 宅男在线国产精品| 亚洲香蕉视频| 欧美在线观看视频一区二区三区| 亚洲视频在线观看| 久久九九精品|