青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

epoll的優點及epoll學習心得

 
按照man手冊的說法:epoll是為處理大批量句柄而作了改進的poll。要使用epoll只需要這三個系統調用:epoll_create(2), epoll_ctl(2), epoll_wait(2)。

<1>支持一個進程打開大數目的socket描述符(FD)
        select 最不能忍受的是一個進程所打開的FD是有一定限制的,由FD_SETSIZE設置,默認值是2048。對于那些需要支持的上萬連接數目的IM服務器來說顯然太少了。這時候你
        一是可以選擇修改這個宏然后重新編譯內核,不過資料也同時指出這樣會帶來網絡效率的下降,
        二是可以選擇多進程的解決方案(傳統的Apache方案),不過雖然linux上面創建進程的代價比較小,但仍舊是不可忽視的,加上進程間數據同步遠比不上線程間同步的高效,所以也不是一種完美的方案。
        epoll則沒有這個限制,它所支持的FD上限是最大可以打開文件的數目,這個數字一般遠大于2048,舉個例子,在1GB內存的機器上大約是10萬左右,具體數目可以cat /proc/sys/fs/file-max察看,一般來說這個數目和系統內存關系很大。

<2>IO效率不隨FD數目增加而線性下降
        傳統的select/poll另一個致命弱點就是當你擁有一個很大的socket集合,不過由于網絡延時,任一時間只有部分的socket是"活躍"的,但是select/poll每次調用都會線性掃描全部的集合,導致效率呈現線性下降。
        epoll不存在這個問題,它只會對"活躍"的socket進行操作---這是因為在內核實現中epoll是根據每個fd上面的callback函數實現的。那么,只有"活躍"的socket才會主動的去調用 callback函數,其他idle狀態socket則不會,在這點上,epoll實現了一個"偽"AIO,因為這時候推動力在os內核。在一些 benchmark中,如果所有的socket基本上都是活躍的---比如一個高速LAN環境,epoll并不比select/poll有什么效率,相反,如果過多使用epoll_ctl,效率相比還有稍微的下降。但是一旦使用idle connections模擬WAN環境,epoll的效率就遠在select/poll之上了。

<3>使用mmap加速內核與用戶空間的消息傳遞。
        這點實際上涉及到epoll的具體實現了。無論是select,poll還是epoll都需要內核把FD消息通知給用戶空間,如何避免不必要的內存拷貝就很重要,在這點上,epoll是通過內核于用戶空間mmap同一塊內存實現的。而如果你想我一樣從2.5內核就關注epoll的話,一定不會忘記手工 mmap這一步的。

<4>內核微調
這一點其實不算epoll的優點了,而是整個linux平臺的優點。也許你可以懷疑linux平臺,但是你無法回避linux平臺賦予你微調內核的能力。比如,內核TCP/IP協議棧使用內存池管理sk_buff結構,那么可以在運行時期動態調整這個內存pool(skb_head_pool)的大小--- 通過echo XXXX>/proc/sys/net/core/hot_list_length完成。再比如listen函數的第2個參數(TCP完成3次握手的數據包隊列長度),也可以根據你平臺內存大小動態調整。更甚至在一個數據包面數目巨大但同時每個數據包本身大小卻很小的特殊系統上嘗試最新的NAPI網卡驅動架構。 
//////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////
在linux的網絡編程中,很長的時間都在使用select來做事件觸發。在linux新的內核中,有了一種替換它的機制,就是epoll。
相比于select,epoll最大的好處在于它不會隨著監聽fd數目的增長而降低效率。因為在內核中的select實現中,它是采用輪詢來處理的,輪詢的fd數目越多,自然耗時越多。并且,在linux/posix_types.h頭文件有這樣的聲明:
#define __FD_SETSIZE    1024
表示select最多同時監聽1024個fd,當然,可以通過修改頭文件再重編譯內核來擴大這個數目,但這似乎并不治本。

epoll的接口非常簡單,一共就三個函數:
1. int epoll_create(int size);
創建一個epoll的句柄,size用來告訴內核這個監聽的數目一共有多大。這個參數不同于select()中的第一個參數,給出最大監聽的fd+1的值。需要注意的是,當創建好epoll句柄后,它就是會占用一個fd值,在linux下如果查看/proc/進程id/fd/,是能夠看到這個fd的,所以在使用完epoll后,必須調用close()關閉,否則可能導致fd被耗盡。


2. int epoll_ctl(int epfd, int op, int fd, struct epoll_event *event);
epoll的事件注冊函數,它不同與select()是在監聽事件時告訴內核要監聽什么類型的事件,而是在這里先注冊要監聽的事件類型。第一個參數是epoll_create()的返回值,第二個參數表示動作,用三個宏來表示:
EPOLL_CTL_ADD:注冊新的fd到epfd中;
EPOLL_CTL_MOD:修改已經注冊的fd的監聽事件;
EPOLL_CTL_DEL:從epfd中刪除一個fd;
第三個參數是需要監聽的fd,第四個參數是告訴內核需要監聽什么事,struct epoll_event結構如下:
struct epoll_event {
  __uint32_t events;  /* Epoll events */
  epoll_data_t data;  /* User data variable */
};

events可以是以下幾個宏的集合:
EPOLLIN :表示對應的文件描述符可以讀(包括對端SOCKET正常關閉);
EPOLLOUT:表示對應的文件描述符可以寫;
EPOLLPRI:表示對應的文件描述符有緊急的數據可讀(這里應該表示有帶外數據到來);
EPOLLERR:表示對應的文件描述符發生錯誤;
EPOLLHUP:表示對應的文件描述符被掛斷;
EPOLLET: 將EPOLL設為邊緣觸發(Edge Triggered)模式,這是相對于水平觸發(Level Triggered)來說的。
EPOLLONESHOT:只監聽一次事件,當監聽完這次事件之后,如果還需要繼續監聽這個socket的話,需要再次把這個socket加入到EPOLL隊列里


3. int epoll_wait(int epfd, struct epoll_event * events, int maxevents, int timeout);
等待事件的產生,類似于select()調用。參數events用來從內核得到事件的集合,maxevents告之內核這個events有多大,這個maxevents的值不能大于創建epoll_create()時的size,參數timeout是超時時間(毫秒,0會立即返回,-1將不確定,也有說法說是永久阻塞)。該函數返回需要處理的事件數目,如返回0表示已超時。

--------------------------------------------------------------------------------------------

從man手冊中,得到ET和LT的具體描述如下

EPOLL事件有兩種模型:
Edge Triggered (ET)
Level Triggered (LT)

假如有這樣一個例子:
1. 我們已經把一個用來從管道中讀取數據的文件句柄(RFD)添加到epoll描述符
2. 這個時候從管道的另一端被寫入了2KB的數據
3. 調用epoll_wait(2),并且它會返回RFD,說明它已經準備好讀取操作
4. 然后我們讀取了1KB的數據
5. 調用epoll_wait(2)......

Edge Triggered 工作模式:
如果我們在第1步將RFD添加到epoll描述符的時候使用了EPOLLET標志,那么在第5步調用epoll_wait(2)之后將有可能會掛起,因為剩余的數據還存在于文件的輸入緩沖區內,而且數據發出端還在等待一個針對已經發出數據的反饋信息。只有在監視的文件句柄上發生了某個事件的時候 ET 工作模式才會匯報事件。因此在第5步的時候,調用者可能會放棄等待仍在存在于文件輸入緩沖區內的剩余數據。在上面的例子中,會有一個事件產生在RFD句柄上,因為在第2步執行了一個寫操作,然后,事件將會在第3步被銷毀。因為第4步的讀取操作沒有讀空文件輸入緩沖區內的數據,因此我們在第5步調用 epoll_wait(2)完成后,是否掛起是不確定的。epoll工作在ET模式的時候,必須使用非阻塞套接口,以避免由于一個文件句柄的阻塞讀/阻塞寫操作把處理多個文件描述符的任務餓死。最好以下面的方式調用ET模式的epoll接口,在后面會介紹避免可能的缺陷。
   i    基于非阻塞文件句柄
   ii   只有當read(2)或者write(2)返回EAGAIN時才需要掛起,等待。但這并不是說每次read()時都需要循環讀,直到讀到產生一個EAGAIN才認為此次事件處理完成,當read()返回的讀到的數據長度小于請求的數據長度時,就可以確定此時緩沖中已沒有數據了,也就可以認為此事讀事件已處理完成。

Level Triggered 工作模式
相反的,以LT方式調用epoll接口的時候,它就相當于一個速度比較快的poll(2),并且無論后面的數據是否被使用,因此他們具有同樣的職能。因為即使使用ET模式的epoll,在收到多個chunk的數據的時候仍然會產生多個事件。調用者可以設定EPOLLONESHOT標志,在 epoll_wait(2)收到事件后epoll會與事件關聯的文件句柄從epoll描述符中禁止掉。因此當EPOLLONESHOT設定后,使用帶有 EPOLL_CTL_MOD標志的epoll_ctl(2)處理文件句柄就成為調用者必須作的事情。


然后詳細解釋ET, LT:

LT(level triggered)是缺省的工作方式,并且同時支持block和no-block socket.在這種做法中,內核告訴你一個文件描述符是否就緒了,然后你可以對這個就緒的fd進行IO操作。如果你不作任何操作,內核還是會繼續通知你的,所以,這種模式編程出錯誤可能性要小一點。傳統的select/poll都是這種模型的代表.

ET(edge-triggered)是高速工作方式,只支持no-block socket。在這種模式下,當描述符從未就緒變為就緒時,內核通過epoll告訴你。然后它會假設你知道文件描述符已經就緒,并且不會再為那個文件描述符發送更多的就緒通知,直到你做了某些操作導致那個文件描述符不再為就緒狀態了(比如,你在發送,接收或者接收請求,或者發送接收的數據少于一定量時導致了一個EWOULDBLOCK 錯誤)。但是請注意,如果一直不對這個fd作IO操作(從而導致它再次變成未就緒),內核不會發送更多的通知(only once),不過在TCP協議中,ET模式的加速效用仍需要更多的benchmark確認(這句話不理解)。

在許多測試中我們會看到如果沒有大量的idle -connection或者dead-connection,epoll的效率并不會比select/poll高很多,但是當我們遇到大量的idle- connection(例如WAN環境中存在大量的慢速連接),就會發現epoll的效率大大高于select/poll。(未測試)



另外,當使用epoll的ET模型來工作時,當產生了一個EPOLLIN事件后,
讀數據的時候需要考慮的是當recv()返回的大小如果等于請求的大小,那么很有可能是緩沖區還有數據未讀完,也意味著該次事件還沒有處理完,所以還需要再次讀取
while(rs)
{
  buflen = recv(activeevents[i].data.fd, buf, sizeof(buf), 0);
  if(buflen < 0)
  {
    // 由于是非阻塞的模式,所以當errno為EAGAIN時,表示當前緩沖區已無數據可讀
    // 在這里就當作是該次事件已處理處.
    if(errno == EAGAIN)
     break;
    else
     return;
   }
   else if(buflen == 0)
   {
     // 這里表示對端的socket已正常關閉.
   }
   if(buflen == sizeof(buf)
     rs = 1;   // 需要再次讀取
   else
     rs = 0;
}


還有,假如發送端流量大于接收端的流量(意思是epoll所在的程序讀比轉發的socket要快),由于是非阻塞的socket,那么send()函數雖然返回,但實際緩沖區的數據并未真正發給接收端,這樣不斷的讀和發,當緩沖區滿后會產生EAGAIN錯誤(參考man send),同時,不理會這次請求發送的數據.所以,需要封裝socket_send()的函數用來處理這種情況,該函數會盡量將數據寫完再返回,返回-1表示出錯。在socket_send()內部,當寫緩沖已滿(send()返回-1,且errno為EAGAIN),那么會等待后再重試.這種方式并不很完美,在理論上可能會長時間的阻塞在socket_send()內部,但暫沒有更好的辦法.

ssize_t socket_send(int sockfd, const char* buffer, size_t buflen)
{
  ssize_t tmp;
  size_t total = buflen;
  const char *p = buffer;

  while(1)
  {
    tmp = send(sockfd, p, total, 0);
    if(tmp < 0)
    {
      // 當send收到信號時,可以繼續寫,但這里返回-1.
      if(errno == EINTR)
        return -1;

      // 當socket是非阻塞時,如返回此錯誤,表示寫緩沖隊列已滿,
      // 在這里做延時后再重試.
      if(errno == EAGAIN)
      {
        usleep(1000);
        continue;
      }

      return -1;
    }

    if((size_t)tmp == total)
      return buflen;

    total -= tmp;
    p += tmp;
  }

  return tmp;
}

posted on 2008-04-16 09:14 RedLight 閱讀(1763) 評論(0)  編輯 收藏 引用 所屬分類: 網絡服務器開發

<2008年4月>
303112345
6789101112
13141516171819
20212223242526
27282930123
45678910

導航

統計

公告


Name: Galen
QQ: 88104725

常用鏈接

留言簿(3)

隨筆分類

隨筆檔案

相冊

My Friend

搜索

最新評論

閱讀排行榜

評論排行榜

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            亚洲欧美久久久| 国产精品美女久久久| 亚洲精品欧美精品| 蜜桃久久av一区| 免费不卡亚洲欧美| 欧美高清视频一区二区| 欧美成人a视频| 欧美岛国激情| 亚洲国产日本| 亚洲精品欧美极品| 亚洲午夜久久久| 欧美一区二区三区久久精品| 欧美亚洲综合另类| 久久免费99精品久久久久久| 裸体歌舞表演一区二区| 欧美国产欧美亚洲国产日韩mv天天看完整| 玖玖国产精品视频| 欧美精品黄色| 国产欧美在线播放| 亚洲国产成人精品视频| 亚洲视频axxx| 久久久五月婷婷| 91久久精品一区| 欧美综合国产| 欧美日韩裸体免费视频| 国产日韩1区| 99在线热播精品免费| 久久国产免费| 亚洲精品免费在线播放| 亚洲免费影院| 欧美激情综合| 欧美亚洲免费电影| 欧美色图五月天| 亚洲第一级黄色片| 欧美亚洲在线视频| 亚洲精品五月天| 久色婷婷小香蕉久久| 国产欧美日韩不卡| 一区二区三区蜜桃网| 欧美aⅴ99久久黑人专区| 亚洲一区二区黄| 欧美精品日韩精品| 国产主播一区二区三区四区| 99精品热6080yy久久| 国产在线观看91精品一区| 亚洲图片在区色| 久久免费高清| 在线综合亚洲| 久久亚洲国产精品一区二区| 猫咪成人在线观看| 国产精品日日摸夜夜添夜夜av| 黑人操亚洲美女惩罚| 一本到12不卡视频在线dvd| 亚洲自拍偷拍视频| 久久av老司机精品网站导航| 亚洲高清电影| 久久成人这里只有精品| 欧美日本精品一区二区三区| 狠狠色噜噜狠狠狠狠色吗综合| 亚洲精品国产品国语在线app| 欧美一级淫片播放口| 亚洲欧洲三级| 欧美96在线丨欧| 黄色免费成人| 欧美一区二区高清| 欧美激情五月| 欧美日韩国产色视频| 亚洲高清资源| 模特精品在线| 久久精品123| 国产精品一区免费观看| 亚洲另类一区二区| 欧美va天堂va视频va在线| 性欧美大战久久久久久久久| 欧美日韩视频一区二区| 亚洲国产精品成人| 国产日韩亚洲欧美综合| 亚洲免费福利视频| 久久精品国产999大香线蕉| 99热免费精品在线观看| 欧美激情精品久久久久久黑人 | 欧美三级视频在线| 亚洲精品国偷自产在线99热| 美国成人毛片| 久久国内精品视频| 国产一区二区三区的电影 | 一区二区三区精品久久久| 免费黄网站欧美| 亚洲欧洲日本专区| 亚洲国产精品久久久久婷婷老年 | 欧美日韩不卡一区| 亚洲少妇自拍| 一卡二卡3卡四卡高清精品视频| 欧美久久久久久蜜桃| 亚洲日本一区二区三区| 亚洲国产成人不卡| 欧美日本精品在线| 亚洲欧美日产图| 欧美在线日韩| 国产欧美日韩一区二区三区| 性做久久久久久久免费看| 亚洲欧美视频一区二区三区| 国产日本欧美视频| 老鸭窝毛片一区二区三区| 久久亚洲二区| 一区二区三区黄色| 亚洲一区二区三区四区中文 | 亚洲午夜性刺激影院| 欧美成年人网| 亚洲三级视频在线观看| 亚洲精品中文字幕在线| 国产精品久久久久久久久婷婷 | 欧美理论在线| 欧美一区不卡| 久久久欧美一区二区| 亚洲精品免费在线观看| 亚洲午夜精品福利| 在线欧美日韩精品| 一区二区三区高清视频在线观看| 国产伦精品一区二区| 亚洲一区二区三区乱码aⅴ| 在线亚洲精品福利网址导航| 欧美日韩一区二区视频在线 | 国产精品久久久久99| 久久综合色88| 欧美视频一区在线| 久久亚洲精品视频| 国产精品久久国产三级国电话系列| 久久国产精品99国产| 欧美国产第一页| 久久精品国产999大香线蕉| 欧美精品入口| 老司机免费视频一区二区| 久久久精品999| 最近中文字幕mv在线一区二区三区四区 | 久久久久久欧美| 午夜视频一区| 小黄鸭视频精品导航| aa级大片欧美| 久久久久久尹人网香蕉| 亚洲网站在线观看| 欧美99久久| 欧美国产高清| 黄色另类av| 欧美在线国产精品| 美女尤物久久精品| 久久久av毛片精品| 国产精品女同互慰在线看| 亚洲人成在线观看| 亚洲国产成人精品久久| 久久九九99| 久久九九久久九九| 欧美成人一区二区三区在线观看| 亚洲天堂第二页| 欧美亚洲日本国产| 免费一区二区三区| 欧美韩日亚洲| 亚洲国产精品久久精品怡红院| 西西裸体人体做爰大胆久久久| 亚洲一区在线观看视频 | 亚洲影院污污.| 亚洲欧美日韩精品久久亚洲区| 欧美区一区二| 久久偷窥视频| 好看的av在线不卡观看| 欧美一二区视频| 久久精品91久久香蕉加勒比| 国产日韩欧美不卡| 欧美一级精品大片| 久久久一区二区| 在线观看av不卡| 欧美大片在线观看一区| 亚洲国产精品999| 亚洲美女视频在线免费观看| 欧美国产一区二区三区激情无套| 欧美大尺度在线观看| 亚洲国产成人在线播放| 欧美成人a视频| 亚洲激情一区二区三区| 中文在线一区| 国产精品高潮呻吟久久av黑人| 免费日韩av| 国产一区二区欧美日韩| 久久久亚洲国产美女国产盗摄| 欧美大尺度在线| 亚洲午夜精品视频| 国产性做久久久久久| 久久国产一区| 亚洲国产精品高清久久久| 99成人在线| 国产酒店精品激情| 乱人伦精品视频在线观看| 亚洲毛片播放| 久久精品一区二区三区不卡| 亚洲国产精品t66y| 欧美视频中文字幕在线| 久久激情五月婷婷| 一本在线高清不卡dvd| 久久久久久综合网天天| 亚洲精品网址在线观看|