青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

永遠也不完美的程序

不斷學習,不斷實踐,不斷的重構……

常用鏈接

統計

積分與排名

好友鏈接

最新評論

epoll的優點及epoll學習心得

按照man手冊的說法:epoll是為處理大批量句柄而作了改進的poll。要使用epoll只需要這三個系統調用:epoll_create(2), epoll_ctl(2), epoll_wait(2)。

<1>支持一個進程打開大數目的socket描述符(FD)
        select 最不能忍受的是一個進程所打開的FD是有一定限制的,由FD_SETSIZE設置,默認值是2048。對于那些需要支持的上萬連接數目的IM服務器來說顯然太少了。這時候你
        一是可以選擇修改這個宏然后重新編譯內核,不過資料也同時指出這樣會帶來網絡效率的下降,
        二是可以選擇多進程的解決方案(傳統的Apache方案),不過雖然linux上面創建進程的代價比較小,但仍舊是不可忽視的,加上進程間數據同步遠比不上線程間同步的高效,所以也不是一種完美的方案。
        epoll則沒有這個限制,它所支持的FD上限是最大可以打開文件的數目,這個數字一般遠大于2048,舉個例子,在1GB內存的機器上大約是10萬左右,具體數目可以cat /proc/sys/fs/file-max察看,一般來說這個數目和系統內存關系很大。

<2>IO效率不隨FD數目增加而線性下降
        傳統的select/poll另一個致命弱點就是當你擁有一個很大的socket集合,不過由于網絡延時,任一時間只有部分的socket是"活躍"的,但是select/poll每次調用都會線性掃描全部的集合,導致效率呈現線性下降。
        epoll不存在這個問題,它只會對"活躍"的socket進行操作---這是因為在內核實現中epoll是根據每個fd上面的callback函數實現的。那么,只有"活躍"的socket才會主動的去調用 callback函數,其他idle狀態socket則不會,在這點上,epoll實現了一個"偽"AIO,因為這時候推動力在os內核。在一些 benchmark中,如果所有的socket基本上都是活躍的---比如一個高速LAN環境,epoll并不比select/poll有什么效率,相反,如果過多使用epoll_ctl,效率相比還有稍微的下降。但是一旦使用idle connections模擬WAN環境,epoll的效率就遠在select/poll之上了。

<3>使用mmap加速內核與用戶空間的消息傳遞。
        這點實際上涉及到epoll的具體實現了。無論是select,poll還是epoll都需要內核把FD消息通知給用戶空間,如何避免不必要的內存拷貝就很重要,在這點上,epoll是通過內核于用戶空間mmap同一塊內存實現的。而如果你想我一樣從2.5內核就關注epoll的話,一定不會忘記手工 mmap這一步的。

<4>內核微調
這一點其實不算epoll的優點了,而是整個linux平臺的優點。也許你可以懷疑linux平臺,但是你無法回避linux平臺賦予你微調內核的能力。比如,內核TCP/IP協議棧使用內存池管理sk_buff結構,那么可以在運行時期動態調整這個內存pool(skb_head_pool)的大小--- 通過echo XXXX>/proc/sys/net/core/hot_list_length完成。再比如listen函數的第2個參數(TCP完成3次握手的數據包隊列長度),也可以根據你平臺內存大小動態調整。更甚至在一個數據包面數目巨大但同時每個數據包本身大小卻很小的特殊系統上嘗試最新的NAPI網卡驅動架構。 
//////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////////
在linux的網絡編程中,很長的時間都在使用select來做事件觸發。在linux新的內核中,有了一種替換它的機制,就是epoll。
相比于select,epoll最大的好處在于它不會隨著監聽fd數目的增長而降低效率。因為在內核中的select實現中,它是采用輪詢來處理的,輪詢的fd數目越多,自然耗時越多。并且,在linux/posix_types.h頭文件有這樣的聲明:
#define __FD_SETSIZE    1024
表示select最多同時監聽1024個fd,當然,可以通過修改頭文件再重編譯內核來擴大這個數目,但這似乎并不治本。

epoll的接口非常簡單,一共就三個函數:
1. int epoll_create(int size);
創建一個epoll的句柄,size用來告訴內核這個監聽的數目一共有多大。這個參數不同于select()中的第一個參數,給出最大監聽的fd+1的值。需要注意的是,當創建好epoll句柄后,它就是會占用一個fd值,在linux下如果查看/proc/進程id/fd/,是能夠看到這個fd的,所以在使用完epoll后,必須調用close()關閉,否則可能導致fd被耗盡。


2. int epoll_ctl(int epfd, int op, int fd, struct epoll_event *event);
epoll的事件注冊函數,它不同與select()是在監聽事件時告訴內核要監聽什么類型的事件,而是在這里先注冊要監聽的事件類型。第一個參數是epoll_create()的返回值,第二個參數表示動作,用三個宏來表示:
EPOLL_CTL_ADD:注冊新的fd到epfd中;
EPOLL_CTL_MOD:修改已經注冊的fd的監聽事件;
EPOLL_CTL_DEL:從epfd中刪除一個fd;
第三個參數是需要監聽的fd,第四個參數是告訴內核需要監聽什么事,struct epoll_event結構如下:
struct epoll_event {
  __uint32_t events;  /* Epoll events */
  epoll_data_t data;  /* User data variable */
};

events可以是以下幾個宏的集合:
EPOLLIN :表示對應的文件描述符可以讀(包括對端SOCKET正常關閉);
EPOLLOUT:表示對應的文件描述符可以寫;
EPOLLPRI:表示對應的文件描述符有緊急的數據可讀(這里應該表示有帶外數據到來);
EPOLLERR:表示對應的文件描述符發生錯誤;
EPOLLHUP:表示對應的文件描述符被掛斷;
EPOLLET: 將EPOLL設為邊緣觸發(Edge Triggered)模式,這是相對于水平觸發(Level Triggered)來說的。
EPOLLONESHOT:只監聽一次事件,當監聽完這次事件之后,如果還需要繼續監聽這個socket的話,需要再次把這個socket加入到EPOLL隊列里


3. int epoll_wait(int epfd, struct epoll_event * events, int maxevents, int timeout);
等待事件的產生,類似于select()調用。參數events用來從內核得到事件的集合,maxevents告之內核這個events有多大,這個maxevents的值不能大于創建epoll_create()時的size,參數timeout是超時時間(毫秒,0會立即返回,-1將不確定,也有說法說是永久阻塞)。該函數返回需要處理的事件數目,如返回0表示已超時。

--------------------------------------------------------------------------------------------

從man手冊中,得到ET和LT的具體描述如下

EPOLL事件有兩種模型:
Edge Triggered (ET)
Level Triggered (LT)

假如有這樣一個例子:
1. 我們已經把一個用來從管道中讀取數據的文件句柄(RFD)添加到epoll描述符
2. 這個時候從管道的另一端被寫入了2KB的數據
3. 調用epoll_wait(2),并且它會返回RFD,說明它已經準備好讀取操作
4. 然后我們讀取了1KB的數據
5. 調用epoll_wait(2)......

Edge Triggered 工作模式:
如果我們在第1步將RFD添加到epoll描述符的時候使用了EPOLLET標志,那么在第5步調用epoll_wait(2)之后將有可能會掛起,因為剩余的數據還存在于文件的輸入緩沖區內,而且數據發出端還在等待一個針對已經發出數據的反饋信息。只有在監視的文件句柄上發生了某個事件的時候 ET 工作模式才會匯報事件。因此在第5步的時候,調用者可能會放棄等待仍在存在于文件輸入緩沖區內的剩余數據。在上面的例子中,會有一個事件產生在RFD句柄上,因為在第2步執行了一個寫操作,然后,事件將會在第3步被銷毀。因為第4步的讀取操作沒有讀空文件輸入緩沖區內的數據,因此我們在第5步調用 epoll_wait(2)完成后,是否掛起是不確定的。epoll工作在ET模式的時候,必須使用非阻塞套接口,以避免由于一個文件句柄的阻塞讀/阻塞寫操作把處理多個文件描述符的任務餓死。最好以下面的方式調用ET模式的epoll接口,在后面會介紹避免可能的缺陷。
   i    基于非阻塞文件句柄
   ii   只有當read(2)或者write(2)返回EAGAIN時才需要掛起,等待。但這并不是說每次read()時都需要循環讀,直到讀到產生一個EAGAIN才認為此次事件處理完成,當read()返回的讀到的數據長度小于請求的數據長度時,就可以確定此時緩沖中已沒有數據了,也就可以認為此事讀事件已處理完成。

Level Triggered 工作模式
相反的,以LT方式調用epoll接口的時候,它就相當于一個速度比較快的poll(2),并且無論后面的數據是否被使用,因此他們具有同樣的職能。因為即使使用ET模式的epoll,在收到多個chunk的數據的時候仍然會產生多個事件。調用者可以設定EPOLLONESHOT標志,在 epoll_wait(2)收到事件后epoll會與事件關聯的文件句柄從epoll描述符中禁止掉。因此當EPOLLONESHOT設定后,使用帶有 EPOLL_CTL_MOD標志的epoll_ctl(2)處理文件句柄就成為調用者必須作的事情。


然后詳細解釋ET, LT:

LT(level triggered)是缺省的工作方式,并且同時支持block和no-block socket.在這種做法中,內核告訴你一個文件描述符是否就緒了,然后你可以對這個就緒的fd進行IO操作。如果你不作任何操作,內核還是會繼續通知你的,所以,這種模式編程出錯誤可能性要小一點。傳統的select/poll都是這種模型的代表.

ET(edge-triggered)是高速工作方式,只支持no-block socket。在這種模式下,當描述符從未就緒變為就緒時,內核通過epoll告訴你。然后它會假設你知道文件描述符已經就緒,并且不會再為那個文件描述符發送更多的就緒通知,直到你做了某些操作導致那個文件描述符不再為就緒狀態了(比如,你在發送,接收或者接收請求,或者發送接收的數據少于一定量時導致了一個EWOULDBLOCK 錯誤)。但是請注意,如果一直不對這個fd作IO操作(從而導致它再次變成未就緒),內核不會發送更多的通知(only once),不過在TCP協議中,ET模式的加速效用仍需要更多的benchmark確認(這句話不理解)。

在許多測試中我們會看到如果沒有大量的idle -connection或者dead-connection,epoll的效率并不會比select/poll高很多,但是當我們遇到大量的idle- connection(例如WAN環境中存在大量的慢速連接),就會發現epoll的效率大大高于select/poll。(未測試)



另外,當使用epoll的ET模型來工作時,當產生了一個EPOLLIN事件后,
讀數據的時候需要考慮的是當recv()返回的大小如果等于請求的大小,那么很有可能是緩沖區還有數據未讀完,也意味著該次事件還沒有處理完,所以還需要再次讀取
while(rs)
{
  buflen = recv(activeevents[i].data.fd, buf, sizeof(buf), 0);
  if(buflen < 0)
  {
    // 由于是非阻塞的模式,所以當errno為EAGAIN時,表示當前緩沖區已無數據可讀
    // 在這里就當作是該次事件已處理處.
    if(errno == EAGAIN)
     break;
    else
     return;
   }
   else if(buflen == 0)
   {
     // 這里表示對端的socket已正常關閉.
   }
   if(buflen == sizeof(buf)
     rs = 1;   // 需要再次讀取
   else
     rs = 0;
}


還有,假如發送端流量大于接收端的流量(意思是epoll所在的程序讀比轉發的socket要快),由于是非阻塞的socket,那么send()函數雖然返回,但實際緩沖區的數據并未真正發給接收端,這樣不斷的讀和發,當緩沖區滿后會產生EAGAIN錯誤(參考man send),同時,不理會這次請求發送的數據.所以,需要封裝socket_send()的函數用來處理這種情況,該函數會盡量將數據寫完再返回,返回-1表示出錯。在socket_send()內部,當寫緩沖已滿(send()返回-1,且errno為EAGAIN),那么會等待后再重試.這種方式并不很完美,在理論上可能會長時間的阻塞在socket_send()內部,但暫沒有更好的辦法.

ssize_t socket_send(int sockfd, const char* buffer, size_t buflen)
{
  ssize_t tmp;
  size_t total = buflen;
  const char *p = buffer;

  while(1)
  {
    tmp = send(sockfd, p, total, 0);
    if(tmp < 0)
    {
      // 當send收到信號時,可以繼續寫,但這里返回-1.
      if(errno == EINTR)
        return -1;

      // 當socket是非阻塞時,如返回此錯誤,表示寫緩沖隊列已滿,
      // 在這里做延時后再重試.
      if(errno == EAGAIN)
      {
        usleep(1000);
        continue;
      }

      return -1;
    }

    if((size_t)tmp == total)
      return buflen;

    total -= tmp;
    p += tmp;
  }

  return tmp;
}

posted on 2008-04-09 14:18 狂爛球 閱讀(993) 評論(1)  編輯 收藏 引用

評論

# re: epoll的優點及epoll學習心得 2015-04-12 10:15 臉上有痘疤怎么辦

非常好的一篇文章,樓主有個問題想問一下,插入圖片代碼怎么寫啊  回復  更多評論   

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            午夜精品久久久久久久久| 亚洲成色精品| 欧美伊人久久| 欧美一区二区三区四区高清| 亚洲欧美日韩综合一区| 欧美一区二区三区四区在线| 久久精品国产v日韩v亚洲| 久久九九99视频| 美女露胸一区二区三区| 欧美日本国产在线| 国产精品久久久久久久7电影| 国产精品二区三区四区| 国产欧美日韩亚州综合| 国产有码一区二区| 亚洲精选在线| 午夜精品免费| 免费久久精品视频| 亚洲久久视频| 亚洲欧美在线免费观看| 久久人91精品久久久久久不卡| 美女视频一区免费观看| 欧美日韩综合| 精品动漫3d一区二区三区免费| 亚洲精品乱码久久久久| 午夜在线电影亚洲一区| 欧美+亚洲+精品+三区| 99亚洲一区二区| 欧美中文在线字幕| 欧美日韩成人一区二区| 国产一区白浆| 亚洲无限av看| 欧美xart系列高清| 亚洲一区一卡| 欧美噜噜久久久xxx| 好吊色欧美一区二区三区视频| 中文日韩在线视频| 欧美a级一区二区| 亚洲一区免费| 欧美激情2020午夜免费观看| 国产日韩欧美在线一区| 亚洲午夜激情网页| 亚洲国产精品成人综合| 一区二区三区高清不卡| 欧美成人免费视频| 狠狠久久婷婷| 性做久久久久久久免费看| 亚洲激情网址| 久久综合色8888| 欧美香蕉视频| 欧美大片免费久久精品三p| 国产免费观看久久黄| 日韩午夜av| 免费在线看成人av| 亚洲图片欧美日产| 欧美欧美在线| 亚洲精品偷拍| 久久伊人亚洲| 欧美在线国产精品| 国产一区二区中文| 欧美一区二区性| 亚洲一区二区三区三| 国产精品高清免费在线观看| 国产精品99久久久久久久女警| 亚洲国产精品久久久久秋霞不卡 | 欧美精品www| 亚洲国产高清自拍| 欧美.日韩.国产.一区.二区| 久久视频免费观看| 亚洲国产精品一区二区第一页 | 久久综合九色综合久99| 欧美一级黄色网| 国产曰批免费观看久久久| 久久久国产91| 久久影视精品| 日韩一级大片在线| 亚洲精品小视频| 欧美日韩在线一区二区| 亚洲字幕一区二区| 亚洲欧美日韩国产中文| 欧美va亚洲va国产综合| 欧美大片免费| 亚洲永久免费av| 亚洲欧美一区二区三区极速播放| 国产三级欧美三级| 欧美成人激情在线| 欧美日韩大片一区二区三区| 亚洲中字黄色| 欧美中文字幕在线播放| 91久久在线视频| 亚洲精品一区二区三区蜜桃久| 欧美欧美全黄| 久久精品中文字幕一区| 欧美xxx成人| 亚洲欧美区自拍先锋| 欧美一区二区视频97| 亚洲经典自拍| 亚洲视频日本| 在线观看一区二区视频| 一本色道久久| 一区在线观看| 亚洲午夜在线观看| 亚洲黑丝在线| 亚洲一区二区三区四区五区黄 | 亚洲欧美日韩一区二区三区在线观看| 在线亚洲免费| 国产精品婷婷午夜在线观看| 亚洲国产精品久久久久秋霞不卡 | 美女脱光内衣内裤视频久久影院| 在线视频免费在线观看一区二区| 亚洲欧美日韩精品综合在线观看| 激情综合色综合久久综合| 亚洲精选一区| 亚洲大片一区二区三区| 在线亚洲伦理| 亚洲精品一区在线| 亚洲精品一区久久久久久| 性感少妇一区| 亚洲一区二区视频在线观看| 久久一区二区三区国产精品| 亚久久调教视频| 欧美日韩亚洲天堂| 亚洲成色精品| 国产亚洲视频在线| 亚洲一区二区三区午夜| 一区二区三区免费网站| 欧美1区2区3区| 免费在线亚洲| 在线观看91精品国产入口| 性欧美xxxx视频在线观看| 亚洲在线播放电影| 欧美黄色影院| 亚洲激情女人| 亚洲精品小视频在线观看| 久久精品国产一区二区三| 欧美在线短视频| 国产精品午夜久久| 亚洲一区二区在线| 欧美中文字幕视频| 国产精品主播| 亚洲欧美伊人| 午夜天堂精品久久久久| 国产麻豆视频精品| 午夜精品亚洲| 久久久精品国产免大香伊 | 午夜伦理片一区| 欧美图区在线视频| 99香蕉国产精品偷在线观看| 亚洲一区二区成人| 国产精品乱人伦中文| 亚洲视频在线观看网站| 午夜精品区一区二区三| 国产欧美日韩综合| 小黄鸭精品密入口导航| 久久人91精品久久久久久不卡| 狠狠色丁香久久婷婷综合_中| 久久精品人人做人人爽| 欧美成人国产| 亚洲日本免费| 欧美亚洲第一页| 午夜久久电影网| 蜜臀av一级做a爰片久久| 在线观看亚洲| 欧美日韩精品三区| 亚洲欧美日韩系列| 欧美不卡一卡二卡免费版| 亚洲精品国产精品国自产观看浪潮| 欧美精品一区二区在线播放| 欧美剧在线观看| 久久精品免费| 亚洲二区视频在线| 欧美日韩在线播放一区二区| 午夜视频在线观看一区二区三区| 蜜桃av综合| 亚洲视频一二三| 国产字幕视频一区二区| 欧美精品观看| 欧美在线网站| 亚洲日本无吗高清不卡| 久久久欧美精品| 在线亚洲欧美视频| 国产精品一卡二卡| 欧美电影免费观看网站| 午夜视频在线观看一区二区| 亚洲精品永久免费| 久久夜色精品国产| 亚洲一区视频在线| 在线观看福利一区| 国产精品婷婷午夜在线观看| 欧美成人精品在线| 久久久精品性| 亚洲在线日韩| 亚洲乱码精品一二三四区日韩在线| 久久久久久夜精品精品免费| 亚洲午夜精品一区二区三区他趣 | 好看的亚洲午夜视频在线| 欧美日韩视频一区二区| 美女网站久久| 久久久精品免费视频| 欧美一区二区三区在线观看| 一区二区三区欧美成人|