青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

eXile 的專欄

高性能服務器的多線程策略


(一)線程數量與線程池模型
  參見:high-performance server design. http://pl.atyp.us/content/tech/servers.html

  頻繁的上下文切換,會導致系統性能嚴重下降,而產生過多的切換大致有兩個原因:
  1)過多的線程數量。這會使系統性能呈指數級的下降。對于每連接一個線程的系統而言,這也是為什么性能會變差的原因。一個具有可伸縮性的系統,它的唯一可行的選擇,就是限制運行線程的數量。一般而言,這個值應該小于或等于處理器的數目。(說明,在boost網絡庫asio提供的example中,有一個關于這種實現的很好的例子)
  2)所使用的線程池及事件模型。最簡單的一種模型通常是這個樣子:一個偵聽線程異步地接收請求,并在隊列中進行緩沖。另外一組工作者線程則負責處理這些請求。這是一個不錯的模型,缺點就是每處理一個請求一般要經過兩次線程切換(加上對請求的回復)。為了避免這種缺點,一個線程就必須具備偵聽者和工作者兩種角色,可以采用稱之謂“領導者/跟隨者”的模型。一個線程作為領導者,來進行監聽,當收到請求時,它選出一個跟隨者線程作為新的領導者進行偵聽,自己則對請求進行處理,結束后,到跟隨者隊列中進行等待。

(二)多線程的內存池優化

  普通的內存池一旦應用到多線程中,都面臨著鎖競爭的問題,在stlport所做的對于字符串性能的測試中,當使用兩個線程時,它所使用的內存池node_allocator性能已經出現明顯的下降。所以對于多線程而言,一個線程一個內存池是一個很好的選擇。要實現這種設計,面臨的第一個問題,是內存塊的跨線程使用問題,即一個內存塊,可能在A線程中申請,但可能在B線程中釋放。
  在GCC的STL實現libstdc++中,有一個多線程內存池的實現(mt_allocator)。它是node_allocator(現在叫pool_allocator) 的多線程版本。它還有一個優點就是所有參數都是可配置的。
  它的設計思路如下:每個線程一個內存池,同時還有一個全局的內存池。每個線程可以訪問自己的內存池,同時可在鎖保護下訪問全局內存池。申請的每一個內存塊中,都有一個線程ID,以標明是從哪個線程中申請的。
  申請過程:首先向所在線程申請,若本線程沒有空閑塊,則向全局內存池申請。
  釋放過程:直接歸還到本線程的空閑鏈中。還有一個問題,為了防止線程內存池之間的不均衡,或者某一個線程中的空閑鏈過長,可以設置一個水位標,當超過這個水位標時,把釋放的內存直接歸還到全局內存池中。

posted on 2008-03-06 00:09 eXile 閱讀(6999) 評論(9)  編輯 收藏 引用 所屬分類: 網絡開發

評論

# re: 高性能服務器的多線程策略[未登錄] 2008-03-06 08:30 cppexplore

頂 不錯
內存申請針對線程內還是跨線程 決定是否采用加鎖策略,為了差異化這種處理,在內存池上進行進一步的封裝 不錯!  回復  更多評論   

# re: 高性能服務器的多線程策略[未登錄] 2008-03-06 14:42 cppexplore

第一部分(2)的結論不太對。
主線程偵聽,預派生的線程處理業務,這個稱為模型A吧.
leader/follow這里稱為B.
我服務器的4核的SMP,linux 2.6內核,測試工具ab,小壓力的測試不說了,都能達到17000左右,測試項如下:
ab -c 4000 -n 40000 http://172.24.252.248:5000/
預派生線程數量都是4。
壓力測試的結果是:
業務邏輯簡單的時候(僅僅是讀數據,然后resonse200OK):
B模型多次測試平均的結果大約是每秒8500。
而A模型的性能和緩存隊列的大小有關,當緩存大小取500時,和B模型性能相當。取1000,測試的平均結果大約是每秒9500。取100則降低為6500左右


猜測原因:linux的pthread_mutex_t既然是非暫停點的實現,那么它的性能一定很好,遠好于條件鎖、信號燈等。pthread_cond_t則是暫停點的實現,可能把線程推向睡眠。增大緩存大小,可以有效減少對pthread_cond_t的系統調用。

另根據對各種模型的測試,accept的處理速度非常非常的塊,簡單的業務處理時間也要比accept的處理低一個數量級。因此單一線程處理accept,可以盡快建立三次握手,進入緩存隊列等待。

因此猜測 如果業務為復雜邏輯(實際測試加了4個循環相加,一句打印的log)的話,模型B的性能將進一步下降。增大業務處理復雜度后的結果果然如此,模型B的處理降低為6500左右,而模型A在1000的緩存下,每秒的處理能力還是9500左右。  回復  更多評論   

# re: 高性能服務器的多線程策略[未登錄] 2008-03-06 15:14 cppexplore

說錯了 呵呵 三次握手在accept前就完成了 從完成隊列里取而已  回復  更多評論   

# re: 高性能服務器的多線程策略 2008-03-06 20:54 true

leader/followers模式不適合處理爆發  回復  更多評論   

# re: 高性能服務器的多線程策略 2008-03-06 22:36 eXile

@cppexplore
謝謝指正,不過cppexplore這么快就把測試模型搞出來,厲害,應該用的是什么庫吧,Apache?
  回復  更多評論   

# re: 高性能服務器的多線程策略[未登錄] 2008-03-07 08:16 cppexplore

@eXile
呵呵,還沒用庫。
是我最近正在梳理網絡模型。這幾天正在寫各種模型的網絡程序并測試性能。
等搞完這個再看各種庫是如何實現這些模型以及其性能如何。  回復  更多評論   

# re: 高性能服務器的多線程策略[未登錄] 2008-03-08 10:55 小白

領導者這個處理accept比較好。

服務器只要不用弱智算法,以及處理好內存和線程問題,就是高性能的服務器。

服務器雖然把網絡底層作為心臟,把架構作為骨架,但是還有一個很大的部分,就是血肉,也就是服務器的邏輯處理。

很多人談高性能服務器的時候,忽略了邏輯處理,只是在談網絡底層的問題,這是非常錯誤的。

網絡底層,只要符合我上面說的那個高性能服務器的標準,就可以在真正的服務器硬件上跑得很好了。

接下來,我們需要面對的就是邏輯處理給我們的挑戰。無論在哪個行業,都應該仔細謹慎的去對邏輯處理進行設計。

  回復  更多評論   

# re: 高性能服務器的多線程策略 2008-03-12 12:41 eXile

在現在gcc的mt_allocator實現中,有一個bug, 就是對一個計數器(_M_use)并沒有采用原子計數,這個計數器主要用來控制空閑鏈的長度,所以它并不會導致程序異常,但是可能會影響到程序性能,不過如果采用原子計數,則有另一個性能上的擔憂。這個問題直到最新的gcc4.3中才得到解決。  回復  更多評論   

# re: 高性能服務器的多線程策略 2011-08-29 19:40 cingoli

小白 說得非常好啊,我做網游服務器開發,著眼點也在這里。

不過,非本質復雜性 和 本質復雜性 都要處理好才好吧。無論性能還是復雜度。  回復  更多評論   

導航

<2008年3月>
2425262728291
2345678
9101112131415
16171819202122
23242526272829
303112345

統計

常用鏈接

留言簿(18)

隨筆分類

隨筆檔案

服務器編程

搜索

最新評論

閱讀排行榜

評論排行榜

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            夜夜爽www精品| 亚洲午夜羞羞片| 欧美高清影院| 欧美精品在线一区| 欧美日韩国产探花| 欧美性色aⅴ视频一区日韩精品| 欧美国产亚洲另类动漫| 欧美日韩大片| 国产老肥熟一区二区三区| 国产一区二区三区免费观看| 国产亚洲一二三区| 最近中文字幕日韩精品| 99在线精品观看| 欧美在线啊v一区| 美女脱光内衣内裤视频久久网站| 亚洲国产女人aaa毛片在线| 亚洲激情视频网站| 一区二区三区高清视频在线观看| 亚洲欧美国产va在线影院| 久久青草欧美一区二区三区| 欧美日韩国产黄| 国产夜色精品一区二区av| 亚洲日本久久| 久久久久久久久久码影片| 亚洲日韩欧美视频一区| 亚洲欧美在线aaa| 免费亚洲一区| 国产欧美日韩激情| 亚洲人体1000| 久久久99精品免费观看不卡| 91久久久久久| 久久精品视频导航| 欧美视频在线一区| 亚洲人成在线影院| 麻豆精品一区二区av白丝在线| 亚洲精品在线免费| 久久伊人亚洲| 国产欧美日韩一区二区三区在线观看 | 欧美黄色一区| 亚洲午夜久久久久久尤物 | 1024日韩| 西西裸体人体做爰大胆久久久| 欧美激情aaaa| 久久久久久久久久久久久久一区 | 亚洲一区二区三区在线看| 欧美国产日本| 久久综合久色欧美综合狠狠| 国产欧美1区2区3区| 中文一区二区在线观看| 亚洲国产另类久久久精品极度| 欧美专区亚洲专区| 国产亚洲激情在线| 久久精品色图| 久久成人精品| 亚洲第一伊人| 欧美激情精品久久久久久大尺度 | 久久婷婷蜜乳一本欲蜜臀| 国产欧美日韩在线播放| 欧美尤物一区| 午夜伦欧美伦电影理论片| 国产精品久久久久天堂| 午夜精品www| 亚洲欧美综合网| 国产一区二区三区网站| 久久野战av| 女人色偷偷aa久久天堂| 亚洲欧洲日本专区| 亚洲电影一级黄| 欧美日韩免费区域视频在线观看| 亚洲精品视频在线观看网站 | 另类综合日韩欧美亚洲| 在线观看日产精品| 亚洲第一在线综合在线| 欧美二区不卡| 亚洲免费在线视频| 午夜精品福利在线| 尤物99国产成人精品视频| 欧美国产视频一区二区| 欧美国产视频在线观看| 亚洲欧美日本日韩| 欧美一区二区三区四区高清| 国产精品一区免费观看| 麻豆精品网站| 欧美日韩日本国产亚洲在线| 午夜欧美视频| 久久这里有精品视频| 99国产精品久久久久老师| 亚洲字幕在线观看| 亚洲国产高清在线观看视频| 亚洲美女电影在线| 国内久久精品视频| 日韩特黄影片| 精品51国产黑色丝袜高跟鞋| 久久综合婷婷| 亚洲影视中文字幕| 国产精品白丝黑袜喷水久久久| 亚洲欧美日韩国产综合精品二区| 性做久久久久久久免费看| 亚洲青色在线| 欧美一级淫片aaaaaaa视频| 亚洲日本无吗高清不卡| 亚洲欧美日本国产专区一区| 亚洲国产精品一区制服丝袜| 亚洲色图制服丝袜| 亚洲欧洲日韩在线| 欧美一区二区黄色| 亚洲一二区在线| 你懂的视频一区二区| 欧美在线播放高清精品| 欧美精品激情在线观看| 久久久中精品2020中文| 欧美日本中文字幕| 欧美国产精品一区| 国产亚洲欧洲997久久综合| 亚洲国产综合在线看不卡| 国产日韩欧美亚洲一区| 99re这里只有精品6| 亚洲激情视频网站| 久久精品国产亚洲一区二区三区| 亚洲欧美亚洲| 欧美亚一区二区| 亚洲精品久久久久中文字幕欢迎你| 国产一区二区精品久久| 亚洲一区二区三区国产| 亚洲一区二区黄色| 欧美日韩国产一区二区三区地区| 欧美成人午夜| 亚洲国内自拍| 欧美成年人视频| 亚洲国产高清aⅴ视频| 亚洲高清视频在线观看| 久久久人成影片一区二区三区| 久久久精品视频成人| 国产三级欧美三级日产三级99| 亚洲专区欧美专区| 欧美一区网站| 国产一区二区三区四区在线观看| 午夜日韩电影| 久久三级福利| 今天的高清视频免费播放成人| 久久精品三级| 欧美电影在线免费观看网站| 亚洲国产人成综合网站| 欧美成人精品福利| 91久久极品少妇xxxxⅹ软件| 日韩午夜av在线| 国产精品福利av| 欧美一区2区三区4区公司二百| 久久久久国色av免费观看性色| 国产一区二区三区奇米久涩 | 国产精品萝li| 午夜精品久久久久久久| 久久精品一区二区三区四区| 国产精品视频免费一区| 欧美一区2区视频在线观看 | 欧美国产日韩精品| 久久一区二区三区国产精品| 欧美噜噜久久久xxx| 亚洲人成网站色ww在线| 亚洲午夜国产成人av电影男同| 国产精品大片免费观看| 欧美在线视频免费| 亚洲国产高清在线观看视频| 亚洲美女视频在线观看| 国产精品成人一区二区网站软件| 亚洲欧美国产三级| 欧美成人午夜激情在线| 亚洲伊人观看| 亚洲高清资源| 国产精品青草综合久久久久99| 久久久免费精品视频| 99国产精品视频免费观看| 蜜臀av性久久久久蜜臀aⅴ四虎| 日韩网站在线观看| 久久激情视频久久| 日韩视频免费观看| 国自产拍偷拍福利精品免费一| 欧美日韩1区2区| 欧美中文字幕在线观看| 一本一本久久| 欧美激情视频一区二区三区不卡| 午夜欧美不卡精品aaaaa| 最新日韩中文字幕| 国产亚洲观看| 国产精品久久久久久久午夜| 美女脱光内衣内裤视频久久影院| 亚洲欧美日韩系列| 亚洲精品一区二区在线观看| 另类酷文…触手系列精品集v1小说| 亚洲四色影视在线观看| 亚洲激情在线观看| 国模精品一区二区三区色天香| 欧美视频精品在线观看| 欧美插天视频在线播放| 久久久亚洲精品一区二区三区 | 久久先锋影音av| 亚洲伊人久久综合| 一本色道久久| 亚洲乱码一区二区| 亚洲黄色毛片|