青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

eXile 的專欄

高性能服務(wù)器的多線程策略


(一)線程數(shù)量與線程池模型
  參見:high-performance server design. http://pl.atyp.us/content/tech/servers.html

  頻繁的上下文切換,會導(dǎo)致系統(tǒng)性能嚴(yán)重下降,而產(chǎn)生過多的切換大致有兩個原因:
  1)過多的線程數(shù)量。這會使系統(tǒng)性能呈指數(shù)級的下降。對于每連接一個線程的系統(tǒng)而言,這也是為什么性能會變差的原因。一個具有可伸縮性的系統(tǒng),它的唯一可行的選擇,就是限制運(yùn)行線程的數(shù)量。一般而言,這個值應(yīng)該小于或等于處理器的數(shù)目。(說明,在boost網(wǎng)絡(luò)庫asio提供的example中,有一個關(guān)于這種實(shí)現(xiàn)的很好的例子)
 ?。玻┧褂玫木€程池及事件模型。最簡單的一種模型通常是這個樣子:一個偵聽線程異步地接收請求,并在隊(duì)列中進(jìn)行緩沖。另外一組工作者線程則負(fù)責(zé)處理這些請求。這是一個不錯的模型,缺點(diǎn)就是每處理一個請求一般要經(jīng)過兩次線程切換(加上對請求的回復(fù))。為了避免這種缺點(diǎn),一個線程就必須具備偵聽者和工作者兩種角色,可以采用稱之謂“領(lǐng)導(dǎo)者/跟隨者”的模型。一個線程作為領(lǐng)導(dǎo)者,來進(jìn)行監(jiān)聽,當(dāng)收到請求時,它選出一個跟隨者線程作為新的領(lǐng)導(dǎo)者進(jìn)行偵聽,自己則對請求進(jìn)行處理,結(jié)束后,到跟隨者隊(duì)列中進(jìn)行等待。

(二)多線程的內(nèi)存池優(yōu)化

  普通的內(nèi)存池一旦應(yīng)用到多線程中,都面臨著鎖競爭的問題,在stlport所做的對于字符串性能的測試中,當(dāng)使用兩個線程時,它所使用的內(nèi)存池node_allocator性能已經(jīng)出現(xiàn)明顯的下降。所以對于多線程而言,一個線程一個內(nèi)存池是一個很好的選擇。要實(shí)現(xiàn)這種設(shè)計(jì),面臨的第一個問題,是內(nèi)存塊的跨線程使用問題,即一個內(nèi)存塊,可能在A線程中申請,但可能在B線程中釋放。
  在GCC的STL實(shí)現(xiàn)libstdc++中,有一個多線程內(nèi)存池的實(shí)現(xiàn)(mt_allocator)。它是node_allocator(現(xiàn)在叫pool_allocator) 的多線程版本。它還有一個優(yōu)點(diǎn)就是所有參數(shù)都是可配置的。
  它的設(shè)計(jì)思路如下:每個線程一個內(nèi)存池,同時還有一個全局的內(nèi)存池。每個線程可以訪問自己的內(nèi)存池,同時可在鎖保護(hù)下訪問全局內(nèi)存池。申請的每一個內(nèi)存塊中,都有一個線程ID,以標(biāo)明是從哪個線程中申請的。
  申請過程:首先向所在線程申請,若本線程沒有空閑塊,則向全局內(nèi)存池申請。
  釋放過程:直接歸還到本線程的空閑鏈中。還有一個問題,為了防止線程內(nèi)存池之間的不均衡,或者某一個線程中的空閑鏈過長,可以設(shè)置一個水位標(biāo),當(dāng)超過這個水位標(biāo)時,把釋放的內(nèi)存直接歸還到全局內(nèi)存池中。

posted on 2008-03-06 00:09 eXile 閱讀(7015) 評論(9)  編輯 收藏 引用 所屬分類: 網(wǎng)絡(luò)開發(fā)

評論

# re: 高性能服務(wù)器的多線程策略[未登錄] 2008-03-06 08:30 cppexplore

頂 不錯
內(nèi)存申請針對線程內(nèi)還是跨線程 決定是否采用加鎖策略,為了差異化這種處理,在內(nèi)存池上進(jìn)行進(jìn)一步的封裝 不錯!  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略[未登錄] 2008-03-06 14:42 cppexplore

第一部分(2)的結(jié)論不太對。
主線程偵聽,預(yù)派生的線程處理業(yè)務(wù),這個稱為模型A吧.
leader/follow這里稱為B.
我服務(wù)器的4核的SMP,linux 2.6內(nèi)核,測試工具ab,小壓力的測試不說了,都能達(dá)到17000左右,測試項(xiàng)如下:
ab -c 4000 -n 40000 http://172.24.252.248:5000/
預(yù)派生線程數(shù)量都是4。
壓力測試的結(jié)果是:
業(yè)務(wù)邏輯簡單的時候(僅僅是讀數(shù)據(jù),然后resonse200OK):
B模型多次測試平均的結(jié)果大約是每秒8500。
而A模型的性能和緩存隊(duì)列的大小有關(guān),當(dāng)緩存大小取500時,和B模型性能相當(dāng)。取1000,測試的平均結(jié)果大約是每秒9500。取100則降低為6500左右


猜測原因:linux的pthread_mutex_t既然是非暫停點(diǎn)的實(shí)現(xiàn),那么它的性能一定很好,遠(yuǎn)好于條件鎖、信號燈等。pthread_cond_t則是暫停點(diǎn)的實(shí)現(xiàn),可能把線程推向睡眠。增大緩存大小,可以有效減少對pthread_cond_t的系統(tǒng)調(diào)用。

另根據(jù)對各種模型的測試,accept的處理速度非常非常的塊,簡單的業(yè)務(wù)處理時間也要比accept的處理低一個數(shù)量級。因此單一線程處理accept,可以盡快建立三次握手,進(jìn)入緩存隊(duì)列等待。

因此猜測 如果業(yè)務(wù)為復(fù)雜邏輯(實(shí)際測試加了4個循環(huán)相加,一句打印的log)的話,模型B的性能將進(jìn)一步下降。增大業(yè)務(wù)處理復(fù)雜度后的結(jié)果果然如此,模型B的處理降低為6500左右,而模型A在1000的緩存下,每秒的處理能力還是9500左右。  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略[未登錄] 2008-03-06 15:14 cppexplore

說錯了 呵呵 三次握手在accept前就完成了 從完成隊(duì)列里取而已  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略 2008-03-06 20:54 true

leader/followers模式不適合處理爆發(fā)  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略 2008-03-06 22:36 eXile

@cppexplore
謝謝指正,不過cppexplore這么快就把測試模型搞出來,厲害,應(yīng)該用的是什么庫吧,Apache?
  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略[未登錄] 2008-03-07 08:16 cppexplore

@eXile
呵呵,還沒用庫。
是我最近正在梳理網(wǎng)絡(luò)模型。這幾天正在寫各種模型的網(wǎng)絡(luò)程序并測試性能。
等搞完這個再看各種庫是如何實(shí)現(xiàn)這些模型以及其性能如何。  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略[未登錄] 2008-03-08 10:55 小白

領(lǐng)導(dǎo)者這個處理accept比較好。

服務(wù)器只要不用弱智算法,以及處理好內(nèi)存和線程問題,就是高性能的服務(wù)器。

服務(wù)器雖然把網(wǎng)絡(luò)底層作為心臟,把架構(gòu)作為骨架,但是還有一個很大的部分,就是血肉,也就是服務(wù)器的邏輯處理。

很多人談高性能服務(wù)器的時候,忽略了邏輯處理,只是在談網(wǎng)絡(luò)底層的問題,這是非常錯誤的。

網(wǎng)絡(luò)底層,只要符合我上面說的那個高性能服務(wù)器的標(biāo)準(zhǔn),就可以在真正的服務(wù)器硬件上跑得很好了。

接下來,我們需要面對的就是邏輯處理給我們的挑戰(zhàn)。無論在哪個行業(yè),都應(yīng)該仔細(xì)謹(jǐn)慎的去對邏輯處理進(jìn)行設(shè)計(jì)。

  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略 2008-03-12 12:41 eXile

在現(xiàn)在gcc的mt_allocator實(shí)現(xiàn)中,有一個bug, 就是對一個計(jì)數(shù)器(_M_use)并沒有采用原子計(jì)數(shù),這個計(jì)數(shù)器主要用來控制空閑鏈的長度,所以它并不會導(dǎo)致程序異常,但是可能會影響到程序性能,不過如果采用原子計(jì)數(shù),則有另一個性能上的擔(dān)憂。這個問題直到最新的gcc4.3中才得到解決。  回復(fù)  更多評論   

# re: 高性能服務(wù)器的多線程策略 2011-08-29 19:40 cingoli

小白 說得非常好啊,我做網(wǎng)游服務(wù)器開發(fā),著眼點(diǎn)也在這里。

不過,非本質(zhì)復(fù)雜性 和 本質(zhì)復(fù)雜性 都要處理好才好吧。無論性能還是復(fù)雜度。  回復(fù)  更多評論   

導(dǎo)航

<2025年11月>
2627282930311
2345678
9101112131415
16171819202122
23242526272829
30123456

統(tǒng)計(jì)

常用鏈接

留言簿(18)

隨筆分類

隨筆檔案

服務(wù)器編程

搜索

最新評論

閱讀排行榜

評論排行榜

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            91久久国产综合久久蜜月精品 | 欧美一区国产二区| 欧美国内亚洲| 亚洲日本aⅴ片在线观看香蕉| 老司机精品导航| 久久婷婷国产综合国色天香| 激情欧美一区二区| 欧美激情五月| 欧美日韩在线视频首页| 亚洲欧美国产日韩中文字幕| 亚洲在线免费| 一区在线播放| 亚洲精品国产精品国自产观看| 欧美日韩a区| 亚洲欧美偷拍卡通变态| 小辣椒精品导航| 亚洲国产专区| 99精品欧美一区二区三区| 国产精品毛片高清在线完整版| 久久xxxx精品视频| 美女在线一区二区| 亚洲视频在线观看网站| 亚洲在线观看免费视频| 在线观看欧美亚洲| 亚洲最快最全在线视频| 国产主播一区二区三区| 亚洲人成亚洲人成在线观看| 国产酒店精品激情| 欧美国产另类| 国产精品久久久久影院色老大 | 海角社区69精品视频| 欧美v国产在线一区二区三区| 欧美激情一区在线观看| 欧美一区二区三区在线| 牛牛精品成人免费视频| 午夜精品一区二区三区在线播放| 久久久久久97三级| 中文国产亚洲喷潮| 久久久综合网| 亚洲欧美综合另类中字| 欧美成人黄色小视频| 久久国产精品电影| 欧美经典一区二区三区| 久久久久久一区| 欧美日韩一区二区精品| 久久狠狠一本精品综合网| 欧美日韩91| 亚洲成色777777女色窝| 国产一区二区三区久久久久久久久| 91久久精品一区二区三区| 极品少妇一区二区三区| 亚洲尤物精选| 亚洲性xxxx| 欧美精品一区二区三区高清aⅴ| 欧美一区二区三区在线观看| 欧美日韩亚洲高清一区二区| 欧美高清在线观看| 精品动漫3d一区二区三区| 亚洲欧美日本精品| 亚洲欧美精品在线| 欧美日韩国内自拍| 亚洲人体一区| 亚洲精品永久免费精品| 久热国产精品| 欧美韩国一区| 亚洲国产成人一区| 久热re这里精品视频在线6| 久久久久成人精品免费播放动漫| 国产模特精品视频久久久久| 亚洲特级片在线| 欧美一级电影久久| 国产精品手机在线| 亚洲欧美一区二区视频| 性色av香蕉一区二区| 国产日韩亚洲欧美综合| 亚洲欧美变态国产另类| 欧美有码视频| 国产主播一区二区三区| 久久精选视频| 欧美激情一区二区三区在线视频观看 | 久久精品30| 国产婷婷成人久久av免费高清| 亚洲伊人一本大道中文字幕| 欧美一区二区三区四区在线观看地址| 国产精品女同互慰在线看| 亚洲在线一区二区三区| 欧美一区二区免费| 影音先锋亚洲电影| 欧美国产日韩一区| 日韩亚洲一区二区| 久久高清国产| 亚洲国产成人在线| 欧美日韩午夜剧场| 欧美一区三区三区高中清蜜桃| 久久久精品网| 亚洲免费电影在线| 国产欧美69| 老司机免费视频一区二区三区| 亚洲黄色成人网| 午夜精品美女久久久久av福利| 国产一区三区三区| 欧美久久电影| 欧美影院成人| 91久久久亚洲精品| 久久国产精品亚洲va麻豆| 在线观看91精品国产入口| 欧美精品激情| 欧美在线视频导航| 亚洲精品综合精品自拍| 久久国内精品视频| 一区二区久久| 精品999网站| 欧美吻胸吃奶大尺度电影| 欧美在线免费观看| 这里只有视频精品| 欧美国产国产综合| 久久精品综合一区| 亚洲一区二区成人在线观看| 在线观看久久av| 国产欧美视频一区二区三区| 免费不卡亚洲欧美| 久久国产精品99国产精| 在线亚洲免费| 亚洲人午夜精品| 美女精品国产| 欧美在线观看视频一区二区| 日韩一级片网址| 亚洲电影第1页| 国产精品女人网站| 欧美性大战久久久久久久蜜臀| 久久蜜桃精品| 久久成人这里只有精品| 亚洲专区一区二区三区| 亚洲作爱视频| 亚洲免费观看| 亚洲毛片av在线| 欧美激情中文不卡| 蜜桃视频一区| 美女视频黄 久久| 久久精品视频在线免费观看| 亚洲一区二区3| 亚洲亚洲精品三区日韩精品在线视频 | 午夜精品一区二区三区在线播放| 日韩视频免费观看高清完整版| 欧美黄色精品| 欧美国产欧美亚洲国产日韩mv天天看完整| 久久国产色av| 久久久欧美一区二区| 久久国产精品网站| 久久久久久久网站| 久久久亚洲影院你懂的| 久久久亚洲欧洲日产国码αv| 欧美在线电影| 久久免费偷拍视频| 毛片av中文字幕一区二区| 久久久亚洲欧洲日产国码αv| 久久久久久久久久久久久久一区| 久久久www免费人成黑人精品| 欧美一区二区视频97| 久久精品国产精品亚洲| 久久久久久久成人| 欧美国产一区视频在线观看| 欧美激情无毛| 亚洲最新中文字幕| 欧美一区二区三区在| 久久精品国产综合精品| 免费一级欧美在线大片| 欧美激情久久久久| 国产精品社区| 一区二区三区我不卡| 亚洲精品一级| 午夜视频在线观看一区二区| 久久精品成人| 欧美国产精品v| 一区二区三区视频观看| 欧美一进一出视频| 欧美福利一区二区| 欧美午夜在线| 影音欧美亚洲| 亚洲图片在线| 狂野欧美激情性xxxx| 亚洲国产三级网| 亚洲午夜国产一区99re久久 | 亚洲国产成人久久| 亚洲无限av看| 欧美粗暴jizz性欧美20| 国产精品一级二级三级| 在线看片日韩| 小黄鸭精品密入口导航| 欧美韩日视频| 性xx色xx综合久久久xx| 欧美国产先锋| 国产一区香蕉久久| 中文一区二区| 麻豆av一区二区三区久久| 在线中文字幕一区| 欧美激情综合网| 伊人久久噜噜噜躁狠狠躁| 亚洲一区免费观看| 亚洲激情视频在线|