• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            xiaoxiaoling

            C++博客 首頁 新隨筆 聯(lián)系 聚合 管理
              17 Posts :: 2 Stories :: 9 Comments :: 0 Trackbacks


            dpdk是通過許多不同的緯度來加速包處理的,其中主要包括:

             

            hugepage大頁內(nèi)存(進(jìn)程使用的是虛擬地址,一般頁表(4k)能映射的虛擬地址空間有限,使用大頁能減少換頁次數(shù)提高cache命中,通過mmap把大頁映射到用戶態(tài)的虛擬地址空間有用過mmap的都知道這是實現(xiàn)共享內(nèi)存的手段,所以dpdk還支持多進(jìn)程共享內(nèi)存)

             

            cache預(yù)取 (每次預(yù)讀當(dāng)前數(shù)據(jù)相鄰前后的數(shù)據(jù)),批量操作數(shù)據(jù),cache line對齊(通過浪費一點內(nèi)存將要操作的數(shù)據(jù)對齊)

             

            接管了網(wǎng)卡用戶態(tài)驅(qū)動使用輪詢而不是網(wǎng)卡中斷

             

            將網(wǎng)卡rx tx隊列映射到用戶態(tài)空間實現(xiàn)真正的零拷貝(傳統(tǒng)堆棧至少也得一次拷貝,因為隊列空間在內(nèi)核而內(nèi)核和用戶態(tài)使用不同的地址空間)(傳統(tǒng)堆棧為了支持通用性,例如ipx等其他網(wǎng)絡(luò),將包處理過程分了很多層次,層之間的接口標(biāo)準(zhǔn)統(tǒng)一數(shù)據(jù)結(jié)構(gòu)就需要轉(zhuǎn)換,無形中帶來了巨大的成本,如osi七層模型而實用的就是tcp/ip四層模型)

             

            線程綁定cpu

             

            支持NUMA,不同的core屬于不同的node,每個node有自己的mempool減少沖突

             

            無鎖環(huán)形隊列(沖突發(fā)生時也是一次cas的開銷)

             

            dpdk通過tools/dpdk-setup.sh的腳本,通過編譯、掛載內(nèi)核模塊, 綁定網(wǎng)卡(先把網(wǎng)卡ifconfig down),設(shè)置hugepage后就可以使用了。

             

             

            在內(nèi)核模塊igb加載時,會注冊pci設(shè)備驅(qū)動

            static struct pci_driver igbuio_pci_driver = {

            .name = "igb_uio",

            .id_table = NULL,

            .probe = igbuio_pci_probe,

            .remove = igbuio_pci_remove,

            };

             

            在綁定網(wǎng)卡時,會調(diào)用igbuio_pci_probe,使用用戶態(tài)驅(qū)動uio接管網(wǎng)卡(中斷處理、mmap映射設(shè)備內(nèi)存到用戶空間)

            系統(tǒng)啟動時,bios會將設(shè)備總線地址信息記錄在/sys/bus/pci/devices,dpdk程序啟動時會去這里掃描pci設(shè)備,根據(jù)不同類型的NIC有對應(yīng)的初始化流程。在后面配置隊列的時候會把用戶態(tài)的隊列內(nèi)存地址通過硬件指令交給NIC,從而實現(xiàn)零拷貝。


             

            如果NIC收到包,會做標(biāo)記,輪詢的時候通過標(biāo)記取數(shù)據(jù)包

            while (nb_rx < nb_pkts) {

            /*

             * The order of operations here is important as the DD status

             * bit must not be read after any other descriptor fields.

             * rx_ring and rxdp are pointing to volatile data so the order

             * of accesses cannot be reordered by the compiler. If they were

             * not volatile, they could be reordered which could lead to

             * using invalid descriptor fields when read from rxd.

             */

            rxdp = &rx_ring[rx_id];

            staterr = rxdp->wb.upper.status_error;

            if (! (staterr & rte_cpu_to_le_32(E1000_RXD_STAT_DD)))

            break;

            rxd = *rxdp;

            發(fā)包的輪詢就是輪詢發(fā)包結(jié)束的硬件標(biāo)志位,硬件發(fā)包完成會寫回標(biāo)志位,驅(qū)動發(fā)現(xiàn)后再釋放對應(yīng)的描述符和緩沖塊。

             

            KNI

            通過創(chuàng)建一個虛擬網(wǎng)卡,將收到的包丟給協(xié)議棧

             /* 發(fā)送skb到協(xié)議棧 */

                        /* Call netif interface */

                        netif_receive_skb(skb);

             

            POWER

            在負(fù)載小的時候沒有必要使用輪詢模式,這時可以打開網(wǎng)卡中斷 使用eventfd  epoll通知用戶層

             

            Ring

            無鎖環(huán)形隊列的核心就是操作頭尾索引,先將頭尾索引賦給臨時變量,再把尾索引往后跳n個位置,利用cas判斷頭如果還是在原來的位置就指向尾否則就重復(fù)這個過程,然后在操作中間跳過的n個元素就是安全的了,此時頭尾索引應(yīng)該指向同一個位置,如果不同應(yīng)該是有別的線程也在操作,重復(fù)等待即可。(這里有個細(xì)節(jié),索引是只加不減的,因為是環(huán)形隊列索引又是unsigned 32bits,所以每次取數(shù)據(jù)前把索引模隊列長度-1, uint32_t mask;           /**< Mask (size-1) of ring. */即可)

             

            Windows下使用vmware虛擬機(jī)的時候出現(xiàn)EAL: Error reading from file descriptor,根據(jù)網(wǎng)上的說法打了patch還是不行,后來嘗試掛載內(nèi)核模塊的時候不加載vfio模塊就可以了

             

            posted on 2017-02-05 14:08 clcl 閱讀(890) 評論(0)  編輯 收藏 引用

            只有注冊用戶登錄后才能發(fā)表評論。
            網(wǎng)站導(dǎo)航: 博客園   IT新聞   BlogJava   博問   Chat2DB   管理


            免费久久人人爽人人爽av| 精品久久久无码人妻中文字幕豆芽| 国产∨亚洲V天堂无码久久久| 久久综合给合久久国产免费| 亚洲中文字幕无码久久综合网| 国产精品久久久久影院嫩草| 久久久无码精品午夜| 五月丁香综合激情六月久久| 久久国产成人精品国产成人亚洲| 一级做a爰片久久毛片看看| 成人久久综合网| 久久久久久久久久久精品尤物| 国产一区二区三区久久精品| 亚洲综合久久夜AV | 精品久久久久久无码人妻热 | 欧美久久综合性欧美| 久久久久亚洲精品男人的天堂| 久久精品国产亚洲AV香蕉| 伊人色综合九久久天天蜜桃| 国产一区二区精品久久| 人妻无码久久一区二区三区免费| 久久久无码精品午夜| 一本久久久久久久| 国产精品女同久久久久电影院| 思思久久99热免费精品6| 大香网伊人久久综合网2020| 精品久久久久香蕉网| 香蕉久久夜色精品升级完成| 久久亚洲国产成人影院| 久久久久久久久久免免费精品 | 国产日韩久久久精品影院首页| 久久久久久久97| 性欧美丰满熟妇XXXX性久久久| 久久这里都是精品| 一级做a爰片久久毛片免费陪 | 久久综合久久综合九色| 精品999久久久久久中文字幕| 久久国产亚洲精品无码| 久久久老熟女一区二区三区| 日产精品久久久一区二区| 久久久久亚洲AV成人片|