• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            woaidongmao

            文章均收錄自他人博客,但不喜標題前加-[轉貼],因其丑陋,見諒!~
            隨筆 - 1469, 文章 - 0, 評論 - 661, 引用 - 0
            數(shù)據(jù)加載中……

            大文件內數(shù)據(jù)排序問題:采用文件映射內存技術

             

            http://archive.cnblogs.com/a/1773844/

             

            對文件內數(shù)據(jù)排序時,如果文件較小,可以將文件內數(shù)據(jù)全部讀入內存時,通過內排序方法如冒泡,快速排序等方法,可以很方便的實現(xiàn)。

            但如果文件大小超過了內存大小,僅僅使用內排序就不能達到目標了。

            解決這個問題,有一個方法是大名鼎鼎的外排序:將大文件分成若干個小文件,對小文件進行內排序,然后將各個有序小文件組合成大的有序文件。外排序方法需要反復的讀寫文件,時間復雜度較高。

            下面的代碼使用的是win32API提供的文件映射內存方法,能減少文件讀寫次數(shù),提高效率。

            /**

            說明:程序首先生成由隨機整數(shù)組成的文件,然后利用文件映射內存訪問數(shù)據(jù),將數(shù)據(jù)進行升序排序后輸出的另一個文件。

            */

            #include <iostream>

            #include <ctime>

            #include <vector>

            #include <algorithm>

            #include <Windows.h>

            #include <string>

            using namespace std;

             

            #define ORIGIN_FILE_NAME  "data"  //數(shù)據(jù)文件名

            #define NUMBER_COUNT 1024         //隨機生成的整數(shù)數(shù)量

             

            int GenerateOriginDataFile();//生成數(shù)據(jù)文件:由n個隨機整數(shù)組成

            int SortFile();//文件排序

             

            int main()

            {

                    GenerateOriginDataFile();

                    DWORD dwStart = GetTickCount();

                    SortFile();

                    DWORD dwEnd = GetTickCount();

                    cout << "running time spend:" << dwEnd - dwStart << endl;

                    return 0;

            }

            int SortFile()

            {

                    // 創(chuàng)建文件對象

                    HANDLE hFile = CreateFile(ORIGIN_FILE_NAME, GENERIC_READ | GENERIC_WRITE,

                           0, NULL, OPEN_EXISTING, FILE_ATTRIBUTE_NORMAL, NULL);

                    if (hFile == INVALID_HANDLE_VALUE)

                    {

                           printf("創(chuàng)建文件對象失敗,錯誤代碼:%drn", GetLastError());

                           return -1;

                    }

                    // 創(chuàng)建文件映射對象

                    HANDLE hFileMap = CreateFileMapping(hFile, NULL, PAGE_READWRITE, 0, 0, NULL);

                    if (hFileMap == NULL)

                    {

                           printf("創(chuàng)建文件映射對象失敗,錯誤代碼:%drn", GetLastError());

                           return -1;

                    }

                    // 得到系統(tǒng)分配粒度

                    SYSTEM_INFO SysInfo;

                    GetSystemInfo(&SysInfo);

                    DWORD dwGran = SysInfo.dwAllocationGranularity;

                    // 得到文件尺寸

                    DWORD dwFileSizeHigh;

                    __int64 qwFileSize = GetFileSize(hFile, &dwFileSizeHigh);

                    qwFileSize |= (((__int64)dwFileSizeHigh) << 32);

                    // 關閉文件對象

                    CloseHandle(hFile);

                    // 偏移地址

                    __int64 qwFileOffset = 0;

                    // 塊大小

                    DWORD dwBlockBytes = 1000 * dwGran;

                    if (qwFileSize < 1000 * dwGran)

                           dwBlockBytes = (DWORD)qwFileSize;

                    while (qwFileSize > 0)

                    {

                           // 映射視圖

                           LPBYTE lpbMapAddress = (LPBYTE)MapViewOfFile(hFileMap,FILE_MAP_ALL_ACCESS,

                                   (DWORD)(qwFileOffset >> 32), (DWORD)(qwFileOffset & 0xFFFFFFFF),

                                   dwBlockBytes);

                           if (lpbMapAddress == NULL)

                           {

                                   printf("映射文件映射失敗,錯誤代碼:%drn", GetLastError());

                                   return -1;

                           }

                           const int NUMBER_MAX_LENGTH = 6;

                           // 對映射的視圖進行訪問

                           char temp[NUMBER_MAX_LENGTH + 1] = {0};

                           int number = 0;

                           //直接操作內存lpbMapAddress,進行冒泡排序

                           for(DWORD i = 0; i < dwBlockBytes; i+=NUMBER_MAX_LENGTH)

                           {

                                   for (int j=0;j<NUMBER_MAX_LENGTH;j++)

                                   {

                                           temp[j] = *(lpbMapAddress + i + j);

                                   }

                                   number = atoi(temp);

                                   for (int j=i+NUMBER_MAX_LENGTH;j<dwBlockBytes;j+=NUMBER_MAX_LENGTH)

                                   {

                                           for (int k=0;k<NUMBER_MAX_LENGTH;k++)

                                           {

                                                  temp[k] = *(lpbMapAddress + j + k);

                                           }

                                           if (number > atoi(temp))

                                           {

                                                  for (int k=0;k<NUMBER_MAX_LENGTH;k++)

                                                  {

                                                          *(lpbMapAddress + j + k) = *(lpbMapAddress + i + k);

                                                          *(lpbMapAddress + i + k) = temp[k];

                                                  }

                                                  number = atoi(temp);

                                           }

                                   }

                           }

                           // 撤消文件映像

                           UnmapViewOfFile(lpbMapAddress);

                           // 修正參數(shù)

                           qwFileOffset += dwBlockBytes;

                           qwFileSize -= dwBlockBytes;

                    }

                    // 關閉文件映射對象句柄

                    CloseHandle(hFileMap);

                    return 0;

            }

            int GenerateOriginDataFile()

            {

                    FILE* pFile = fopen(ORIGIN_FILE_NAME,"w");   

                    srand((unsigned)time(0));

                    for (int i=0;i<NUMBER_COUNT;i++)

                    {

                           long ran_num = rand();

                           fprintf(pFile,"%-5d ",ran_num);                                     

                    }

                    fclose(pFile);

                    return 0;

            }

             

            posted on 2011-02-16 18:01 肥仔 閱讀(3148) 評論(5)  編輯 收藏 引用 所屬分類: Windows開發(fā)

            評論

            # re: 大文件內數(shù)據(jù)排序問題:采用文件映射內存技術  回復  更多評論   

            大哥 你的代碼對我太有用了,我在考慮 spoolsv.exe的后臺代碼 這正是我需要的 延遲打印的程序 呵呵呵
            2013-03-15 01:59 | 井廉超

            # re: 大文件內數(shù)據(jù)排序問題:采用文件映射內存技術  回復  更多評論   

            我正在尋找這樣的代碼,最后我找到了你的網站之內。謝謝你這段代碼傳授給我們,并繼續(xù)發(fā)布一個有用和有益的內容。所有最優(yōu)秀的。

            # re: 大文件內數(shù)據(jù)排序問題:采用文件映射內存技術  回復  更多評論   

            こんにちは!この記事では、はるかに良い書き込むことができませんでした!このポストを見てみると、私の以前のルームメイトのことを思い出す!彼は継続的にこのことについて話し続けた。私は最も確かに彼にこの記事をお送りします。かなり確信して彼は偉大な読み取りがあるでしょう。共有のための多くの感謝!

            # re: 大文件內數(shù)據(jù)排序問題:采用文件映射內存技術  回復  更多評論   

            は!この記事では、はるかに良い書き込むことができませんると、私の以前のルームメイトのことをでした!
            2016-05-06 20:55 | Essays-shark.net

            # re: 大文件內數(shù)據(jù)排序問題:采用文件映射內存技術  回復  更多評論   

            あなたの教授が望んでいた紙を提供することができるので、あなたが期限と提出の期日を心配する必要はありません
            2016-05-26 15:12 | best-custom-essays.com
            久久久久久久亚洲Av无码| 亚洲国产成人精品91久久久 | 亚洲一区二区三区日本久久九| 久久精品人人做人人爽电影蜜月| 亚洲av成人无码久久精品| 国产精品一久久香蕉产线看| 亚洲午夜无码AV毛片久久| 99久久精品日本一区二区免费| 久久精品亚洲精品国产欧美| 亚洲中文字幕无码久久2020| 国产精品午夜久久| 国产香蕉97碰碰久久人人| 99久久777色| 亚洲国产综合久久天堂 | 精品久久久久久亚洲| 久久受www免费人成_看片中文| 久久九九有精品国产23百花影院| 久久人妻少妇嫩草AV无码专区| 欧美亚洲另类久久综合| 久久综合噜噜激激的五月天| 午夜精品久久久久久久| 久久一区二区三区免费| 色狠狠久久综合网| 午夜精品久久久久久久无码| 久久精品嫩草影院| 韩国免费A级毛片久久| 欧美午夜精品久久久久免费视| 久久免费看黄a级毛片| 久久99热只有频精品8| 77777亚洲午夜久久多喷| 综合久久一区二区三区 | 亚洲精品tv久久久久久久久| 国产精品久久久久蜜芽| 伊人久久综合精品无码AV专区| 久久亚洲精品无码播放| 亚洲欧洲精品成人久久奇米网| 亚洲精品NV久久久久久久久久| 久久久久久午夜精品| 午夜福利91久久福利| 日本国产精品久久| 久久天天躁狠狠躁夜夜躁2014|