青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品

colorful

zc qq:1337220912

 

Unicode和UTF-8之間的轉(zhuǎn)換詳解

ps. 轉(zhuǎn)的,代碼上有錯誤的,沒仔細看,只看了下思路思想,很不錯,特別鄙視那種死咬人家錯誤不放的人,嗎的,誰寫代碼沒個錯誤,誰能代碼一寫出來就不用改不用來回推敲. 人家目的是向你介紹思想,思想你明白了不就行了.
=======================================================
最近在用VC++開發(fā)一個小工具,平時用慣了.NET,用起VC++最郁悶的就是字符串 處理。當然最最讓人難于琢磨的就是字符集,編碼之間的轉(zhuǎn)換。通過這幾天的研究,終于明白了Unicode和UTF-8之間編碼的區(qū)別。Unicode是一 個字符集,而UTF-8是Unicode的其中一種,Unicode是定長的都為雙字節(jié),而UTF-8是可變的,對于漢字來說Unicode占有的字節(jié)比 UTF-8占用的字節(jié)少1個字節(jié)。Unicode為雙字節(jié),而UTF-8中漢字占三個字節(jié)。
                       
網(wǎng)魂小兵 http://xdotnet.cnblogs.com
    UTF-8編碼字符理論上可以最多到6個字節(jié)長,然而16位BMP(
Basic Multilingual Plane)字符最多只用到3字節(jié)長。下面看一下UTF-8編碼表:

        U-00000000 - U-0000007F: 0xxxxxxx
        U-00000080 - U-000007FF: 110xxxxx 10xxxxxx
        U-00000800 - U-0000FFFF: 1110xxxx 10xxxxxx 10xxxxxx
        U-00010000 - U-001FFFFF: 11110xxx 10xxxxxx 10xxxxxx 10xxxxxx
        U-00200000 - U-03FFFFFF: 111110xx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx
        U-04000000 - U-7FFFFFFF: 1111110x 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx


    xxx 的位置由字符編碼數(shù)的二進制表示的位填入, 越靠右的 x 具有越少的特殊意義,只用最短的那個足夠表達一個字符編碼數(shù)的多字節(jié)串。 注意在多字節(jié)串中, 第一個字節(jié)的開頭"1"的數(shù)目就是整個串中字節(jié)的數(shù)目。而第一行中以0開頭,是為了兼容ASCII編碼,為一個字節(jié),第二行就為雙字節(jié)字符串,第三行為3 字節(jié),如漢字就屬于這種,以此類推。(個人認為:其實我們可以簡單的把前面的1的個數(shù)看成字節(jié)數(shù))
                         網(wǎng)魂小兵 http://xdotnet.cnblogs.com
    為了要將Unicode轉(zhuǎn)換為UTF-8,當然要知道他們的區(qū)別到底在什么地方。下面來看一下,在Unicode中的編碼是怎樣轉(zhuǎn)換成UTF-8的,在UTF-8中,如果一個字符的字節(jié)小于0x80(128)則為ASCII字符,占一個字節(jié),可以不用轉(zhuǎn)換,因為UTF-8兼容ASCII編碼。假如在Unicode中漢字“你”的編碼為“u4F60”,把它轉(zhuǎn)換為二進制為100111101100000,然后按照UTF-8的方法進行轉(zhuǎn)換。可以將Unicode二進制從地位往高位取出二進制數(shù)字,每次取6位,如上述的二進制就可以分別取出為如下所示的格式,前面按格式填補,不足8位用0填補。

      
           unicode:  100111101100000                  4F60

           utf-8:    11100100,10111101,10100000       E4BDA0


    從上面就可以很直觀的看出Unicode到UTF-8之間的轉(zhuǎn)換,當然知道了UTF-8的格式后,就可以進行逆運算,就是按照格式把它在二進制中的相應(yīng)位置上取出,然后在轉(zhuǎn)換就是所得到的Unicode字符了(這個運算可以通過“位移”來完成)。
                     
網(wǎng)魂小兵 http://xdotnet.cnblogs.com
    如上述的“你”的轉(zhuǎn)換,由于其值大于0x800小于0x10000,因此可以判斷為三字節(jié)存儲,則最高位需要向右移“12”位再根據(jù)三字節(jié)格式的最高位為 11100000(0xE0)求或(|)就可以得到最高位的值了。同理第二位則是右移“6”位,則還剩下最高位和第二位的二進制值,可以通過與 111111(0x3F)求按位于(&)操作,再和11000000(0x80)求或(|)。第三位就不用移位了,只要直接取最后六位(與 111111(ox3F)取&),在與11000000(0x80)求或(|)。OK了,轉(zhuǎn)換成功!在VC++中的代碼如下所示(Unicode到UTF-8的轉(zhuǎn)換)。

        1 const wchar_t pUnicode = L"";
        2 char utf8[3+1];
        3 memset(utf8,0,4);
        4 utf8[0= 0xE0|(pUnicode>>12);
        5 utf8[1= 0x80|((pUnicode>>6)&0x3F);
        6 utf8[2= 0x80|(pUnicode&0x3F);
        7 utf8[3= "\0";
        8 //char[4]就是UTF-8的字符“你”了。

    當然在UTF-8到Unicode的轉(zhuǎn)換也是通過移位等來完成的,就是把UTF-8那些格式相應(yīng)的位置的二進制數(shù)給揪出來。在上述例子中“你”為三個字節(jié),因此要每個字節(jié)進行處理,有高位到低位進行處理。在UTF-8中“你”為
11100100,10111101,10100000。從高位起即第一個字節(jié)11100100就是把其中的"0100"給取出來,這個很簡單只要和11111(0x1F)取與(&),由三字節(jié)可以得知最到位肯定位于12位之前,因為每次取六位。所以還要將得到的結(jié)果左移12位,最高位也就這樣完成了0100,000000,000000。而第二位則是要把“111101”給取出來,則只需將第二字節(jié)10111101 和111111(0x3F)取與(&)。在將所得到的結(jié)果左移6位與最高字節(jié)所得的結(jié)果取或(|),第二位就這樣完成了,得到的結(jié)果為 0100,111101,000000。以此類推最后一位直接與111111(0x3F)取與(&),再與前面所得的結(jié)果取或(|)即可得到結(jié)果 0100,111101,100000。OK,轉(zhuǎn)換成功!在VC++中的代碼如下所示(UTF-8Unicode的轉(zhuǎn)換)。

    1 //UTF-8格式的字符串
    2 const char* utf8 = "";
    3 wchar_t unicode;
    4 unicode = (utf8[0& 0x1F<< 12;
    5 unicode |= (utf8[1& 0x3F<< 6;
    6 unicode |= (utf8[2& 0x3F);
    7 //unicode is ok!
                            網(wǎng)魂小兵 http://xdotnet.cnblogs.com
    當然在編程過程中不可能只轉(zhuǎn)換一個字符,這里需要注意的是字符的長度一定要算清楚,不然會帶來...以上就是我這幾天研究的結(jié)果,至于Unicode的轉(zhuǎn)換為GB2312在MFC中Windows有自帶的API(WideCharToMultiByte)可以轉(zhuǎn)換。這樣也就能夠?qū)TF-8格式轉(zhuǎn)換為GB2312了,這里就不再贅述,如果大家有更好的方法希望指教。

posted on 2012-07-18 14:50 多彩人生 閱讀(191) 評論(0)  編輯 收藏 引用


只有注冊用戶登錄后才能發(fā)表評論。
網(wǎng)站導(dǎo)航: 博客園   IT新聞   BlogJava   博問   Chat2DB   管理


導(dǎo)航

統(tǒng)計

常用鏈接

留言簿(3)

隨筆分類

隨筆檔案

搜索

最新評論

閱讀排行榜

評論排行榜

青青草原综合久久大伊人导航_色综合久久天天综合_日日噜噜夜夜狠狠久久丁香五月_热久久这里只有精品
  • <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>
            欧美风情在线观看| 欧美一区二区免费观在线| 中文国产成人精品| 亚洲第一福利社区| 久久久久看片| 欧美成人免费全部| 亚洲国产精品日韩| 国产美女在线精品免费观看| 亚洲午夜国产一区99re久久| 午夜激情综合网| 一区二区三区久久网| 女人天堂亚洲aⅴ在线观看| 欧美专区在线观看一区| 久久精品国产999大香线蕉| 久久精品网址| 亚洲丶国产丶欧美一区二区三区| 久久一区激情| 亚洲国产精品专区久久| 日韩亚洲国产精品| 亚洲欧美精品suv| 久久九九免费视频| 欧美日韩高清在线观看| 国产欧美一区二区三区久久人妖| 韩国三级电影久久久久久| 亚洲国产福利在线| 亚洲一区二区四区| 久久影院午夜片一区| 亚洲激情图片小说视频| 亚洲一区二区三区精品视频 | 亚洲国产91色在线| 亚洲伦理精品| 久久精品二区三区| 亚洲国产另类精品专区| 亚洲一区二区日本| 欧美激情小视频| 国产一区二区久久精品| aa级大片欧美三级| 暖暖成人免费视频| 欧美一区二区三区在线观看| 欧美激情在线免费观看| 国产一区二区中文| 亚洲性感美女99在线| 美女免费视频一区| 亚洲一区二区三区四区视频| 欧美3dxxxxhd| 国内精品久久久久影院优| 亚洲一区二区三区乱码aⅴ| 老司机一区二区三区| 亚洲已满18点击进入久久| 欧美精品亚洲二区| 亚洲人成高清| 久久偷看各类wc女厕嘘嘘偷窃| 久久xxxx| 日韩视频在线观看一区二区| 久久嫩草精品久久久精品| 欧美日韩亚洲综合| 亚洲人线精品午夜| 老司机免费视频一区二区| 欧美日韩中文字幕| 亚洲人成7777| 久久婷婷亚洲| 亚洲欧美日韩成人高清在线一区| 欧美精品午夜视频| 日韩一级片网址| 欧美电影免费观看网站| 欧美一区二区三区男人的天堂| 国产精品美女一区二区在线观看| 日韩小视频在线观看专区| 欧美成人情趣视频| 麻豆国产va免费精品高清在线| 黄色一区二区在线| 男女激情视频一区| 老司机精品导航| 亚洲精品五月天| 欧美激情网友自拍| 欧美国产专区| 夜夜爽夜夜爽精品视频| 99国产精品久久久久老师| 欧美午夜精品久久久久久孕妇| 中文精品在线| 午夜精品福利一区二区三区av| 国产伦精品一区二区三区视频黑人 | 亚洲欧洲在线播放| 欧美激情精品久久久久久| 99精品欧美一区二区三区| 亚洲免费高清视频| 国产人成精品一区二区三| 久久蜜桃香蕉精品一区二区三区| 久久米奇亚洲| 亚洲视频大全| 久久精品1区| 91久久精品网| 亚洲一区二区伦理| 亚洲国产精品一区二区www在线 | 国产精品美女| 久久久综合激的五月天| 免费视频一区二区三区在线观看| 99ri日韩精品视频| 亚洲欧美日韩国产精品| 亚洲国产精品999| 在线免费观看视频一区| 久久米奇亚洲| 在线播放视频一区| 欧美高清在线视频观看不卡| 欧美在线亚洲综合一区| 欧美日韩一区二区精品| 亚洲人成在线播放| 午夜久久久久| 99综合在线| 国产麻豆视频精品| 亚洲福利免费| 国产精品久久久免费| 麻豆视频一区二区| 国产精品久久久久免费a∨大胸| 久久婷婷av| 国产精品日韩欧美综合 | 亚洲图片欧美午夜| 久久久在线视频| 亚欧成人精品| 欧美劲爆第一页| 欧美a级片网站| 国产啪精品视频| 中文欧美日韩| 在线亚洲一区二区| 欧美夫妇交换俱乐部在线观看| 久久精品国产免费| 国产精品视频yy9299一区| 亚洲伦伦在线| 一区二区三区视频免费在线观看| av不卡在线观看| 久久综合网络一区二区| 久久狠狠一本精品综合网| 欧美视频免费在线| 99re66热这里只有精品4| 99视频精品全部免费在线| 美女脱光内衣内裤视频久久网站| 久久女同精品一区二区| 狠狠色综合播放一区二区| 亚洲欧美日韩系列| 欧美一区二区在线| 国产精品国产三级国产专播精品人 | 国产婷婷一区二区| 亚洲永久免费av| 亚洲一区二区视频在线观看| 欧美国产精品人人做人人爱| 欧美xart系列高清| 在线欧美日韩| 欧美成人精品在线| 亚洲韩国精品一区| 亚洲看片网站| 欧美日韩国产色综合一二三四| 亚洲国产成人久久综合一区| 亚洲精选国产| 国产在线一区二区三区四区| 国产精品激情电影| 欧美日韩国产精品专区| 老司机一区二区三区| 久久久97精品| 欧美黄色一区| 国产夜色精品一区二区av| 亚洲第一精品在线| 久久在线观看视频| 精品不卡一区| 久久久久久亚洲精品不卡4k岛国| 久久精品视频播放| 国外成人免费视频| 免费在线观看精品| 亚洲精选国产| 欧美诱惑福利视频| 在线播放中文一区| 欧美乱在线观看| 亚洲一区999| 老司机亚洲精品| 在线一区视频| 国产亚洲综合精品| 欧美高清日韩| 亚洲欧美在线另类| 亚洲激情电影在线| 欧美与欧洲交xxxx免费观看 | 欧美一区影院| 亚洲国产精品第一区二区| 久久女同互慰一区二区三区| 欧美mv日韩mv国产网站app| 日韩午夜激情电影| 国产亚洲二区| 欧美精品乱人伦久久久久久 | 9国产精品视频| 国产乱码精品一区二区三区av| 欧美在线观看你懂的| 亚洲国产日韩在线| 欧美中日韩免费视频| 亚洲三级电影全部在线观看高清 | 亚洲国产精品黑人久久久| 国产精品久久久久久久久| 久久亚洲欧美| 亚洲欧美综合精品久久成人 | 亚洲欧洲午夜| 欧美成人在线影院| 久久九九精品99国产精品| 中文日韩电影网站|