• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            Codejie's C++ Space

            Using C++

            LingosHook:自己造的輪子對路面要求太高了~


                為了搞定HTML,這幾天在學著用Tidylib,終于搞明白了,喜滋滋地合并到代碼中一測試,傻眼了--字符集問題。。。
                Tidylib的輸入流似乎只支持const char*, 因此不的不將std::wstring從‘寬字節’轉換為‘多字節。轉換了幾次,時好時壞,搞到半夜才發現自己所用的幾個測試HTML頁面都各種包含著不同的字符集,于是字符集問題就出來了,也搞死我了~最后一咬牙,一跺腳,老子我不轉了,都用‘RAW’數據好了,‘寬’到‘多’直接用UTF8了。。。于是就有了下面的代碼。

            int CHtmlTidyObject::Tidy(const std::wstring &input, std::wstring &output)
            {
                
            int codepage = CP_UTF8;//54936;//CP_UTF8;

                
            int ret = -1;

                TidyDoc tdoc 
            = tidyCreate();
                
            if(tidyOptSetBool(tdoc, TidyMark, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyDoctypeMode, TidyDoctypeOmit) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHideComments, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyWrapLen, 0!= yes)
                    
            return -1;
                
            //if(tidyOptSetBool(tdoc, TidyMakeClean, yes) != yes)//css
                
            //    return -1;
              
                
            if(tidyOptSetBool(tdoc, TidyUpperCaseTags, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHtmlOut, yes) != yes)
                    
            return -1;
                
            if(tidySetCharEncoding(tdoc, "raw"!= 0)
                    
            return -1;
                
                
            if(tidyOptSetBool(tdoc, TidyShowWarnings, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyShowErrors, 0!= yes)
                    
            return -1;

                
            if(tidyOptSetBool(tdoc, TidyForceOutput, yes) != yes)
                    
            return -1;

                
            int sz = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), NULL, 0, NULL, NULL);
                
            if(sz == -1)
                    
            return -1;
                
            char* buf = new char[sz + 1];
                sz 
            = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), buf, sz, NULL, NULL);
                
                
            if(tidyParseString(tdoc, buf) >= 0)
                
            {
                    
            //TidyBuffer errbuf = {0};
                    
            //tidySetErrorBuffer( tdoc, &errbuf );
                    if(tidyCleanAndRepair(tdoc) >= 0)
                    
            {
                        
            //tidyRunDiagnostics( tdoc ); 

                        TidyBuffer outbuf 
            = 0 };
                        
            if(tidySaveBuffer(tdoc, &outbuf) >= 0)
                        
            {
                            
            //std::cout << "OUTPUT->\n" << outbuf.bp << std::endl;
                            int wsz = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, NULL, 0);
                            wchar_t
            * wbuf = new wchar_t[wsz + 1];
                            wsz 
            = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, wbuf, wsz);
                            output 
            = wbuf;
                            delete [] wbuf;
                            ret 
            = 0;
                        }

                        tidyBufFree(
            &outbuf);
                    }

                    
            //std::cout << "ERROR->\n" << errbuf.bp << std::endl;
                    
            //tidyBufFree(&errbuf);
                }


                delete [] buf;

                tidyRelease(tdoc);

                
            return ret;
            }


                感覺還有問題,但經過Tidy處理,TinyHtmlParser確實能解析原來解不開的HTML數據了,就先放著吧,測試看看先~唉,HTML從頭到尾都是最影響LingosHook的部分,早知道應該多好好找找穩定的Parser,自己造的輪子對路面要求太高了。。。

            posted on 2010-05-12 18:06 codejie 閱讀(543) 評論(2)  編輯 收藏 引用 所屬分類: C++LingosHook

            評論

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 11:42 陳梓瀚(vczh)

            HTML這種一個字符串可以由多個字符集構成的東西,根本就是結構化的二進制文件,而不是文本文件……  回復  更多評論   

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 12:12 codejie

            @陳梓瀚(vczh)
            這個‘結構化’放到XML文件上比較合適,HTML就不合適了。。不然哪有‘瀏覽器容錯能力‘之說呢。。所以,還是當文本處理比較方便點。  回復  更多評論   

            公告

            Using C++

            導航

            統計

            留言簿(73)

            隨筆分類(513)

            積分與排名

            最新評論

            閱讀排行榜

            評論排行榜

            久久香蕉超碰97国产精品 | 青青青青久久精品国产h久久精品五福影院1421 | 久久精品国产色蜜蜜麻豆| 国产精品热久久无码av| 久久99久久成人免费播放| 久久精品国产精品亚洲艾草网美妙| 九九热久久免费视频| 人妻无码αv中文字幕久久| 久久精品成人免费看| 久久婷婷五月综合色奶水99啪| 日本加勒比久久精品| 久久久久亚洲AV无码网站| 久久精品无码一区二区日韩AV| 久久久久人妻一区精品性色av| 大香网伊人久久综合网2020| 亚洲AV日韩AV永久无码久久| 久久综合九色综合久99| 成人a毛片久久免费播放| 无码AV中文字幕久久专区| 久久久久国产精品嫩草影院| 久久99精品久久久久久水蜜桃| 久久综合综合久久狠狠狠97色88 | 久久噜噜电影你懂的| www.久久热| 久久天天躁狠狠躁夜夜av浪潮| 精品一久久香蕉国产线看播放| 久久er国产精品免费观看8| 精品久久久久中文字幕一区| 久久国产乱子伦精品免费强 | 久久本道综合久久伊人| 人妻无码精品久久亚瑟影视| 思思久久99热只有频精品66 | 久久久久中文字幕| 久久这里有精品视频| 一本色道久久88—综合亚洲精品| 久久99国产综合精品女同| 国产毛片久久久久久国产毛片| 狠狠色丁香久久婷婷综合图片| 欧美丰满熟妇BBB久久久| 亚洲AV伊人久久青青草原| 久久精品成人免费网站|