• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            Codejie's C++ Space

            Using C++

            LingosHook:自己造的輪子對路面要求太高了~


                為了搞定HTML,這幾天在學著用Tidylib,終于搞明白了,喜滋滋地合并到代碼中一測試,傻眼了--字符集問題。。。
                Tidylib的輸入流似乎只支持const char*, 因此不的不將std::wstring從‘寬字節’轉換為‘多字節。轉換了幾次,時好時壞,搞到半夜才發現自己所用的幾個測試HTML頁面都各種包含著不同的字符集,于是字符集問題就出來了,也搞死我了~最后一咬牙,一跺腳,老子我不轉了,都用‘RAW’數據好了,‘寬’到‘多’直接用UTF8了。。。于是就有了下面的代碼。

            int CHtmlTidyObject::Tidy(const std::wstring &input, std::wstring &output)
            {
                
            int codepage = CP_UTF8;//54936;//CP_UTF8;

                
            int ret = -1;

                TidyDoc tdoc 
            = tidyCreate();
                
            if(tidyOptSetBool(tdoc, TidyMark, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyDoctypeMode, TidyDoctypeOmit) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHideComments, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyWrapLen, 0!= yes)
                    
            return -1;
                
            //if(tidyOptSetBool(tdoc, TidyMakeClean, yes) != yes)//css
                
            //    return -1;
              
                
            if(tidyOptSetBool(tdoc, TidyUpperCaseTags, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHtmlOut, yes) != yes)
                    
            return -1;
                
            if(tidySetCharEncoding(tdoc, "raw"!= 0)
                    
            return -1;
                
                
            if(tidyOptSetBool(tdoc, TidyShowWarnings, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyShowErrors, 0!= yes)
                    
            return -1;

                
            if(tidyOptSetBool(tdoc, TidyForceOutput, yes) != yes)
                    
            return -1;

                
            int sz = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), NULL, 0, NULL, NULL);
                
            if(sz == -1)
                    
            return -1;
                
            char* buf = new char[sz + 1];
                sz 
            = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), buf, sz, NULL, NULL);
                
                
            if(tidyParseString(tdoc, buf) >= 0)
                
            {
                    
            //TidyBuffer errbuf = {0};
                    
            //tidySetErrorBuffer( tdoc, &errbuf );
                    if(tidyCleanAndRepair(tdoc) >= 0)
                    
            {
                        
            //tidyRunDiagnostics( tdoc ); 

                        TidyBuffer outbuf 
            = 0 };
                        
            if(tidySaveBuffer(tdoc, &outbuf) >= 0)
                        
            {
                            
            //std::cout << "OUTPUT->\n" << outbuf.bp << std::endl;
                            int wsz = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, NULL, 0);
                            wchar_t
            * wbuf = new wchar_t[wsz + 1];
                            wsz 
            = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, wbuf, wsz);
                            output 
            = wbuf;
                            delete [] wbuf;
                            ret 
            = 0;
                        }

                        tidyBufFree(
            &outbuf);
                    }

                    
            //std::cout << "ERROR->\n" << errbuf.bp << std::endl;
                    
            //tidyBufFree(&errbuf);
                }


                delete [] buf;

                tidyRelease(tdoc);

                
            return ret;
            }


                感覺還有問題,但經過Tidy處理,TinyHtmlParser確實能解析原來解不開的HTML數據了,就先放著吧,測試看看先~唉,HTML從頭到尾都是最影響LingosHook的部分,早知道應該多好好找找穩定的Parser,自己造的輪子對路面要求太高了。。。

            posted on 2010-05-12 18:06 codejie 閱讀(543) 評論(2)  編輯 收藏 引用 所屬分類: C++LingosHook

            評論

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 11:42 陳梓瀚(vczh)

            HTML這種一個字符串可以由多個字符集構成的東西,根本就是結構化的二進制文件,而不是文本文件……  回復  更多評論   

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 12:12 codejie

            @陳梓瀚(vczh)
            這個‘結構化’放到XML文件上比較合適,HTML就不合適了。。不然哪有‘瀏覽器容錯能力‘之說呢。。所以,還是當文本處理比較方便點。  回復  更多評論   

            公告

            Using C++

            導航

            統計

            留言簿(73)

            隨筆分類(513)

            積分與排名

            最新評論

            閱讀排行榜

            評論排行榜

            成人妇女免费播放久久久| 亚洲精品成人久久久| 欧洲精品久久久av无码电影| 色综合久久综合中文综合网| 久久w5ww成w人免费| 狠狠久久综合| 国产精品美女久久久m| 日本加勒比久久精品| 久久综合88熟人妻| 久久亚洲天堂| 99久久99久久| 久久久亚洲欧洲日产国码是AV| 欧美日韩中文字幕久久伊人| 伊人热热久久原色播放www| 久久久精品午夜免费不卡| 欧美伊人久久大香线蕉综合| 青青国产成人久久91网| 久久综合综合久久综合| 亚洲国产日韩欧美综合久久| 一本久久a久久精品综合夜夜 | 一本久久a久久精品亚洲| 热re99久久6国产精品免费| 国产亚洲精午夜久久久久久| 久久亚洲中文字幕精品有坂深雪| 午夜精品久久久久久久无码| 热re99久久精品国产99热| 囯产精品久久久久久久久蜜桃| 思思久久99热免费精品6| 99久久精品九九亚洲精品| 国产国产成人精品久久| 奇米影视7777久久精品| 久久午夜伦鲁片免费无码| 亚洲日本va中文字幕久久| 欧美激情精品久久久久久| 国产成人香蕉久久久久| 一本大道久久a久久精品综合| 日本精品久久久中文字幕 | 精品免费久久久久国产一区| 久久国产精品-久久精品| 日产精品久久久久久久| 2021久久国自产拍精品|