• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            Codejie's C++ Space

            Using C++

            LingosHook:自己造的輪子對路面要求太高了~


                為了搞定HTML,這幾天在學著用Tidylib,終于搞明白了,喜滋滋地合并到代碼中一測試,傻眼了--字符集問題。。。
                Tidylib的輸入流似乎只支持const char*, 因此不的不將std::wstring從‘寬字節’轉換為‘多字節。轉換了幾次,時好時壞,搞到半夜才發現自己所用的幾個測試HTML頁面都各種包含著不同的字符集,于是字符集問題就出來了,也搞死我了~最后一咬牙,一跺腳,老子我不轉了,都用‘RAW’數據好了,‘寬’到‘多’直接用UTF8了。。。于是就有了下面的代碼。

            int CHtmlTidyObject::Tidy(const std::wstring &input, std::wstring &output)
            {
                
            int codepage = CP_UTF8;//54936;//CP_UTF8;

                
            int ret = -1;

                TidyDoc tdoc 
            = tidyCreate();
                
            if(tidyOptSetBool(tdoc, TidyMark, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyDoctypeMode, TidyDoctypeOmit) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHideComments, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyWrapLen, 0!= yes)
                    
            return -1;
                
            //if(tidyOptSetBool(tdoc, TidyMakeClean, yes) != yes)//css
                
            //    return -1;
              
                
            if(tidyOptSetBool(tdoc, TidyUpperCaseTags, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHtmlOut, yes) != yes)
                    
            return -1;
                
            if(tidySetCharEncoding(tdoc, "raw"!= 0)
                    
            return -1;
                
                
            if(tidyOptSetBool(tdoc, TidyShowWarnings, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyShowErrors, 0!= yes)
                    
            return -1;

                
            if(tidyOptSetBool(tdoc, TidyForceOutput, yes) != yes)
                    
            return -1;

                
            int sz = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), NULL, 0, NULL, NULL);
                
            if(sz == -1)
                    
            return -1;
                
            char* buf = new char[sz + 1];
                sz 
            = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), buf, sz, NULL, NULL);
                
                
            if(tidyParseString(tdoc, buf) >= 0)
                
            {
                    
            //TidyBuffer errbuf = {0};
                    
            //tidySetErrorBuffer( tdoc, &errbuf );
                    if(tidyCleanAndRepair(tdoc) >= 0)
                    
            {
                        
            //tidyRunDiagnostics( tdoc ); 

                        TidyBuffer outbuf 
            = 0 };
                        
            if(tidySaveBuffer(tdoc, &outbuf) >= 0)
                        
            {
                            
            //std::cout << "OUTPUT->\n" << outbuf.bp << std::endl;
                            int wsz = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, NULL, 0);
                            wchar_t
            * wbuf = new wchar_t[wsz + 1];
                            wsz 
            = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, wbuf, wsz);
                            output 
            = wbuf;
                            delete [] wbuf;
                            ret 
            = 0;
                        }

                        tidyBufFree(
            &outbuf);
                    }

                    
            //std::cout << "ERROR->\n" << errbuf.bp << std::endl;
                    
            //tidyBufFree(&errbuf);
                }


                delete [] buf;

                tidyRelease(tdoc);

                
            return ret;
            }


                感覺還有問題,但經過Tidy處理,TinyHtmlParser確實能解析原來解不開的HTML數據了,就先放著吧,測試看看先~唉,HTML從頭到尾都是最影響LingosHook的部分,早知道應該多好好找找穩定的Parser,自己造的輪子對路面要求太高了。。。

            posted on 2010-05-12 18:06 codejie 閱讀(544) 評論(2)  編輯 收藏 引用 所屬分類: C++LingosHook

            評論

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 11:42 陳梓瀚(vczh)

            HTML這種一個字符串可以由多個字符集構成的東西,根本就是結構化的二進制文件,而不是文本文件……  回復  更多評論   

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 12:12 codejie

            @陳梓瀚(vczh)
            這個‘結構化’放到XML文件上比較合適,HTML就不合適了。。不然哪有‘瀏覽器容錯能力‘之說呢。。所以,還是當文本處理比較方便點。  回復  更多評論   

            公告

            Using C++

            導航

            統計

            留言簿(73)

            隨筆分類(513)

            積分與排名

            最新評論

            閱讀排行榜

            評論排行榜

            亚洲国产精品无码成人片久久| 大伊人青草狠狠久久| 欧美精品国产综合久久| 久久精品免费一区二区| 欧美久久综合性欧美| 久久这里只有精品首页| 国产成人精品久久亚洲高清不卡 | 亚洲国产精品久久久久网站| 久久久久亚洲国产| 国产精品99久久不卡| 人妻精品久久久久中文字幕一冢本| 国产免费福利体检区久久| 久久无码人妻一区二区三区| 午夜精品久久影院蜜桃| 93精91精品国产综合久久香蕉| 日日噜噜夜夜狠狠久久丁香五月| 久久综合精品国产一区二区三区| 69久久精品无码一区二区| 一本久久a久久精品亚洲| 亚洲色欲久久久久综合网| 久久久久女教师免费一区| 99久久婷婷免费国产综合精品| 亚洲国产精品无码久久久蜜芽| 久久这里有精品| 欧美日韩精品久久久久| 青青草原综合久久大伊人导航| 久久黄色视频| 欧美日韩中文字幕久久久不卡| 精品久久久久中文字幕一区| 精品久久人人妻人人做精品| 久久99亚洲综合精品首页| 91精品婷婷国产综合久久| 精品久久久久久无码免费| 国产激情久久久久影院| 国产精品99久久久久久宅男| 久久天天躁狠狠躁夜夜不卡| 久久婷婷五月综合97色直播| 要久久爱在线免费观看| 亚洲第一极品精品无码久久| 久久国产色AV免费看| 亚洲国产精品婷婷久久|