• <ins id="pjuwb"></ins>
    <blockquote id="pjuwb"><pre id="pjuwb"></pre></blockquote>
    <noscript id="pjuwb"></noscript>
          <sup id="pjuwb"><pre id="pjuwb"></pre></sup>
            <dd id="pjuwb"></dd>
            <abbr id="pjuwb"></abbr>

            Codejie's C++ Space

            Using C++

            LingosHook:自己造的輪子對路面要求太高了~


                為了搞定HTML,這幾天在學著用Tidylib,終于搞明白了,喜滋滋地合并到代碼中一測試,傻眼了--字符集問題。。。
                Tidylib的輸入流似乎只支持const char*, 因此不的不將std::wstring從‘寬字節’轉換為‘多字節。轉換了幾次,時好時壞,搞到半夜才發現自己所用的幾個測試HTML頁面都各種包含著不同的字符集,于是字符集問題就出來了,也搞死我了~最后一咬牙,一跺腳,老子我不轉了,都用‘RAW’數據好了,‘寬’到‘多’直接用UTF8了。。。于是就有了下面的代碼。

            int CHtmlTidyObject::Tidy(const std::wstring &input, std::wstring &output)
            {
                
            int codepage = CP_UTF8;//54936;//CP_UTF8;

                
            int ret = -1;

                TidyDoc tdoc 
            = tidyCreate();
                
            if(tidyOptSetBool(tdoc, TidyMark, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyDoctypeMode, TidyDoctypeOmit) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHideComments, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyWrapLen, 0!= yes)
                    
            return -1;
                
            //if(tidyOptSetBool(tdoc, TidyMakeClean, yes) != yes)//css
                
            //    return -1;
              
                
            if(tidyOptSetBool(tdoc, TidyUpperCaseTags, yes) != yes)
                    
            return -1;
                
            if(tidyOptSetBool(tdoc, TidyHtmlOut, yes) != yes)
                    
            return -1;
                
            if(tidySetCharEncoding(tdoc, "raw"!= 0)
                    
            return -1;
                
                
            if(tidyOptSetBool(tdoc, TidyShowWarnings, no) != yes)
                    
            return -1;
                
            if(tidyOptSetInt(tdoc, TidyShowErrors, 0!= yes)
                    
            return -1;

                
            if(tidyOptSetBool(tdoc, TidyForceOutput, yes) != yes)
                    
            return -1;

                
            int sz = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), NULL, 0, NULL, NULL);
                
            if(sz == -1)
                    
            return -1;
                
            char* buf = new char[sz + 1];
                sz 
            = WideCharToMultiByte(codepage, 0, input.c_str(), input.size(), buf, sz, NULL, NULL);
                
                
            if(tidyParseString(tdoc, buf) >= 0)
                
            {
                    
            //TidyBuffer errbuf = {0};
                    
            //tidySetErrorBuffer( tdoc, &errbuf );
                    if(tidyCleanAndRepair(tdoc) >= 0)
                    
            {
                        
            //tidyRunDiagnostics( tdoc ); 

                        TidyBuffer outbuf 
            = 0 };
                        
            if(tidySaveBuffer(tdoc, &outbuf) >= 0)
                        
            {
                            
            //std::cout << "OUTPUT->\n" << outbuf.bp << std::endl;
                            int wsz = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, NULL, 0);
                            wchar_t
            * wbuf = new wchar_t[wsz + 1];
                            wsz 
            = MultiByteToWideChar(codepage, 0, (const char*)outbuf.bp, outbuf.size, wbuf, wsz);
                            output 
            = wbuf;
                            delete [] wbuf;
                            ret 
            = 0;
                        }

                        tidyBufFree(
            &outbuf);
                    }

                    
            //std::cout << "ERROR->\n" << errbuf.bp << std::endl;
                    
            //tidyBufFree(&errbuf);
                }


                delete [] buf;

                tidyRelease(tdoc);

                
            return ret;
            }


                感覺還有問題,但經過Tidy處理,TinyHtmlParser確實能解析原來解不開的HTML數據了,就先放著吧,測試看看先~唉,HTML從頭到尾都是最影響LingosHook的部分,早知道應該多好好找找穩定的Parser,自己造的輪子對路面要求太高了。。。

            posted on 2010-05-12 18:06 codejie 閱讀(532) 評論(2)  編輯 收藏 引用 所屬分類: C++LingosHook

            評論

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 11:42 陳梓瀚(vczh)

            HTML這種一個字符串可以由多個字符集構成的東西,根本就是結構化的二進制文件,而不是文本文件……  回復  更多評論   

            # re: LingosHook:自己造的輪子對路面要求太高了~ 2010-05-13 12:12 codejie

            @陳梓瀚(vczh)
            這個‘結構化’放到XML文件上比較合適,HTML就不合適了。。不然哪有‘瀏覽器容錯能力‘之說呢。。所以,還是當文本處理比較方便點。  回復  更多評論   

            公告

            Using C++

            導航

            統計

            留言簿(73)

            隨筆分類(513)

            積分與排名

            最新評論

            閱讀排行榜

            評論排行榜

            亚洲AⅤ优女AV综合久久久| 午夜精品久久久久久99热| 久久久久亚洲精品无码蜜桃 | 超级碰久久免费公开视频| 国产成人99久久亚洲综合精品| 久久亚洲高清综合| 久久亚洲国产成人精品性色| 国产精品天天影视久久综合网| 97久久精品人人澡人人爽| 久久无码国产专区精品| 色综合久久久久网| 亚洲中文字幕无码久久精品1| 女人香蕉久久**毛片精品| 久久人人青草97香蕉| 青青草国产成人久久91网| 久久午夜无码鲁丝片秋霞 | 亚洲精品国产美女久久久| 国产精品无码久久综合网| 久久精品无码专区免费青青 | Xx性欧美肥妇精品久久久久久 | 无码国内精品久久人妻蜜桃| 久久激情亚洲精品无码?V| 色狠狠久久AV五月综合| 久久久国产视频| 色婷婷久久久SWAG精品| 88久久精品无码一区二区毛片 | 亚洲va久久久噜噜噜久久狠狠| 国产日韩欧美久久| 香蕉久久一区二区不卡无毒影院| 久久久久亚洲精品日久生情| 久久强奷乱码老熟女| 曰曰摸天天摸人人看久久久| 国内精品久久久久久99蜜桃| 久久综合亚洲色一区二区三区| 久久se这里只有精品| 99久久国产主播综合精品| 久久er国产精品免费观看2| 久久精品国产影库免费看 | 久久精品国产福利国产琪琪| 一本久久a久久精品综合夜夜 | 久久精品国产色蜜蜜麻豆|