金慶的專欄
C++博客
::
首頁
::
新隨筆
::
聯系
::
聚合
::
管理
::
423 隨筆 :: 0 文章 :: 454 評論 :: 0 Trackbacks
公告
我的隨筆
我的評論
我參與的隨筆
留言簿
(12)
給我留言
查看公開留言
查看私人留言
隨筆分類
(502)
1. C/C++(166)
(rss)
2. 網游開發(108)
(rss)
3. Golang(20)
(rss)
4. Linux/Unix(30)
(rss)
5. 軟工與管理(44)
(rss)
6. Python(23)
(rss)
7. Erlang(18)
(rss)
8. Rust(16)
(rss)
9. 其它(77)
(rss)
隨筆檔案
(423)
2023年1月 (1)
2022年11月 (1)
2022年10月 (2)
2022年9月 (1)
2022年4月 (6)
2022年1月 (2)
2021年12月 (4)
2021年11月 (6)
2021年10月 (2)
2021年9月 (2)
2021年8月 (7)
2021年7月 (2)
2021年5月 (2)
2021年3月 (1)
2021年2月 (2)
2021年1月 (1)
2020年12月 (1)
2020年10月 (1)
2020年9月 (5)
2020年8月 (1)
2020年7月 (1)
2020年6月 (1)
2020年4月 (2)
2020年3月 (3)
2020年2月 (3)
2020年1月 (1)
2019年12月 (1)
2019年9月 (2)
2019年4月 (2)
2019年1月 (1)
2018年12月 (1)
2018年11月 (3)
2018年10月 (1)
2018年9月 (3)
2018年8月 (3)
2018年7月 (2)
2018年6月 (4)
2018年5月 (4)
2018年4月 (4)
2018年3月 (1)
2018年1月 (2)
2017年12月 (2)
2017年11月 (3)
2017年10月 (3)
2017年8月 (7)
2017年7月 (1)
2017年6月 (1)
2017年5月 (3)
2017年4月 (3)
2017年3月 (3)
2017年2月 (2)
2017年1月 (2)
2016年12月 (5)
2016年11月 (2)
2016年10月 (2)
2016年9月 (1)
2016年8月 (6)
2016年7月 (3)
2016年6月 (2)
2016年5月 (4)
2016年4月 (2)
2016年3月 (2)
2016年1月 (3)
2015年12月 (2)
2015年11月 (2)
2015年10月 (1)
2015年8月 (2)
2015年7月 (1)
2015年6月 (1)
2015年5月 (4)
2015年4月 (3)
2015年3月 (4)
2015年2月 (5)
2015年1月 (4)
2014年12月 (3)
2014年11月 (3)
2014年10月 (2)
2014年9月 (3)
2014年8月 (1)
2014年4月 (4)
2014年3月 (1)
2014年2月 (4)
2014年1月 (5)
2013年12月 (5)
2013年11月 (5)
2013年9月 (2)
2013年8月 (2)
2013年7月 (2)
2013年6月 (2)
2013年5月 (1)
2013年1月 (2)
2012年12月 (1)
2012年11月 (1)
2012年9月 (1)
2012年8月 (3)
2012年7月 (2)
2012年6月 (1)
2012年4月 (3)
2012年3月 (2)
2012年2月 (3)
2012年1月 (2)
2011年11月 (2)
2011年10月 (3)
2011年9月 (2)
2011年8月 (2)
2011年7月 (3)
2011年6月 (2)
2011年5月 (3)
2011年1月 (2)
2010年12月 (1)
2010年11月 (2)
2010年10月 (2)
2010年9月 (3)
2010年8月 (2)
2010年7月 (3)
2010年6月 (1)
2010年5月 (3)
2010年4月 (3)
2010年3月 (5)
2010年2月 (4)
2010年1月 (4)
2009年12月 (2)
2009年11月 (3)
2009年10月 (4)
2009年9月 (3)
2009年8月 (2)
2009年7月 (4)
2009年6月 (1)
2009年5月 (3)
2009年4月 (4)
2009年3月 (2)
2009年2月 (5)
2009年1月 (1)
2008年12月 (7)
2008年11月 (4)
2008年10月 (1)
2008年9月 (3)
2008年8月 (4)
2008年7月 (3)
2008年6月 (4)
2008年5月 (6)
2008年4月 (7)
2008年3月 (6)
2008年1月 (5)
2007年12月 (7)
2007年11月 (4)
2007年10月 (5)
2007年9月 (6)
2007年8月 (8)
2007年7月 (5)
相冊
公告照片
搜索
積分與排名
積分 - 654065
排名 - 25
最新評論
1.?re: boost::asio::spawn 將一統C++網絡庫
asio 成為C++首選網絡庫
--linda
2.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--金慶
3.?re: mingw編譯OrzNet
能發送一個mingw編譯好的OrzNet庫給我嗎? liuweiqcxy@163.com
謝謝!
--劉威
4.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--bigbad
5.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--bigbad
閱讀排行榜
1.?"multiple definition of" 錯誤(11017)
2.?SVN中邪惡的replace(10939)
3.?VS2005編譯libevent(10404)
4.?混音算法的學習與研究(10184)
5.?C調用lua腳本的效率測試(9003)
評論排行榜
1.?VC6正在被拋棄(35)
2.?VS2005編譯libevent(21)
3.?"multiple definition of" 錯誤(18)
4.?C++引用優于指針(17)
5.?ACE與ASIO之間關于Socket編程的比較(16)
Firefox的HTTP內容解壓代碼閱讀
Firefox的HTTP內容解壓代碼閱讀
(轉載請注明來源于金慶的專欄)
參考firefox-2.0.0.4-source
RFC2612 3.5節Content codings, 內容編碼定義了三種內容壓縮方式:
gzip, compress, deflate, 但也可以注冊新的壓縮方式。
找到FireFox中的Http解壓代碼
:
Find 'deflate' in 'D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h' :
D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h(58): #define HTTP_DEFLATE_TYPE "deflate"
nsHttpCompressConv.h
#define
HTTP_DEFLATE_TYPE "deflate"
#define
HTTP_GZIP_TYPE "gzip"
#define
HTTP_X_GZIP_TYPE "x-gzip"
#define
HTTP_COMPRESS_TYPE "compress"
#define
HTTP_X_COMPRESS_TYPE "x-compress"
#define
HTTP_IDENTITY_TYPE "identity"
#define
HTTP_UNCOMPRESSED_TYPE "uncompressed"
typedef
enum
{
HTTP_COMPRESS_GZIP,
HTTP_COMPRESS_DEFLATE,
HTTP_COMPRESS_COMPRESS,
HTTP_COMPRESS_IDENTITY
} CompressMode;
定位到類與方法
:
class nsHTTPCompressConv : public nsIStreamConverter
nsHTTPCompressConv::AsyncConvertData(const char *aFromType, ...)
比較類型串,設置解壓模式。例
else if (!PL_strncasecmp(aFromType, HTTP_DEFLATE_TYPE, sizeof(HTTP_DEFLATE_TYPE)-1))
mMode = HTTP_COMPRESS_DEFLATE;
nsHTTPCompressConv::OnDataAvailable(...)
針對不同解壓模式進行解壓。
代碼閱讀:
switch
(mMode)
{
case
HTTP_COMPRESS_GZIP:
streamLen
=
check_header(iStr, streamLen,
&
rv);
case
HTTP_COMPRESS_DEFLATE:
break
;
default
:
}
HTTP_COMPRESS_COMPRESS沒有進行特別處理?
應該是無法解的,可能LZW解壓算法有專利問題。
Gzip進行頭部處理后就與deflate進行相似的解壓。
case
HTTP_COMPRESS_DEFLATE:
if
(mMode
==
HTTP_COMPRESS_DEFLATE)
/*
deflate
*/
else
/*
gzip
*/
break
;
deflate與gzip解壓的代碼幾乎相同,應該可以合成一塊代碼。
區別僅有:
deflate使用inflateInit(),而gzip使用inflateInit2()進行初始化,比inflateInit()多一個參數: -MAX_WBITS,表示處理raw deflate數據。因為gzip數據中的zlib壓縮數據塊沒有zlib header的兩個字節。使用inflateInit2時要求zlib庫忽略zlib header。在zlib手冊中要求windowBits為8..15,但是實際上其它范圍的數據有特殊作用,見zlib.h中的注釋,如負數表示raw deflate。
Apache的deflate變種可能也沒有zlib header,需要添加假頭后處理。即MS的錯誤deflate (raw deflate).zlib頭第1字節一般是0x78, 第2字節與第一字節合起來的雙字節應能被31整除,詳見rfc1950。例如Firefox的zlib假頭為0x7801,python zlib.compress()結果頭部為0x789c。
deflate添假頭,與gzip忽略頭部效果應該是一樣的,是否可以合并處理?
能否判斷頭部兩個字節是zlib頭部還是數據?是否有可能raw deflate數據按正常zlib塊處理了而不報錯?
check_header()
參考:
GZIP文件格式簡介
1. gz頭:0x1f8b
2. Z_DEFLATED標志:0x08
...
其中FLG.FEXTRA的處理有個錯誤,額外可選項的長度應該是兩個字節的合成:
mLen = ((uInt) c & 0377) << 8;
應改為
mLen |= ((uInt) c & 0377) << 8;
因為該額外字段一般在HTTP的應用中不會出現,所以沒有顯現出來。
我已提交:
Bugzilla@Mozilla – Bug 383984
注意:GZIP文件格式簡介中的額外字段的格式與rfc1952不一致,多了兩個“選項ID”字節。
還有,
case GZIP_COMMENT:
if (mFlags & GZIP_COMMENT)
應改為:
case GZIP_COMMENT:
if (mFlags & COMMENT)
該錯誤已提交,
Bugzilla@Mozilla – Bug 382849
zlib可以處理gzip頭部,但所有gz函數都是針對gz文件進行的,沒有直接在內存中處理gzip的,這好象是zlib功能上的一個不足吧?
相關rfc:
rfc1950: ZLIB Compressed Data Format Specification version 3.3
rfc1951: DEFLATE Compressed Data Format Specification version 1.3
(轉載請注明來源于金慶的專欄)
posted on 2007-07-09 12:13
金慶
閱讀(2217)
評論(0)
編輯
收藏
引用
所屬分類:
1. C/C++
只有注冊用戶
登錄
后才能發表評論。
【推薦】100%開源!大型工業跨平臺軟件C++源碼提供,建模,組態!
相關文章:
How are dtLinks created in NavMesh
C++ parameter passing rules
Naming Conventions for Accessors
Visual Studio 2019 Compiler Hangs
Fbx File Format Identifier
查找內存錯誤
std::thread 中的異常會丟失調用棧
用賦值代替 protobuf CopyFrom()
vs2017 linux 編譯輸出改成 vs 格式
為 LiteIDE 添加選中標記
網站導航:
博客園
IT新聞
BlogJava
博問
Chat2DB
管理
Powered by:
C++博客
Copyright © 金慶
久久婷婷五月综合国产尤物app
|
亚洲国产成人乱码精品女人久久久不卡
|
91久久精品电影
|
欧美精品一本久久男人的天堂
|
亚洲中文字幕久久精品无码APP
|
日韩欧美亚洲综合久久影院Ds
|
无码人妻久久一区二区三区免费丨
|
久久久久亚洲精品天堂久久久久久
|
久久青青草视频
|
国产精品久久新婚兰兰
|
中文字幕日本人妻久久久免费
|
久久久久久久女国产乱让韩
|
久久强奷乱码老熟女网站
|
久久久人妻精品无码一区
|
老男人久久青草av高清
|
久久国产亚洲高清观看
|
日本三级久久网
|
性高朝久久久久久久久久
|
久久精品无码专区免费青青
|
久久亚洲视频
|
亚洲欧美日韩中文久久
|
久久国产高潮流白浆免费观看
|
国产成人无码精品久久久免费
|
色综合久久夜色精品国产
|
999久久久免费精品国产
|
久久久久久一区国产精品
|
久久综合给久久狠狠97色
|
久久精品99无色码中文字幕
|
浪潮AV色综合久久天堂
|
久久无码精品一区二区三区
|
97久久精品国产精品青草
|
久久一本综合
|
久久这里只精品国产99热
|
精品久久久无码人妻中文字幕
|
99久久综合国产精品二区
|
日韩人妻无码精品久久免费一
|
久久e热在这里只有国产中文精品99
|
亚洲精品乱码久久久久久按摩
|
久久综合九色综合久99
|
成人a毛片久久免费播放
|
久久人人爽人人爽人人AV东京热
|