金慶的專欄
C++博客
::
首頁
::
新隨筆
::
聯系
::
聚合
::
管理
::
423 隨筆 :: 0 文章 :: 454 評論 :: 0 Trackbacks
公告
我的隨筆
我的評論
我參與的隨筆
留言簿
(12)
給我留言
查看公開留言
查看私人留言
隨筆分類
(502)
1. C/C++(166)
(rss)
2. 網游開發(108)
(rss)
3. Golang(20)
(rss)
4. Linux/Unix(30)
(rss)
5. 軟工與管理(44)
(rss)
6. Python(23)
(rss)
7. Erlang(18)
(rss)
8. Rust(16)
(rss)
9. 其它(77)
(rss)
隨筆檔案
(423)
2023年1月 (1)
2022年11月 (1)
2022年10月 (2)
2022年9月 (1)
2022年4月 (6)
2022年1月 (2)
2021年12月 (4)
2021年11月 (6)
2021年10月 (2)
2021年9月 (2)
2021年8月 (7)
2021年7月 (2)
2021年5月 (2)
2021年3月 (1)
2021年2月 (2)
2021年1月 (1)
2020年12月 (1)
2020年10月 (1)
2020年9月 (5)
2020年8月 (1)
2020年7月 (1)
2020年6月 (1)
2020年4月 (2)
2020年3月 (3)
2020年2月 (3)
2020年1月 (1)
2019年12月 (1)
2019年9月 (2)
2019年4月 (2)
2019年1月 (1)
2018年12月 (1)
2018年11月 (3)
2018年10月 (1)
2018年9月 (3)
2018年8月 (3)
2018年7月 (2)
2018年6月 (4)
2018年5月 (4)
2018年4月 (4)
2018年3月 (1)
2018年1月 (2)
2017年12月 (2)
2017年11月 (3)
2017年10月 (3)
2017年8月 (7)
2017年7月 (1)
2017年6月 (1)
2017年5月 (3)
2017年4月 (3)
2017年3月 (3)
2017年2月 (2)
2017年1月 (2)
2016年12月 (5)
2016年11月 (2)
2016年10月 (2)
2016年9月 (1)
2016年8月 (6)
2016年7月 (3)
2016年6月 (2)
2016年5月 (4)
2016年4月 (2)
2016年3月 (2)
2016年1月 (3)
2015年12月 (2)
2015年11月 (2)
2015年10月 (1)
2015年8月 (2)
2015年7月 (1)
2015年6月 (1)
2015年5月 (4)
2015年4月 (3)
2015年3月 (4)
2015年2月 (5)
2015年1月 (4)
2014年12月 (3)
2014年11月 (3)
2014年10月 (2)
2014年9月 (3)
2014年8月 (1)
2014年4月 (4)
2014年3月 (1)
2014年2月 (4)
2014年1月 (5)
2013年12月 (5)
2013年11月 (5)
2013年9月 (2)
2013年8月 (2)
2013年7月 (2)
2013年6月 (2)
2013年5月 (1)
2013年1月 (2)
2012年12月 (1)
2012年11月 (1)
2012年9月 (1)
2012年8月 (3)
2012年7月 (2)
2012年6月 (1)
2012年4月 (3)
2012年3月 (2)
2012年2月 (3)
2012年1月 (2)
2011年11月 (2)
2011年10月 (3)
2011年9月 (2)
2011年8月 (2)
2011年7月 (3)
2011年6月 (2)
2011年5月 (3)
2011年1月 (2)
2010年12月 (1)
2010年11月 (2)
2010年10月 (2)
2010年9月 (3)
2010年8月 (2)
2010年7月 (3)
2010年6月 (1)
2010年5月 (3)
2010年4月 (3)
2010年3月 (5)
2010年2月 (4)
2010年1月 (4)
2009年12月 (2)
2009年11月 (3)
2009年10月 (4)
2009年9月 (3)
2009年8月 (2)
2009年7月 (4)
2009年6月 (1)
2009年5月 (3)
2009年4月 (4)
2009年3月 (2)
2009年2月 (5)
2009年1月 (1)
2008年12月 (7)
2008年11月 (4)
2008年10月 (1)
2008年9月 (3)
2008年8月 (4)
2008年7月 (3)
2008年6月 (4)
2008年5月 (6)
2008年4月 (7)
2008年3月 (6)
2008年1月 (5)
2007年12月 (7)
2007年11月 (4)
2007年10月 (5)
2007年9月 (6)
2007年8月 (8)
2007年7月 (5)
相冊
公告照片
搜索
積分與排名
積分 - 659023
排名 - 25
最新評論
1.?re: boost::asio::spawn 將一統C++網絡庫
asio 成為C++首選網絡庫
--linda
2.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--金慶
3.?re: mingw編譯OrzNet
能發送一個mingw編譯好的OrzNet庫給我嗎? liuweiqcxy@163.com
謝謝!
--劉威
4.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--bigbad
5.?re: log4cxx中文輸出錯誤補丁
評論內容較長,點擊標題查看
--bigbad
閱讀排行榜
1.?"multiple definition of" 錯誤(11054)
2.?SVN中邪惡的replace(10972)
3.?VS2005編譯libevent(10429)
4.?混音算法的學習與研究(10230)
5.?C調用lua腳本的效率測試(9019)
評論排行榜
1.?VC6正在被拋棄(35)
2.?VS2005編譯libevent(21)
3.?"multiple definition of" 錯誤(18)
4.?C++引用優于指針(17)
5.?ACE與ASIO之間關于Socket編程的比較(16)
Firefox的HTTP內容解壓代碼閱讀
Firefox的HTTP內容解壓代碼閱讀
(轉載請注明來源于金慶的專欄)
參考firefox-2.0.0.4-source
RFC2612 3.5節Content codings, 內容編碼定義了三種內容壓縮方式:
gzip, compress, deflate, 但也可以注冊新的壓縮方式。
找到FireFox中的Http解壓代碼
:
Find 'deflate' in 'D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h' :
D:\mozilla\netwerk\streamconv\converters\nsHTTPCompressConv.h(58): #define HTTP_DEFLATE_TYPE "deflate"
nsHttpCompressConv.h
#define
HTTP_DEFLATE_TYPE "deflate"
#define
HTTP_GZIP_TYPE "gzip"
#define
HTTP_X_GZIP_TYPE "x-gzip"
#define
HTTP_COMPRESS_TYPE "compress"
#define
HTTP_X_COMPRESS_TYPE "x-compress"
#define
HTTP_IDENTITY_TYPE "identity"
#define
HTTP_UNCOMPRESSED_TYPE "uncompressed"
typedef
enum
{
HTTP_COMPRESS_GZIP,
HTTP_COMPRESS_DEFLATE,
HTTP_COMPRESS_COMPRESS,
HTTP_COMPRESS_IDENTITY
} CompressMode;
定位到類與方法
:
class nsHTTPCompressConv : public nsIStreamConverter
nsHTTPCompressConv::AsyncConvertData(const char *aFromType, ...)
比較類型串,設置解壓模式。例
else if (!PL_strncasecmp(aFromType, HTTP_DEFLATE_TYPE, sizeof(HTTP_DEFLATE_TYPE)-1))
mMode = HTTP_COMPRESS_DEFLATE;
nsHTTPCompressConv::OnDataAvailable(...)
針對不同解壓模式進行解壓。
代碼閱讀:
switch
(mMode)
{
case
HTTP_COMPRESS_GZIP:
streamLen
=
check_header(iStr, streamLen,
&
rv);
case
HTTP_COMPRESS_DEFLATE:
break
;
default
:
}
HTTP_COMPRESS_COMPRESS沒有進行特別處理?
應該是無法解的,可能LZW解壓算法有專利問題。
Gzip進行頭部處理后就與deflate進行相似的解壓。
case
HTTP_COMPRESS_DEFLATE:
if
(mMode
==
HTTP_COMPRESS_DEFLATE)
/*
deflate
*/
else
/*
gzip
*/
break
;
deflate與gzip解壓的代碼幾乎相同,應該可以合成一塊代碼。
區別僅有:
deflate使用inflateInit(),而gzip使用inflateInit2()進行初始化,比inflateInit()多一個參數: -MAX_WBITS,表示處理raw deflate數據。因為gzip數據中的zlib壓縮數據塊沒有zlib header的兩個字節。使用inflateInit2時要求zlib庫忽略zlib header。在zlib手冊中要求windowBits為8..15,但是實際上其它范圍的數據有特殊作用,見zlib.h中的注釋,如負數表示raw deflate。
Apache的deflate變種可能也沒有zlib header,需要添加假頭后處理。即MS的錯誤deflate (raw deflate).zlib頭第1字節一般是0x78, 第2字節與第一字節合起來的雙字節應能被31整除,詳見rfc1950。例如Firefox的zlib假頭為0x7801,python zlib.compress()結果頭部為0x789c。
deflate添假頭,與gzip忽略頭部效果應該是一樣的,是否可以合并處理?
能否判斷頭部兩個字節是zlib頭部還是數據?是否有可能raw deflate數據按正常zlib塊處理了而不報錯?
check_header()
參考:
GZIP文件格式簡介
1. gz頭:0x1f8b
2. Z_DEFLATED標志:0x08
...
其中FLG.FEXTRA的處理有個錯誤,額外可選項的長度應該是兩個字節的合成:
mLen = ((uInt) c & 0377) << 8;
應改為
mLen |= ((uInt) c & 0377) << 8;
因為該額外字段一般在HTTP的應用中不會出現,所以沒有顯現出來。
我已提交:
Bugzilla@Mozilla – Bug 383984
注意:GZIP文件格式簡介中的額外字段的格式與rfc1952不一致,多了兩個“選項ID”字節。
還有,
case GZIP_COMMENT:
if (mFlags & GZIP_COMMENT)
應改為:
case GZIP_COMMENT:
if (mFlags & COMMENT)
該錯誤已提交,
Bugzilla@Mozilla – Bug 382849
zlib可以處理gzip頭部,但所有gz函數都是針對gz文件進行的,沒有直接在內存中處理gzip的,這好象是zlib功能上的一個不足吧?
相關rfc:
rfc1950: ZLIB Compressed Data Format Specification version 3.3
rfc1951: DEFLATE Compressed Data Format Specification version 1.3
(轉載請注明來源于金慶的專欄)
posted on 2007-07-09 12:13
金慶
閱讀(2224)
評論(0)
編輯
收藏
引用
所屬分類:
1. C/C++
只有注冊用戶
登錄
后才能發表評論。
【推薦】100%開源!大型工業跨平臺軟件C++源碼提供,建模,組態!
相關文章:
How are dtLinks created in NavMesh
C++ parameter passing rules
Naming Conventions for Accessors
Visual Studio 2019 Compiler Hangs
Fbx File Format Identifier
查找內存錯誤
std::thread 中的異常會丟失調用棧
用賦值代替 protobuf CopyFrom()
vs2017 linux 編譯輸出改成 vs 格式
為 LiteIDE 添加選中標記
網站導航:
博客園
IT新聞
BlogJava
博問
Chat2DB
管理
Powered by:
C++博客
Copyright © 金慶
中文字幕久久亚洲一区
|
亚洲午夜久久久久妓女影院
|
yellow中文字幕久久网
|
国内精品久久久久国产盗摄
|
中文字幕精品久久
|
91久久精品91久久性色
|
精品熟女少妇aⅴ免费久久
|
欧美黑人激情性久久
|
久久99精品久久久久久动态图
|
精品久久人人做人人爽综合
|
亚洲国产日韩欧美综合久久
|
色婷婷综合久久久中文字幕
|
99久久精品国产毛片
|
亚洲AV无码久久寂寞少妇
|
久久精品这里只有精99品
|
久久亚洲精品人成综合网
|
欧美国产精品久久高清
|
久久99精品综合国产首页
|
亚洲中文字幕久久精品无码APP
|
亚洲一本综合久久
|
成人国内精品久久久久影院
|
亚洲成色www久久网站夜月
|
久久天天躁狠狠躁夜夜av浪潮
|
国产成人精品久久
|
日产精品99久久久久久
|
中文字幕精品无码久久久久久3D日动漫
|
69久久精品无码一区二区
|
色婷婷综合久久久久中文字幕
|
国产午夜精品理论片久久影视
|
亚洲精品无码成人片久久
|
欧美日韩精品久久久久
|
国产香蕉久久精品综合网
|
天堂无码久久综合东京热
|
久久久久黑人强伦姧人妻
|
99久久成人18免费网站
|
国产成人香蕉久久久久
|
国产成人99久久亚洲综合精品
|
国产AⅤ精品一区二区三区久久
|
久久综合狠狠色综合伊人
|
久久免费高清视频
|
久久久久久青草大香综合精品
|