C# 实现HTTP传输Chunk解码和GZip解码

自己想做一个抓取网页的工具,用WebRequest就可以实现,但是不好判断GBK或者UTF8编码,所以我选择了用TcpClient自己去抓取。      问题也随之而来,Chunk传输编码和GZip压缩。GZip的话,在System.IO.Compression下,就有现成的函数。但Chunk解码需要手动去实现。      using System;using System.Coll
摘要由CSDN通过智能技术生成

      自己想做一个抓取网页的工具,用WebRequest就可以实现,但是不好判断GBK或者UTF8编码,所以我选择了用TcpClient自己去抓取。

      问题也随之而来,Chunk传输编码和GZip压缩。GZip的话,在System.IO.Compression下,就有现成的函数。但Chunk解码需要手动去实现。

     

using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using System.IO;
using System.IO.Compression;

    public class ChunkDecode
    {
        #region -- Private Fields --
        private IList<byte[]> _dataList = new List<byte[]>();
        #endregion

        #region -- Method --
        public ChunkDecode(byte[] data)
        {
            long pos = 0, start = 0;
            long Chunk_Size = 0;
            byte[] buff;
            while (pos < data.Length)
            {
                while (data[pos] != 13)
                {
                    if (pos < data.Length)
                    {
                        pos++;
                    }
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值