golang http请求返回 io.ReadCloser 数据读取和编码转换为utf8 注意事项

在go语言中我们发送一个http请求后， 我们需要通过resp返回体中的Body对象（是一个 io.ReadCloser对象）来对请求返回的数据进行读取。  对于这类Reader的数据读取我们需要先定义一个byte切片, 然后通过循环来对reader中的数据进行读取，这里需要注意的事项有：

1. 在定义用于读取数据的切片时， len需要设置为 0  ，

2. cap容量可根据要读取的数据的大小来定义，一般为512或者1024或者4096，可稍微加大以提升读取性能， 如： b := make([]byte, 0, 4096)

3. 在循环体内通过 append来对切片进行动态扩容（增加切片的cap容量）， 如  b = append(b, 0)[:len(b)] 这里先是使用append向切片增加一个0 然后接着在对这个进去进行切片 把刚刚增加的0去除。

4. 数据读取完毕后会返回一个io.EOF的异常，这时一定要使用return或者break终止循环体.

5. readercloser需要再用完后关闭，即增加  defer reader.Close()

6. go中统一数据编码为utf-8 , 如  charset.NewReader(reader, resp.Header.Get("Content-Type")) 可以将获取的内容统一转换为utf-8编码

req, err := http.NewRequest("GET", url, nil)
if err != nil {
	return nil, err
}
resp, err := http.DefaultClient.Do(req)
if err != nil {
	return nil, err
}
reader := resp.Body
defer reader.Close()

// 将读取到的数据编码转换为utf-8
r, err := charset.NewReader(reader, resp.Header.Get("Content-Type"))
if err != nil {
	return nil, err
}

// 构建一个长度为0  容量为 1024的切片 注意这里的len为0 容量cap为1024 这个容量可根据要读取的数据的大小来调整,以增加性能
b := make([]byte, 0, 1024)
// 循环从reader中读取数据
for {
	// 这里的 b[len(b):cap(b)] 相当于又从b这个切片中截取 当前数据长度:切片容量 个切片
	n, err := r.Read(b[len(b):cap(b)])
	b = b[:len(b)+n] // 这里b[:len(b)+n] 从b生成一个新切片 长度为0:当前数据长度+读取到的长度  如果没有这个语句则无法读取数据
	if err != nil {  // 读取异常时返回,包括数据读取完毕异常 io.EOF
		if err == io.EOF { //异常信息为io.EOF 时重置err为nil
			err = nil
		}
		return b, err
	}

	// 数据长度和容量相等,当前容器已经读满了, 使用append来给切片增加容量,大小由append来控制
	if len(b) == cap(b) {
		// 这里的这个append操作是为了给b对象增加cap容量, append(b, 0) 向切片添加了一个0,
		// 后面又对这个增加了0的切片进行切片[:len(b)] 目的就是删除前面增加的这个0
		b = append(b, 0)[:len(b)]
	}
}