go http的GET请求返回400错误码

一、背景

        准备完善之前的小说爬虫(19年年底编写的项目),运行后,即用go发起http的GET请求,返回400错误码。

二、出现的问题

请求代码

func bookScan() {
	url := "https://m.999xs.com/search.php?keyword=完美世界"
	client := http.Client{}

	request, err := http.NewRequest("GET", url, nil)
	if err != nil {
		log.Fatalf("http.NewRequest error: %s", err)
	}
	request.Header.Set("User-Agent", "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36")
	request.Header.Set("Content-Type", "application/x-www-form-urlencoded")
	request.Header.Set("Connection", "keep-alive")

	resp, err := client.Do(request)
	if err != nil {
		fmt.Println(err)
		return
	}
	defer resp.Body.Close()
	if resp.StatusCode != 200 {
		log.Fatalf("status code error: %d %s", resp.StatusCode, resp.Status)
	}
}

返回消息:

2021/07/09 00:45:27 status code error: 400 400 Bad Request
exit status 1

用postman及浏览器测试皆没有问题。

三、解决方案(modify注释的地方)

func bookScan() {
	url := "https://m.999xs.com/search.php?keyword=完美世界"
	client := http.Client{}

	request, err := http.NewRequest("GET", url, nil)
	if err != nil {
		log.Fatalf("http.NewRequest error: %s", err)
	}
	// ----- modify start --------
	q := request.URL.Query()
	q.Add("keyword", "完美世界")
	request.URL.RawQuery = q.Encode()
	// ----- modify end --------
	request.Header.Set("User-Agent", "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36")
	request.Header.Set("Content-Type", "application/x-www-form-urlencoded")
	request.Header.Set("Connection", "keep-alive")

	resp, err := client.Do(request)
	if err != nil {
		fmt.Println(err)
		return
	}
	defer resp.Body.Close()
	if resp.StatusCode != 200 {
		log.Fatalf("status code error: %d %s", resp.StatusCode, resp.Status)
	}
}

  • 2
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值