requests中get请求没有referer得不到数据

欢迎使用Markdown编辑器

今天在进行爬虫实践的过程中，遇到了一个问题，我使用带参数的get请求对历史基金数据进行爬取，但是加入参数后，返回的数据中却没有有效的数据。进行简单分析
1、将带有参数的url输入到浏览器访问，得到同样的结果，状态码为200，内容为jQuery18309664454877715734_1620211060736({“Data”:"",“ErrCode”:-999,“ErrMsg”:"",“TotalCount”:0,“Expansion”:null,“PageSize”:0,“PageIndex”:0})

2、加入更多headers信息，Host，User-Agent、Cookie，referer等
最后发现是referer问题，referer是网站为了防盗链做的，服务器通过判断referer是不是自己的网站来进行处理，如果不是自己的同源网站，就不发送有效数据。