weixin_45431507的博客

原创 使用scrapy框架爬取网站《乌龟量化》的股票信息遇到的一些问题即暂时的解决方案

1.登陆过程中遇到的问题本人想采用第一种登陆方式登陆账号，点击《登陆方式一：账号密码》，就会出现账号密码的输入框。但是网页的网址没有任何改变。所以想使用post请求直接将账号密码传送过去，但是却直接被决绝访问了。返回的是’服务器明白我的意思，但是拒绝访问‘。没办法，只能采用万能的方法了，使用selenium登陆之后再传回cookie进行登陆之后的页面解析行为。2.cookie的传递过程中遇到的问题传递了cookie之后，红色框框的数据全部都能访问到（不传递cookie的话只能访问部分），但是黄色框