长江雨课堂练习题的爬取,并存到mysql中(仅限选择题,填空题有需要的可以自己补全)
**最近上网课,老师有些练习题在长江雨课堂布置,为了好复习我用了2小时写了个简单的爬虫,将习题爬取放到了mysql中下面开始讲讲我的思路。首先这个需要账号登录 ,那就必须需要在爬取的时候带上cookie,获取的方法很简单,直接登录常见雨课用f12打开开发者工具,随便点击一个数据,查看resquest headers ,并且复制cookie,后面写程序有用。下面我们开始点开练习题界面,进入之后,打开开发者工具,全局搜素几个题目的字,找到了一个数据包遮住的是课程id,以及试题的id。发现数据包是
原创
2020-07-01 17:30:16 ·
7032 阅读 ·
4 评论