爬取课表在脚本的完成下显得十分简单
一 在打开南邮研究生教务网站是登录一下,并打开chrome的审查元素的network发现
登录时请求的url和所提交表单的数据email和assword
二 在打开课表查询的页面是我们发现
有一个保存为excel文件的button,我点开发现
浏览器向这个url发出了post,提交的表单是
第一个是判断是否要服务器发送课表的excel,第二个是课表所对应的学期代号,第三个是学号
查看html发现
不同的学年和学期有着不同的value值
再来看看服务器的响应
发现传过来的内容类型(content-type)是vnd.ms-excel也就是excel表格了,只要我们把他保存到本地就大功告成了
也可以不用这种下载的方式,直接从页面当中爬取这些信息,不过这样做匹配起来太过繁杂,而且爬过来的信息还要保存到excel,这还要用到xlwt包
三 代码