![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
java爬虫
文章平均质量分 59
java爬虫相关
AT~
这个作者很懒,什么都没留下…
展开
-
HttpClient实现自动登录校园网
最近买了个nano Pi当作服务器,用来不间断的执行java程序,爬取超星网上未完成的作业并发送详情到qq邮箱中,省去了一个个翻看的繁琐操作.因为学校会断电,网.若想让Nano Pi不需要人力干扰即可完成整个流程,就需要配置开机自启,且我们校园网需要登录,还应自动提交信息至校园网获取网络.这篇文章仅仅只记录自动登录校园网部分抓包并分析登录的ip地址http://110.188.66.35:801/eportal/“?c=Portal&a=login” //常量+"&login_m原创 2021-09-09 00:29:31 · 1138 阅读 · 0 评论 -
爬取学校超星网上未完成作业或考试,并输出至qq邮箱
爬取学校超星网上未完成作业或考试,并输出至qq邮箱相关接口思路登录爬取课程信息根据课程信息构造链接爬取作业和考试信息全代码项目结构采用我之前编写的爬虫模板爬虫模板.相关接口因为完成代码和写这篇笔记隔了好几天的,懒得截图接口信息了,这里就贴上我之前爬取的笔记,可以自己去抓取下练练手courseid,classid,cpi等参数为 id 类,是不变的,且后续网站提供的链接并无此类参数,可以储存起来,而每个链接都需要enc,而enc随机生成,每个链接都不一样,所以不能采用一步到位爬取,得依次爬取解析h原创 2021-09-09 00:11:12 · 11209 阅读 · 2 评论 -
HttpClient爬虫登录类模板
因为最近编写需要登录类的爬虫比较多,所以想封装一个使用的模板,方便以后编写继承结构interface mypachong----abstract mypachongimpl介绍mypachong接口,描述了一个爬虫程序需要一个login的方法实现登录操作,并封装get,post请求(未将方法设置未static是考虑到后续多用户爬取时,其实现类可以封装成员变量描述,不同用户信息)public interface mypachong { boolean login();//登录 HttpResp原创 2021-09-08 23:24:47 · 221 阅读 · 0 评论