使用Python编写爬虫程序(代码详细注释),获取彼岸图网的图片
文章目录一、要求二、设计1、彼岸网站URL规则2、程序流程图三、代码(详细注释)四、所遇到过的问题
一、要求
1、抓取目标
彼岸图网(http://pic.netbian.com)上的4K图片。
2、抓取方式
基于Python的聚焦式网络爬虫爬取。
3、存储方式
本地文件存储。
4、工具
pycharm、Python、Firefox浏览器
二、设计
1、彼岸网站URL规则
(1)每个大分类的首页网址构成为https://pic.netbian.com/ + 分类名;
(2)每个大类的每一页一般为20个展
原创
2021-07-08 17:27:13 ·
1205 阅读 ·
0 评论