这是一个小项目,爬取图片中的网址信息。
刚开始直接爬去,只能爬取一个页面;历经一天搜寻答案找到了解决方案。
项目要求爬取1000条数据,最后爬取时发现始终只有501条;
原来网站只提供了34页信息,包含501条记录,其他的没有提供。
之后,添加自动更新功能,等待到1000条数据再进行操作,
(网站数据每分钟更新一次)刚开始直接
使用暂停函数虽然可以自动刷新,但是影响程序其他功能,在群里问大神
找到了解决方案。其他的就是数据的传递,数据的分析,以及UI显示了,
没有太大难度。
历经3-4天,改了10-20次,终于差不多了。
效果就是如图显示的一样。
爬取腾讯信息的小爬虫demo
最新推荐文章于 2024-04-01 15:14:18 发布