![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 60
星河百穿
一个正在学Python的程序猿
展开
-
一键爬取王者荣耀全皮肤高清图片【方法二】
爬取王者荣耀官网皮肤【爬虫】上次我们讲了爬虫的定义以及爬取王者荣耀皮肤的思路。今天我们换一种方式来爬取同样的内容。大体上思路和方法一相同。方法一传送门:方法一方法二# 网址:https://pvp.qq.com/web201605/js/herolist.jsonimport requestsimport osurl = 'https://pvp.qq.com/web201605/js/herolist.json' # 英雄名字json 真实地址html = requests.get(.原创 2021-02-10 12:01:34 · 809 阅读 · 1 评论 -
一键爬取王者荣耀全皮肤高清图片【方法一】
文章目录前言一、爬虫是什么?二、使用步骤1.引入库2.访问的URL3.爬取方法另外,皮肤图片的URL也需要我们手动的将其找出完整代码总结前言相信很多小伙伴们都喜欢玩王者荣耀这款MOBA手游吧,博主也非常喜欢玩这款手游,今天我就来教会大家如何用爬虫爬取王者荣耀英雄的相关皮肤图片。一、爬虫是什么?网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。原创 2021-02-05 18:11:27 · 2824 阅读 · 5 评论 -
爬取豆瓣图书小说标签信息
最近两天无聊的很,闲着没事做写了一些爬虫代码来把之前学过的爬虫知识回顾回顾。今天写的是爬取豆瓣图书小说标签信息页上的内容。大家在学会这个爬虫后可以自己试着爬取试试看,我们要爬取的网址是豆瓣图书标签:小说这里我先给出代码:import requestsfrom bs4 import BeautifulSoupimport timedef get_url(url): headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.原创 2021-01-27 16:05:46 · 615 阅读 · 1 评论 -
一小时教会你单线程爬取微博热搜
【Python爬虫】单线程爬取微博热搜最近有很多小伙伴们都天天在微博上吃到各种不少的瓜吧,一打开微博热搜榜就是当下的热点头条。那么我们怎么用程序来爬取微博热搜的内容呢?今天我就来教会大家怎么用爬虫爬取微博热搜上的内容,可以随时随地在自己电脑上run一下就可以获取到当下微博热搜。首先,什么是爬虫呢?网络爬虫(又称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。原创 2021-01-26 18:41:12 · 855 阅读 · 2 评论