![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
妄想星空
STUDENT
展开
-
Python爬虫之怼破反爬虫机制
一、准备 先要准备一个浏览器,然后会解析头,当然,其他软件(如burpsuit也行)。 然后选择一个网站。 二、正式开始 选好了网站: 2. 我们尝试直接用普通的代码爬一下: from bs4 import BeautifulSoup import requests import urllib def main(): result = requests.get("https://w...原创 2019-07-22 11:43:18 · 373 阅读 · 0 评论 -
python 单/多 线程爬虫示例
一、准备 两个比较重要的库: pip install bs4 #注意是requests,而不是request! pip install requests 二、示例 #coding=utf-8 #用来解析html文档,然后过滤我们需要的数据 #import bs4 from bs4 import BeautifulSoup #用来请求网络数据 import requests import url...原创 2019-07-19 11:04:17 · 185 阅读 · 0 评论