![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
qq_24587727
这个作者很懒,什么都没留下…
展开
-
04python3.0爬虫之反爬虫(随机User Agent、获取代理IP)
随机User Agent安装和导入# 安装fake_useragentpip install fake_useragent# 导入fake_useragentfrom fake_useragent import UserAgent获取User-Agentua=UserAgent()print(ua.ie)print(ua.chrome)print(ua.firefox)print(ua.safari)print(ua.opera)print(ua.random) #原创 2020-07-16 15:47:59 · 468 阅读 · 0 评论 -
转载网络爬虫的相关文章
以下连接均为转载Python3网络爬虫(一):利用urllib进行简单的网页抓取Python3网络爬虫(二):利用urllib.urlopen向有道翻译发送数据获得翻译结果Python3网络爬虫(三):urllib.error异常Python3网络爬虫(四):使用User Agent和代理IP隐藏身份Python3网络爬虫(五):Python3安装ScrapyPython3网络爬虫(六):Python3使用Cookie-模拟登陆获取妹子联系方式Python3网络爬虫(七):使用Beautifu转载 2020-07-13 14:35:22 · 207 阅读 · 0 评论 -
01python3.0爬虫之Beautiful Soup的简单使用
1.安装和导入pip install beautifulsoup4from bs4 import BeautifulSoup2.BeautifulSoup的一些属性BS.body :BS.标签名称 —》获取标签下所有内容Beautiful Soup的四大对象之Tag:soup.body.name -----》BS.标签.name:获取标签的名称soup.标签.attrs ----》BS.标签.attrs:获取该标签下所有属性,返回一个dictBeautiful Soup原创 2020-07-12 10:50:16 · 165 阅读 · 0 评论