python网络爬虫
关注
分享
扫一扫
王庭玉
这个作者很懒，什么都没留下…
展开
-
Python爬虫-Request入门
安装Requests库requests.get()-获取百度首页信息import requestsr = requests.get("www.baidu.com")#获取反馈信息 200为正常r.status_coder.encoding = "utf-8"r.text爬取网页的通用代码框架import requestsdef getHTMLText(url):...原创 2018-07-25 16:48:25 · 3392 阅读 · 0 评论 -
Python爬虫-Request爬取网站内容
爬去网页-Requests，网站库-Scrapy，全网爬取-定制Google这种。爬取京东一个页面的信息import requestsurl = 'http://item.jd.com/2967929.html' try: r = requests.get(url) r.raise_for_status() #如果状态不是2...原创 2018-07-25 17:44:53 · 8255 阅读 · 0 评论 -
网络爬虫-BeautifulSoup库
Beautiful Soup库理解-查看官方文档<html> <body> <p class = "title">...</p> <body><html>基于bs4库遍历方法bs4库格式化和编码from bs4 import BeautifulSoup原创 2018-07-27 09:35:59 · 234 阅读 · 0 评论