爬虫
观月执白
春秋诗礼号儒身
封剑无为求道真
三世菩提修罗命
江湖观月执白人
展开
-
简单爬虫(1):亚马逊的陶瓷杯
这里用到工具有requests库,BeautifulSoup库 打开亚马逊网站搜索“陶瓷杯”关键字,把搜索到的网页网址存入res={} 可以用浏览器的开发者模式找到其中的代码,也可以用InfoLite插件。 代码: import requests from bs4 import BeautifulSoup res = requests.get("https://www.amazon.cn原创 2017-11-29 14:35:24 · 921 阅读 · 0 评论 -
简单爬虫(2):火车信息
12306就算了,爬一下台湾的高铁试试: 首先到台湾高铁查一下台北到桃园站的地铁。 打开浏览器开发者模式,找到表单数据,把表单用字典按键值对方式的方式存入变量payload 用post方法把网址和表单数据发出。 代码: import requests from bs4 import BeautifulSoup payload = {原创 2017-11-30 01:28:36 · 368 阅读 · 0 评论