requests
小灵子2050
这个作者很懒,什么都没留下…
展开
-
Python爬取网页数据示例
使用requests库使用re模块清洗响应数据从便民网站爬取常用电话,并将其写入文件,以便查询代码如下:"""topic:爬取“便民查询网上的常用号码”author:小灵子date:2019-5-31思路:先从开发者工具找到相应请求头、url等等<tr bgcolor="#EFF7F0"> <td>匪警</td> ...原创 2019-05-31 18:47:46 · 2800 阅读 · 0 评论 -
Python爬虫简单统计网页数据
爬取“豆瓣电影”网页数据并进行简单统计练习知识点:requests模块、get方式请求正则表达式、清洗数据统计数据代码中有详细注释,细节不再赘述"""topic:爬取豆瓣电影数据,做一下简单分析author:小灵子date:2019-5-31"""import re, requests"""https://movie.douban.com/j/chart/top_l...原创 2019-06-01 10:44:02 · 2434 阅读 · 0 评论 -
Python最简单的爬虫脚本
正则表达式、lxml、BeautifulSoup统统都用不上状况也是存在的,如果响应类型是json的话。试着顺下面代码的思路对照下豆瓣电影的 request——response互动"""topic:豆瓣是异步加载的,更神奇的是response的内容是json,我试着抓取author:小灵子date:2019-6-4"""import requestsimport timedef...原创 2019-06-04 20:42:30 · 11503 阅读 · 0 评论