![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python
文章平均质量分 79
we1gr
这个作者很懒,什么都没留下…
展开
-
猫眼电影Top100爬取
import requests import re import json import time from requests.exceptions import RequestException """猫眼电影Top100爬取""" def get_one_page(url): """请求页面,若成功则返回页面的内容""" try: # 设置请求头,原创 2018-05-22 12:57:45 · 330 阅读 · 0 评论 -
weibo页面爬取并写入MongoDB数据库
跟着大佬学爬虫本次爬虫代码是根据崔庆才大佬书中内容完成的,在此感谢崔大,顺便记录一下自己的苦逼学习经历吧。如题,若要成功运行代码,请先安装MongoDB数据库。若实在是怕麻烦,那就自己改一哈代码,保存信息到本地文本文件也是可以的。本次爬虫虽然是按照书中内容写的,但是当我完全按照书中所写却运行报错。调试了半天,发现是响应的数据格式有变,这不奇怪,毕竟书中代码也有些年头了嘛。最后改了一些代码成功运行。...原创 2018-05-26 19:46:04 · 751 阅读 · 0 评论 -
今日头条图片爬取
如果爬虫不是为了抓取小姐姐照片的话,那就毫无意义和以往一样,写文章不是为了其他,只是单纯记录一下自己的学习生活,此文就是为了记录学习经历(小姐姐)而写的。正文:本文依旧是照着崔大书上内容完成的,没办法自己太菜了,只有边看边写才能维持生活这样子......虽然是照着书上写,但是由于时间关系,返回的数据格式还是有一些改变,因此代码有几处被我改动了。总结以下几点需要注意的地方:在作者当时可以直接获取到图...原创 2018-05-27 21:20:53 · 1111 阅读 · 0 评论