自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 收藏
  • 关注

原创 爬虫 猫眼电影

TOP 100import urllib.requestimport urllib.errorimport refrom bs4 import BeautifulSoup def get_one_page(url): try: response = urllib.request.urlopen(url) if response.co...

2019-02-25 15:56:59 79

原创 爬虫 天气

爬取上海临沂两地天气和污染指数import urllib.requestfrom pyquery import PyQuery as pqimport recity= ['上海','临沂']city_num = ['101020100','101120901']def find_weather(country): url = 'http://www.weather.c...

2019-02-25 15:55:51 198

原创 爬虫 头条

网页为Ajax加载,不能直接爬。import urllib.requestimport urllib.parseimport urllib.errorimport jsonfrom bs4 import BeautifulSoupimport reimport osfrom multiprocessing import Pooldef get_page(offset): ...

2019-02-25 13:34:32 67

原创 有道翻译爬虫 及 有道翻译POST请求的errorcode 50问题

有道具有反爬虫机制,在from data里通过改变salt和sign进行反爬。笔者用浏览器url进行爬取会返回errorcode,将_o删除后得以解决。如果想通过获取salt的构造方式解决可以看:https://blog.csdn.net/nunchakushuang/article/details/75294947import urllib.requestimport urlli...

2019-02-08 18:15:59 558

原创 python装饰器

作用:在不改变原来对象的情况下给不同函数或类插入相同的功能。理解装饰器必须先知道闭包和内嵌函数。一、内嵌函数 在一个函数中定义了另外一个函数。这里不进行过多说明。 二、闭包将组成函数的语句和这些语句的执行的环境打包到一起得到的对象。如果调用函数A,这个函数A返回一个函数B。这个被返回的函数就叫闭包。在调用A的时候,传的参数叫做自由变量。当内嵌函数使用自由变量的时候,当外...

2019-02-07 22:39:24 51

原创 python生成器 send()方法

用途:使用方法send()重置生成器的生成序列。send方法有一个参数,该参数指定的是上一次被挂起的yield语句的返回值。例:producer()通过send方法给xie()发送任务:def xie(): print("等待接受任务") while True: data = (yield) print("成功接受任务:",...

2019-02-07 13:41:03 975

空空如也

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除