python爬虫
文章平均质量分 84
只爱写代码
这个作者很懒,什么都没留下…
展开
-
爬虫第一天(2)
base_url = 'http://www.baidu.com/'# 构造headerua_list = [ 'User-Agent:Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_6_8; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 ', 'User-Agent:M原创 2017-09-25 21:09:40 · 236 阅读 · 0 评论 -
爬虫第一天(1)
import urllib2 # 发请求的模块base_url = 'http://www.baidu.com/' #定义url#执行urlopen方法,传入一个URL,返回一个response对象response = urllib2.urlopen(base_url,timeout=60) #data:有数据传送是post请求,没有则是get;timeout:请求超时设置html = re原创 2017-09-25 20:50:59 · 217 阅读 · 0 评论 -
爬虫第一天(3)
def search(key): base_url = 'http://www.baidu.com/s?' qs = { 'wd': key, } #设置关键字 qs = urllib.urlencode(qs) # urlencode()可将字典编码 fullurl = base_url + qs request = urllib2原创 2017-09-25 21:20:44 · 207 阅读 · 0 评论 -
新浪期货数据接口
附注:对于期货数据,一直在寻找互联网上能够获得的比较好的数据源,最近发现了“新浪期货”的数据源,可以提供一分钟的期货K线数据。http://hq.sinajs.cn/list=TICKER对于国内期货连续,Ticker为正常Ticker加个0,比如 豆一,Ticke认为 A0,白银AG0:http://hq.sinajs.cn/list=A0http://hq.sinajs.c...转载 2018-03-08 15:56:46 · 15047 阅读 · 2 评论