关闭

旅游去哪儿--大数据生成旅游的热点图

编译环境: python31.首先爬取去哪儿网的景点的门票信息(例如:北京地区)爬取的信息保存在xsxl文件和json数据 调用百度地图的api 生成可视化的数据 1.根据申请百度地图密钥 ,点击创建应用,应用的名字可以任意,但是应用的类型是浏览器端。 提交之后就会生成应用的ak(密钥) github项目的地址...
阅读(555) 评论(0)

爬取《战狼2》电影短评论,生成图云

模拟登陆豆瓣第一次登陆需要验证码,之后的登陆可以隐去 “login(”username’,’password’)”,因为使用session保存了必要的登陆信息,代码如下:import requests try: import cookielib except: import http.cookiejar as cookielib import re import time impor...
阅读(3657) 评论(24)

SSLError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:581)

如何解决SSL 根证书验错误: 一种解决方法是:verify=False 在session.request 里面:session.post(post_url,data=post_data,headers=headers,verify=False)第二种解决方法是: 安装certifi 或者更新requests包...
阅读(235) 评论(0)

爬取知乎用户信息、头像、问题关注者、用户的所有关注者的头像

#!/usr/bin/env python3 # -*- coding: utf-8 -*- ''' Required - requests (必须) - pillow (可选) Info - author : "xchaoinfo" - email : "xchaoinfo@qq.com" - date : "2016.2.4" Update - name : "wangmengcn"...
阅读(437) 评论(0)

根据图片链接规律爬取图片并下载

import requests import urllib import re from PIL import Image cou=1 for i in range(0,300): print ('下载') num='' if i<9: num=num+'00'+str(i) elif 10<=i<=99: num=num+'0'+st...
阅读(152) 评论(0)
    个人资料
    • 访问:95958次
    • 积分:2445
    • 等级:
    • 排名:第15821名
    • 原创:148篇
    • 转载:16篇
    • 译文:0篇
    • 评论:34条
    每个人都是过客,每个人都有故事
    也许深夜往往是人们内心最为脆弱的时刻。孤独,绝望,失意,无奈......这些复杂沉重的情绪会随着黑夜的来临不再躲藏。
    最新评论