Python版本:3.6.4
相关模块:
requests模块;
pandas模块
qrcode模块;
PIL模块;
以及一些Python自带的模块。
环境搭建
安装Python并添加到环境变量,pip安装需要的相关模块即可。
过女神节应该什么礼物好呢,爬取礼物说App,来告诉你选什么礼物好
App分析
爬取礼物TOP100榜单的信息
image
通过手机抓包软件「Charles」查找请求信息
成功发现请求信息
获取信息
代码实现
from copyheaders import headers_raw_to_dict
import requests
import json
import time
headers = b"""
Accept:text![]()ml,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,\*/\*;q=0.8
Accept-Encoding:gzip, deflate, br
Accept-Language:zh-CN,zh;q=0.9
Cache-Control:max-age=0
Connection:keep-alive
Cookie:Hm\_lvt\_8a996f7888dea2ea6d5611cd24318338=1551961719; Hm\_lpvt\_8a996f7888dea2ea6d5611cd24318338=1551961719; session=c93470ef-86a2-43cc-abe3-36f98442bb8a
Host:api.liwushuo.com
Upgrade-Insecure-Requests:1
User-Agent:Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36
"""
# 将请求头字符串转化为字典
headers = headers_raw_to_dict(headers)
num = 0
for i in range(0, 100, 20):
time.sleep(5)
# 请求网址
url = 'https://api.liwushuo.com/v2/ranks\_v3/ranks/2?limit=20&offset=' + str(i)
response = requests.get(url=url, headers=headers)
html = response.text
# 将字符串转为json格式
result = json.loads(html)
# 礼物列表
items = result['data']['items']
for item in items:
# 名称
name = item['name']
print(name)
# 价格
price = item['price']
print(price)\
# 礼物在礼物说里的地址
url = item['url']
print(url)
# 礼物图片
image = item['cover\_image\_url']
print(image)
# 礼物描述
description = item['description'].replace(',', ',').replace('\n', '').strip()
print(description)
# 礼物淘宝购买地址
purchase_url = item['purchase\_url']
print(purchase_url)
# 礼物排行
num += 1
rank = 'TOP' + str(num)
print(rank)
print('\n')
with open('gift.csv', 'a+') as f:
f.write(name + ',' + price + ',' + url + ',' + image + ',' + description + ',' + purchase_url + ',' + rank + '\n')
f.close()
成功获取礼物信息
礼物的名称、价格、图片链接、礼物说链接、介绍、淘宝链接以及排行信息
图片生成
1. 生成礼物图片
有了图片的链接,一会就下载下来了。
具体代码
如果你也是看准了Python,想自学Python,在这里为大家准备了丰厚的免费学习大礼包,带大家一起学习,给大家剖析Python兼职、就业行情前景的这些事儿。
一、Python所有方向的学习路线
Python所有方向路线就是把Python常用的技术点做整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
二、学习软件
工欲善其必先利其器。学习Python常用的开发软件都在这里了,给大家节省了很多时间。
三、全套PDF电子书
书籍的好处就在于权威和体系健全,刚开始学习的时候你可以只看视频或者听某个人讲课,但等你学完之后,你觉得你掌握了,这时候建议还是得去看一下书籍,看权威技术书籍也是每个程序员必经之路。
四、入门学习视频
我们在看视频学习的时候,不能光动眼动脑不动手,比较科学的学习方法是在理解之后运用它们,这时候练手项目就很适合了。
四、实战案例
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
五、面试资料
我们学习Python必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有阿里大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。
成为一个Python程序员专家或许需要花费数年时间,但是打下坚实的基础只要几周就可以,如果你按照我提供的学习路线以及资料有意识地去实践,你就有很大可能成功!
最后祝你好运!!!
网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!