概述
双11马上就要到了,各种盖楼,领红包,砍价的活动已经开始。本想着靠着各种优惠能便宜入手一些东西,没想到的是一顿操作猛如虎,最后优惠两毛五,甚至有可能比双十一之前还贵。于是乎就写了一段程序用于获取心仪商品的价格,做到对其价格心里有数。
程序实现
程序一共分为以下三部分:
1、从网络上获取商品信息(此处是京东上的笔记本)
2、数据存储到MySQL中
3、查询数据绘图
获取商品信息
此处采用一段程序从京东获取商品信息,主要获取价格、标题、商品id、店铺、抓取时间。
抓取
def on_computer_product_page(save_product_content):
for i in range(1, 10):
url = computer_product_url + str(i)
headers_product['Referer'] = url
time.sleep(2)
resp = requests.get(url, headers=headers_product)
save_product_content(resp.text)
解析
p_price = product.select_one('.p-price').text.replace('&#