新发地request爬虫练习

参考代码如下:

import requests
import json
url = "http://www.xinfadi.com.cn/getPriceData.html"
with open("data.csv",'w')as f:
    f.writelines("品名,类型,最低价,平均价,最高价,产地,规格,发布日期\n")
for page in range(1,40):
    FormData = {
    'limit':20,
    'current':page,
    'prodPcatid': 1187,
    'prodCatid': 1201
    }
    resp = requests.post(url,data=FormData)
    html = resp.text
    content = json.loads(html)
    veg_info = content["list"]
    print("品名\t类型\t最低价\t平均价\t最高价\t产地\t规格\t发布日期")  
    for dic in veg_info:
        print(dic['prodName'],dic['prodCat'],dic['lowPrice'],dic['avgPrice'],dic['highPrice'],dic['place'],dic['unitInfo'],dic['pubDate'])
        with open('data.csv','a',newline="\n") as f:
            d = dic['prodName']+","+dic['prodCat']+","+dic['lowPrice']+","+dic['avgPrice']+","+dic['highPrice']+","+dic['place']+","+dic['unitInfo']+","+dic['pubDate']+"\n"
            f.writelines(d)

运行如下:

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

bug智造

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值