python爬虫怎么把爬的数据写进文件里-python爬虫系列(4.1-关于文件的写入)

一、关于python中json模块的回顾

1、json.dumps():将python中字典转换为json字符串

2、json.loads():将json字符串转换为python字典

1、使用前面使用 bs4 爬取获取贵州农产品爬取的数据

2、存储到本地文件中

...

def down_data(self):

"""

下载数据

:return:

"""

soup = BeautifulSoup(self.get_html, "lxml")

table = soup.find("table", attrs={"class": "table table-hover"})

trs = table.find("tbody").find_all("tr")

food_list = []

fb = open("food.json", "a", encoding="utf-8")

for tr in trs:

food_dict = {}

tds = tr.find_all("td")

name = tds[0].get_text()

price = tds[1].get_text()

address = tds[3].get_text()

time = tds[4].get_text()

food_dict["name"] = name

food_dict["price"] = price

food_dict["add

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值