数据采集---json格式数据

最新推荐文章于 2024-06-29 16:18:05 发布

outside-R

最新推荐文章于 2024-06-29 16:18:05 发布

阅读量893

点赞数 1

分类专栏：数据采集文章标签： json python

本文链接：https://blog.csdn.net/weixin_45044349/article/details/118767761

版权

本文介绍如何从网页源码中提取JSON数据，并探讨在Python中使用`extract()`和`extract_first()`的区别。讲解了如何利用JSON函数，如`json.dumps`进行编码和`json.loads`进行解码，以处理和转化Python对象与JSON字符串。

摘要由CSDN通过智能技术生成

页面展示【智联招聘】：

URL：https://sou.zhaopin.com/?jl=801&kw={0}&p={1}
例：https://sou.zhaopin.com/?jl=801&kw=python&p=1

在这里插入图片描述
右键–>查看网页源码【切片处理获得json数据】

json数据获取要用的数据【一一相对应】

在列表页函数中解析：

 def parse(self, response):
        js = response.xpath('//script[contains(.,"__INITIAL_STATE__=")]/text()').extract_first()   #利用xpath获取<script>标签
        # print(js)

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

outside-R

关注关注

1
点赞
踩
3

收藏

觉得还不错? 一键收藏
打赏
6
评论
数据采集---json格式数据

页面展示【智联招聘】：URL：https://sou.zhaopin.com/?jl=801&kw={0}&p={1}例：https://sou.zhaopin.com/?jl=801&kw=python&p=1右键–>查看网页源码【切片处理获得json数据】json数据获取要用的数据【一一相对应】在列表页函数中解析： def parse(self, response): js = response.xpath('//script[
复制链接

扫一扫