Python爬虫——使用JSON库解析JSON数据

文章目录

• • 1 如何在网页中获取 JSON 数据？
  • 2 Python 内置的 JSON 库

这几天在琢磨爬取动态网页，发现需要爬取 js 内容，虽然说最后还是没有用上 JSON 库进行解析，不过笔记写的都写了，就发出来记录一下吧。

1 如何在网页中获取 JSON 数据？

打开一个具有动态渲染的网页，按 F12 打开浏览器开发工具，点击“网络”，再刷新一下网页，观察是否有新的数据包。

发现有 js 后缀的文件，这就是我们想要的 json 数据了。

2 Python 内置的 JSON 库

内置的 json 库的函数：

• dumps：用于将 Python 的数据类型转化为 json 字符串。

• loads：将 json 字符串转化为 Python 的数据类型。

实例 1：

import json

data = [ { 'a' : 1, 'b' : 2, 'c' : 3, 'd' : 4, 'e' : 5 } ]

data2 = json.dumps(data)
print(data2)

输出结果：

[{"a": 1, "c": 3, "b": 2, "e": 5, "d": 4}]

实例 2：

#!/usr/bin/python
import json

jsonData = '{"a":1,"b":2,"c":3,"d":4,"e":5}';

text = json.loads(jsonData)
print(text)

输出结果：

{u'a': 1, u'c': 3, u'b': 2, u'e': 5, u'd': 4}

关于Python技术储备

学好 Python 不论是就业还是做副业赚钱都不错，但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！

包括：Python激活码+安装包、Python web开发，Python爬虫，Python数据分析学习等教程。带你从零基础系统性的学好Python！

一、Python学习大纲

Python所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。

二、Python必备开发工具

三、入门学习视频

四、实战案例

光学理论是没用的，要学会跟着一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

五、python副业兼职与全职路线

上述这份完整版的Python全套学习资料已经上传CSDN官方，如果需要可以微信扫描下方CSDN官方认证二维码 即可领取

👉[[CSDN大礼包：《python安装包&全套学习资料》免费分享]]（安全链接，放心点击）