python jsonl文件读取(jsonlines)

用户指南

导入jsonlines模块以开始使用:

import jsonlines

便捷函数jsonlines.open()采用文件名并返回读取器或写入器,从而使简单的情况极其简单:

with jsonlines.open('input.jsonl') as reader:
    for obj in reader:
        ...

with jsonlines.open('output.jsonl', mode='w') as writer:
    writer.write(...)
    writer.write_all(raw_datas)

jsonlines

jsonlines是一个Python库,用于简化jsonlines 和ndjson数据的使用。

这种数据格式简单明了:它只是每行一个有效的JSON值,使用UTF-8编码。尽管使用和创建此类数据的代码并不那么复杂,但是当添加数据验证,错误处理,对二进制流和文本流的支持等等时,它很快变得足够重要,以至于需要专用的库。这个小库实现了所有(甚至更多!)功能,因此使用这种格式的应用程序不必重新发明轮子。

功能

方便的open()功能
使简单的案例编写起来很简单
采用文件名和模式
返回一个Reader或 Writer实例
可以用作上下文管理器
灵活 Reader
包装类似文件的对象或任何其他可迭代的屈服线
可以直接通过该read()方法读取行
可以直接或通过iter()方法用作迭代器
可以验证数据类型,包括无检查
可以在迭代过程中跳过无效行
提供体面的错误信息
可以用作上下文管理器
允许使用自定义loads 可调用控件完全控制解码
灵活 Writer
包装类似文件的对象
可以产生紧凑的输出
可以对键进行排序(确定性输出)
每次写入后可以刷新基础流
可以用作上下文管理器
允许使用自定义dumps 可调用控件完全控制编码

  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

和你在一起^_^

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值