使用FileInput对象读取文件

最新推荐文章于 2024-08-13 18:29:56 发布
最新推荐文章于 2024-08-13 18:29:56 发布
阅读量379 收藏
点赞数
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_45323012/article/details/104635349
版权
本文介绍如何使用Python的FileInput模块来高效读取大文件，避免readlines函数因一次性加载所有内容导致的内存占用问题。通过FileInput的input函数，可以实现逐行读取并利用缓存机制，从而节省内存资源。
摘要由CSDN通过智能技术生成

读取一个非常大的文件，使用readlines函数会占用太多内存，因为该函数会一次性将文件所有的内容都读到文件列表中，列表中的数据都需要放在内存中，所以非常占用内存。
1.for 循环readlines逐行读取
2.fileinput 模块的input函数读取
input 方法返回一个FileInput 对象，使用的是缓存机制，并不会一次性读取文件的所有内容。所以比readlines更节省内存资源。

import fileinput
fileobj=fileinput.input(r"C:\Users\LHL\Desktop\TB500.csv")
type(fileobj)  
fileobj.readline().rstrip(</
最低0.47元/天 解锁文章
不才~
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python爬虫编程思想（74）： 使用FileInput对象读取文件
一个被知识诅咒的人
11-10 304
如果需要读取一个非常大的文件时，使用readlines函数会占用太多内存，因为该函数会一次性将文件所有的内容都读到列列表中，列表中的数据都需要放到内存中，所以非常占内存，为了解决这个问题，可以使用for循环和readline方法逐行读取，也可以使用fileinput模块中的input函数读取指定的文件。 input方法返回一个FileInput对象，通过FileInput对象的相应方法可以对指定文件进行读取， FileInput对象使用的缓存机制，并不会一次性读取文件的所有...
Python中fileinput库
既然选择远方，便只顾风雨兼程！
07-28 2458
说到fileinput，可能90%的码农表示没用过，甚至没有听说过。这不奇怪，因为在python界，既然open可以走天下，何必要fileinput呢？。其为open方法的高级封装fileinput模块可以对一个或多个文件中的内容进行迭代、遍历等操作。该模块的input()函数有点类似文件readlines()方法，区别在于前者是一个迭代对象，即每次只生成一行，需要用for循环迭代。后者是一次性读取所有行。在碰到大文件的读取时，前者无疑效率更高效。#!...
input file详细介绍
sunqinshan的博客
12-17 3710
input file详细介绍
关于input type=“file”的及其files对象的深层探究
热门推荐
lianzhang861的博客
05-11 11万+
我们都知道，html5中有个input type=file元素。用该元素可以实现页面上传文件的功能 但一般的做法只是简单的在表单中操作，我来研究一下深层东西 想要了解它，就要知道它的内置对象，files 页面上写一个input，然后选俩个图片，打印这个input对象 $("input[name='file1']").change( function(e){ console.log...
H5 File 对象获取 Input type=file 文件详细信息
蚩尤后裔-汪茂雄
04-10 8870
目录 H5 File 对象概述 编码示例 accept 属性过滤文件类型 需求分析 1、假如现在需要获取用户上传文件的详细信息，如 文件名称、文件大小、文件类型、上传修改时间等等。 H5 File 对象概述 1、文件上传表单如下所示：method 必须是 post、enctype 必须是multipart/form-data 类型、如果是多文件上传，则在 type=file 中...
FileInputStream读取文件的方法
weixin_48586922的博客
11-17 1254
FileInputStream i=null; try { //读取文件 i=new FileInputStream(“out/work1”); } catch (FileNotFoundException e) { e.printStackTrace(); }finally { //需要关闭，不关闭浪费资源 i.close(); } //创建一个数组长度为4的数组 byte[] b=new byte[4]; //i.read(b)计算读取了多少个元素，如果最后没有元素了，则返回-1 int c=0; wh
Python使用os模块和fileinput模块来操作文件目录
09-21
### Python使用os模块和fileinput模块来操作文件目录 #### os模块详解 在Python编程过程中，经常需要对文件和目录进行各种操作。Python内置的`os`模块提供了丰富的功能来帮助开发者实现这些需求。 ##### 1. 获取...
Bootstrap Fileinput 4.4.7文件上传实例详解
10-18
本文详细介绍了一个使用Bootstrap Fileinput 4.4.7版本实现的文件上传实例，该实例主要功能是发送带有附件的邮件。通过本实例的讲解，读者将能够了解到如何利用此插件实现前端文件上传，并与后端Java代码相结合，...
Python fileinput模块如何逐行读取多个文件
01-19
Python 提供了 fileinput 模块，通过该模块中的 input() 函数，我们能同时打开指定的多个文件，还可以逐个读取这些文件中的内容。 fileinput 模块中 input() 该函数的语法格式如下： fileinput.input（files=”...
Java将对象保存到文件中/从文件中读取对象的方法
09-01
下面小编就为大家带来一篇Java将对象保存到文件中/从文件中读取对象的方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
Python fileinput模块使用实例
09-22
通过调用 `fileinput.input()` 函数，我们可以获取一个迭代器对象，该对象可以用于遍历文件中的每一行。 ```python import fileinput # 处理一个文件 for line in fileinput.input('example.txt'): print(line) #...
Python fileinput模块使用介绍
01-20
fileinput模块提供处理一个或多个文本文件的功能，可以通过使用for循环来读取一个或多个文本文件的所有行。它的工作方式和readlines很类似，不同点在于它不是将全部的行读到列表中而是创建了一个xreadlines对象。 ...
Python中fileinput模块介绍
杰瑞的专栏
12-15 1万+
fileinput模块可以对一个或多个文件中的内容进行迭代、遍历等操作。该模块的input()函数有点类似文件句柄 readlines()方法，区别在于前者是一个迭代对象，需要用for循环迭代，后者是一次性读取所有行。用fileinput 对文件进行循环遍历，格式化输出，查找、替换等操作，非常方便。
python3基础系列之六【输入&输出&file方法】
班婕妤
01-08 319
一： 基本IO 1：输入与输出 输入 input()方法：用于读取键盘输入，以字符串的形式读一行文本 input(str()) :函数返回一个用户易读的表达形式 input(repr()) :产生一个解释器易读的表达形式 - 因此 str() 与 repr() 的不同在于： str() 的输出追求可读性，输出格式要便于理解，适合用于输出内容到用户终端。 ...
对 File 对象的理解
小草莓的博客
04-11 401
或者说是一种特殊的 Blob 对象。所有可以使用 Blob 对象的场合都可以使用它。，用户选中文件以后，浏览器就会生成一个数组，里面是每一个用户选中的文件，表单的文件上传控件（<input type="file">），它包含了文件的相关信息，如文件名、文件大小、文件类型等。通常与用户通过文件输入框选择的文件相关联。，是表示计算机文件的一种数据类型。File 对象指代一个文件对象。它们都是 File 实例对象。它继承了 Blob 对象。
看看这个Python读取文件的方法，绝对能够堪称天花板级别...
DEVELOPERAA的博客
01-18 216
哈喽兄弟们，今天咱们来了解一下 fileinput 。说到fileinput，可能90%的码农表示没用过，甚至没有听说过。这不奇怪，因为在python界，既然open可以走天下，何必要fileinput呢？
input file单文件上传和FileReader对象的基本使用
Jimmy的前端博客
08-09 2203
多说无益，撸出的代码才是铁的事实。。。 建议：可以先看代码再看步骤也挺不错。。。 第一步：在上传框change的时候，获取自带的files对象，一般获取到的为files[0],如下面代码 oFlieImg.onchange = function(e){ var _self = e.currentTarget; var oSelfFile = _self.files[0]; //获取...
【python学习】深入解析 `jq` 库：JSON 处理的利器
最新发布
m0_54007171的博客
08-13 389
jq库是 Python 对流行的命令行工具jq的封装。它允许你直接在 Python 中使用jq的查询语言来处理 JSON 数据。借助jq，你可以轻松地对 JSON 数据进行过滤、选择、转换、聚合等操作，极大地简化了代码复杂度。
使用原生js读取文件MD5
05-29
JavaScript本身并没有提供计算文件MD5的API，但可以通过引入第三方库来实现该功能。以下是使用第三方库spark-md5计算文件MD5的示例代码： ```javascript // 引入spark-md5库 import SparkMD5 from 'spark-md5'; // 读取文件内容并计算MD5 function calculateMD5(file) { return new Promise((resolve, reject) => { let fileReader = new FileReader(); let spark = new SparkMD5.ArrayBuffer(); fileReader.onload = function() { spark.append(fileReader.result); let hash = spark.end(); resolve(hash); }; fileReader.onerror = function() { reject(fileReader.error); }; fileReader.readAsArrayBuffer(file); }); } // 读取文件并计算MD5 let fileInput = document.querySelector('input[type="file"]'); fileInput.addEventListener('change', function() { let file = fileInput.files[0]; calculateMD5(file).then(hash => { console.log(hash); }).catch(error => { console.error(error); }); }); ``` 在上述代码中，我们首先使用ES6的import语法引入了spark-md5库。接着，定义了一个calculateMD5()函数，用于读取文件内容并计算MD5。 在calculateMD5()函数中，我们首先创建了一个FileReader对象，并且定义了onload事件处理函数。当文件读取完成后，该事件处理函数会被调用。 接着，我们使用spark-md5库创建了一个SparkMD5.ArrayBuffer对象，并将读取到的文件内容追加到该对象中。最后，调用SparkMD5.ArrayBuffer对象的end()方法来计算文件的MD5值。 需要注意的是，由于文件读取是异步操作，因此calculateMD5()函数返回一个Promise对象，可以使用then()方法来获取计算出的MD5值。 最后，在文件选择框的change事件处理函数中，我们调用了calculateMD5()函数来计算文件的MD5，并将结果输出到控制台中。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值