【python-数据分析-numpy】文件操作&读取csv文件&NAN NF

最新推荐文章于 2024-07-09 17:49:13 发布
最新推荐文章于 2024-07-09 17:49:13 发布
阅读量1.1w 收藏 17
点赞数 1
分类专栏： python 文章标签： 1024程序员节
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liuyiming2019/article/details/120931448
版权
本文讲解了如何使用Python的NumPy库进行文件操作，包括numpy.save和numpy.load的多维数组存储，以及CSV文件的读写技巧。特别关注了如何处理缺失值（NAN），如删除、替换及使用字典方式写入DictWriter。
摘要由CSDN通过智能技术生成

【python-数据分析-numpy】文件操作&读取csv文件&NAN NF

文件操作

在这里插入图片描述

savetxt(文件名，数组，数据格式，分隔符)

存储

在这里插入图片描述
在这里插入图片描述

读取

在这里插入图片描述
在这里插入图片描述

numpy独有的存储方式：save & load 可以读取多维数组，但是要求表格内的格式较为统一

在这里插入图片描述
在这里插入图片描述

读取csv文件

csv文件

在这里插入图片描述

读取csv文件reader()

在这里插入图片描述
略过标题数据：
在这里插入图片描述
在这里插入图片描述

转成字典，以key的方式索引：DictReader()

之前通过行标列标，假如移动行列就索引不到了，用字典就不用担心这种问题。
在这里插入图片描述

在这里插入图片描述

写入

writerow()

在这里插入图片描述

问题：乱码&每行中间有空行

在这里插入图片描述

解决方式

newline=‘’
在这里插入图片描述
在这里插入图片描述

以字典方式写入：DictWriter

记得表头自己导入
在这里插入图片描述

NAN NF（为str类型）

简介

在这里插入图片描述

NAN注意事项

1.NAN与任何NAN不相等
2.NAN与任何值做运算，结果仍为NAN

处理NAN

删除缺失值

在这里插入图片描述

布尔索引

在这里插入图片描述
在这里插入图片描述

用其他值进行替换

根据不同情形进行相应替换
在这里插入图片描述
在这里插入图片描述
有缺失值怎么办
1.使用字符串类型进行解析dtype=np.str
把不能转换成数字的数据转换成NAN，转换完之后再转换成浮点类型
在这里插入图片描述

例题

注：除了delete函数，axis=1都代表为行，=0代表为列；delete函数正好相反。
求总分可以将某个人的某科目分设置为0.
求平均值的时候要将缺失值设置为平均值。

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

一拳Marx
关注
专栏目录
Numpy-如何正确读取或写入csv
Python进阶专栏《爬虫实战进阶》，《数据分析入门与实战》原创作者
03-07 3011
熟悉pandas的同学，可能都知道pandas保存csv文件，又或是pandas读取csv文件，都很方便。笔者这里想说的是，使用numpy来读取csv文件，或者保存csv文件，甚至比pandas还便捷。而本文，笔者将结合实际例子，带你详细了解numpy保存csv或者读取csv的具体方法，至于需要注意哪些，跟着笔者直接往下看正文。下面直接举个例子，创建一个10行2列，区间为0-100的随机二维数组，一列为英语成绩，另一列为数学成绩，将其保存为csv文件。5. usecols：读取指定的列，用元组组合。
【Learning 4 - Python数据分析与应用】NumPy 读写文件和简单统计分析
weixin_43231805的博客
01-23 1300
NumPy 读写文件 NumPy文件读写主要有二进制的文件读写和文件列表形式的数据读写两种形式。 二进制的文件可能是无法用应用程序打开，需要另外导入工作空间中。 文件列表形式的数据可以用excel或csv等打开的文件。 save函数是以二进制的格式保存数据。 np.save("…/tmp/save_arr",arr) savez函数可以将多个数组保存到一个文件中。 np.savez(’…/tmp/savez_arr’,arr1,arr2) 保存好数据后可以用load函数从二进制的文件中读取
python numpy读取csv文件_numpy模块处理csv文件
weixin_40006133的博客
12-16 3644
数据：X,Y,NAME,LABEL120.7512427,30.75084798,嘉兴市,2120.0830671,30.89524644,湖州市,80120.574379,30.00700998,绍兴市,140122.202972,29.98754304,舟山市,165121.546246,29.87620299,宁波市,86119.642848,29.08127199,金华市,184118.8...
Numpy读取csv文件
MESSI_JAMES的博客
05-28 7万+
一.利用savetxt函数将数据存储到文件: savetxt(fileName,data) fileName:保存文件路径和名称 data:需要保存的数据 np.savetxt("exaple.txt",example) print("保存完成") 文件----->0.000000000000000000e+00 1.000000000000
python—读写csv文件
最新发布
北冥有鱼的博客
07-09 1285
读写csv 文件时，通常需要处理文件路径、打开模式、字符编码等问题。newline='' 参数通常在读写csv 文件时需要用到，可确保不会因为 Windows 系统的换行符而影响文件的读写。txt文件和csv文件之间本身支持相互转换，因此txt文件的读写等操作方法完全适用于csv文件。
numpy 读取csv格式的数据
qq_43192537的博客
07-03 1万+
目录用numpy.loadtxt()读取 用numpy.loadtxt()读取 从某种意义来说，CSV文件属于txt文件 csv文件默认是以逗号分隔数据 读取到数据后存储形式类似二维数组 参数 # -*- codeing = utf-8 -*- import numpy as np us_file_path = "./data/US_video_data_numbers.csv" # 数据存储路径 t_us = np.loadtxt(us_file_path, delimiter=",", dty
python利用numpy模块读取csv文件
热门推荐
此爱如少年
02-23 8万+
文章目录numpy.loadtxt()方法简单读取字符串处理-str参数跳过首行 - skiprow = 1读取特定列 - usecols参数numpy切片 numpy.loadtxt()方法 先来看一下示例CSV数据： X,Y,NAME,CLASS,AQI 120.7512427,30.75084798,嘉兴市,0XFF83,24 120.0830671,30.89524644,湖州市,0XFF...
python怎么导入csv文件-python读取CSV文件
weixin_37988176的博客
11-01 1364
data_pd['TIMESTAMP']，用列标题'TIMESTAMP'定位到某一列；data_pd['TIMESTAMP'].iloc[i]，当i取0时，即为该列的第一行，取1时，为该列的第二行；iloc是用来定位的，可以是一维的定位iloc[i]，这种情况一般指定了某一列或者某一行。可以是二维的定位，iloc[i,j]中，i为第i+1行，而j为列。j也可以取一个矩阵，比如3:-1这种，代表从第...
Python数据分析实践：numpy读写文件操作new.pdf
06-14
在本节中，我们将详细探讨 NumPy 如何读写不同类型的数据文件，主要关注文本文件、CSV 格式文件以及二进制格式文件。 首先，让我们关注 NumPy 的文本文件读写。NumPy 提供了 `numpy.savetxt()` 和 `numpy.loadtxt()...
python numpy数组动态写入csv文件_python - 将NumPy数组转储到csv fi中
weixin_39827775的博客
01-28 1733
python - 将NumPy数组转储到csv fi中有没有办法将NumPy数组转储到CSV文件中？ 我有一个2D NumPy数组，需要以人类可读的格式转储它。9个解决方案588 votesnumpy.savetxt将数组保存到文本文件中。import numpya = numpy.asarray([ [1,2,3], [4,5,6], [7,8,9] ])numpy.savetxt("foo....
python csv删除指定行_使用Numpy读取CSV文件,并进行行列删除的操作方法
weixin_39825322的博客
12-03 1994
Numpy是Python强大的数据计算和处理模块，其操作数据非常迅速且简单易行。首先读取CSV文件>>> import numpy as np#导入numpy模块>>> temp=np.loadtxt("file.csv",dtype=np.int,delimiter=',')可以看到两行代码搞定，看一下temp的内容>>> temparray...
使用Numpy读取CSV文件,并进行行列删除的操作方法
09-20
今天小编就为大家分享一篇使用Numpy读取CSV文件,并进行行列删除的操作方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
用python读取CSV数据
03-19
本次分享文件，专为刚接触编程的小白们量身定做，如何用Python读取大量的csv数据文件，清楚实用，欢迎分享下载。
numpy 学习2-读取csv数据和数组的相关操作
weixin_42118352的博客
05-24 851
# -*-coding: UTF-8 -*- """ 1-功能描述： 1. 数组的转置的三种方法： f1_2 = f1.transpose() f1_3 = f1.T f1_4 = f1.swapaxes(1, 0) 交换轴 2. 数组的拼接： np.vstack((m1, m2)) # 垂直拼接（列数必须相同），谁在前面拼接后就会在上边 np.hstack((m1, m2)) # 水平拼接（行数必须相同），谁在前面拼接后就会在左边 3. 数组的切片： 4. 数组的平均拆分： np.vspli.
numpy读取csv_python数据分析-numpy、pandas、matplotlib(2)
weixin_39622891的博客
12-20 310
【python教程】数据分析——numpy、pandas、matplotlib_哔哩哔哩 (゜-゜)つロ 干杯~-bilibili​www.bilibili.com目录pandas模块pandas常用数据类型pandas之Series切片和索引pandas读取外部数据pandas之DataFrame四、pandas模块pandas在numpy的基础上，除了能帮助我们处理数值型的数组，还能处理字符串...
怎么用numpy读取数据csv数据
psywan的博客
04-19 2375
机器学习中，怎样只用numpy提取CSV数据 提示： 机器学习中需要训练数据，如何只用numpy来提取数据？以下是我认为最简单的方法。 提示：以下是本篇文章正文内容，下面案例可供参考 步骤 1.numpy引入库 代码如下（示例）： import numpy as np 2.读入数据 代码如下（示例）： def load_data(fname): labels = [] features = [] with open(fname) as F: for
数据挖掘工具numpy（八）Numpy从csv文件中读取数据
TFATS的博客
05-22 2547
一，轴的概念 可根据数组的shape属性返回的元组长度判断为几维数组 一维数组： o轴（个数） 二维数组： o轴（行），1轴（列） 三维数组： o轴（块），1轴（行），2轴（列） 二，numpy读取数组 （一般不用，一般使用pandas从数据库、剪切板中读取） import numpy as np file_dir = './number.csv' # file_dir表示文件位置；delimiter表示数据之间的间隔符；dtype表示数据类型； # unpack表示转置 按列数逐行的读取数据； t1
numpy读取csv_Numpy——IO操作与数据处理
weixin_39850062的博客
12-22 329
一、问题？大多数数据并不是我们自己构造的，存在文件当中。我们需要工具去获取，但是Numpy其实并不适合去读取处理数据，这里我们了解相关API，以及Numpy不方便的地方即可。二、Numpy读取genfromtxt(fname[, dtype, comments, ...]) Load data from a text file, with missing values handled as spe...
python - numpy.loadtxt文档翻译
jhsxy2005的博客
10-22 456
%%writefile test.txt 1 2 3 4 2 3 4 5 3 4 5 6 4 5 6 7 Help on function loadtxt in module numpy: loadtxt(fname, dtype=<class ‘float’>, comments=’#’, delimiter=None, converters=None, skiprows=0, usecols=None, unpack=False, ndmin=0, encoding=‘bytes’, ma
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

一拳Marx

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值