Pandas学习笔记——读取txt和csv

参考视频:002.读取txt与csv文件_哔哩哔哩_bilibili

1. 什么是txt和csv文件?

csv和txt都属于文本文件。csv文件的字段间分别由逗号和tab键隔开;而txt文件则没有明确要求,可使用逗号/制表符/空格等多种不同的符号

2. 读取txt和csv文件

读取txt格式数据时,函数read_csv和read_table均可使用。但是使用函数read_table时需要指定分隔符sep。如果分隔符不止一种,使用正则表达式sep='\s+'。

2.1 读取csv文件

pd.read_csv(路径,sep,header,names,encoding,index_col)
pd.read_csv(路径,sep=',',header=None,names=['姓名','年龄','地址','电话','入职日期'],encoding='utf-8',index_col='入职日期')

参数:

sep:分隔符或正则化表达式sep='\s+'

header:列名的行号,默认0(即第一行),如果没有列名则header=None

names:列名,与header=None一起使用

index_col:索引的列号或列名,可以是一个单一的名称或数字,也可以是一个分层索引(list形式)

skiprows:需要跳过的行数或行号列表

encoding:文本编码,如utf-8

nrows:从文件开头处读入的行数

2.2 查看数据

import pandas as pd
path = r"F:/pandas/file1.csv"
data = pd.read_csv(path)
print(data) #查看数据

#查看前3列数据
print(data.head(3)) #默认是5行,可以指定

#查看数据的形状,返回(行数,列数)
print(data.shape)  #上面查看了几行这里会写几行

#查看列名列表
print(data.columns)

#查看索引列
print(data.index)

#查看每一列数据类型
print(data.dtypes)

2.3 txt文件转csv文件

path = r"F:/pandas/file1.txt"
data = pd.read_csv(path)
data.to_csv(r"F:/pandas/file1.csv")

  • 3
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
这篇笔记主要介绍了Pandas模块的基本操作和使用方法。Pandas是Python中一个用于数据分析和处理的常用库,提供了高效的数据结构和数据分析工具,是进行数据处理和数据挖掘的重要工具之一。 一、Pandas数据结构 Pandas主要有两种数据结构:Series和DataFrame。 1. Series Series是一种类似于一维数组的对象,由一组数据和一组与之相关的标签(即索引)组成。Series的创建方式如下: ```python import pandas as pd # 通过列表创建Series s = pd.Series([1, 3, 5, np.nan, 6, 8]) # 通过字典创建Series s = pd.Series({'a': 1, 'b': 2, 'c': 3}) ``` 2. DataFrame DataFrame是一种二维表格数据结构,由一组数据和一组行索引和列索引组成。DataFrame的创建方式有很多种,最常用的是通过字典创建。例如: ```python import pandas as pd data = {'name': ['Tom', 'Jerry', 'Mike'], 'age': [18, 20, 22], 'gender': ['M', 'M', 'F']} df = pd.DataFrame(data) ``` 二、Pandas的基本操作 1. 数据读取 Pandas可以读取多种格式的数据文件,如CSV、Excel、SQL等。常用的读取CSV文件的方式如下: ```python import pandas as pd df = pd.read_csv('data.csv') ``` 2. 数据预处理 数据预处理是数据挖掘中非常重要的一部分,Pandas提供了很多方便的函数和方法来进行数据清洗和转换。常用的数据预处理函数和方法有: - 处理缺失值 ```python # 判断是否存在缺失值 df.isnull() # 删除缺失值 df.dropna() # 填充缺失值 df.fillna(value) ``` - 处理重复值 ```python # 删除重复值 df.drop_duplicates() ``` - 数据转换 ```python # 数据类型转换 df.astype() # 数据替换 df.replace() ``` 3. 数据分析 Pandas提供了各种数据分析和处理的方法和函数,常用的包括: - 统计函数 ```python # 计算平均值 df.mean() # 计算标准差 df.std() # 计算最大值和最小值 df.max(), df.min() ``` - 排序 ```python # 按照某列排序 df.sort_values(by='column_name') ``` - 数据聚合 ```python # 对某列数据进行分组求和 df.groupby('column_name').sum() ``` 以上是Pandas模块的基础内容,还有很多高级用法和技巧需要进一步学习和掌握。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值