Python本地读写：CSV/excel/html/sql/txt

最新推荐文章于 2024-07-29 02:32:41 发布

王小小小草

最新推荐文章于 2024-07-29 02:32:41 发布

阅读量3.4k

点赞数 1

分类专栏： python数据分析

本文链接：https://blog.csdn.net/sinat_33761963/article/details/53884735

版权

本文介绍了如何使用Python的pandas库进行CSV、Excel、HTML、SQL和TXT文件的读写操作。通过.read_csv()、.read_excel()等方法，演示了读取数据并展示数据的前几行，以及如何写入数据到文件中。同时，还涵盖了从HTML文件和MySQL数据库中导入数据的步骤。

摘要由CSDN通过智能技术生成

Python本地读写：CSV/excel/html/sql/txt

csv文件是一种以逗号为分隔符的纯文本形式存储的表格数据。

通常csv文件的第一行是列名。

既然是表格类的数据，那么最先想到的应是pandas库的读取方法。pandas以dataframe或series为格式，其实就是表格形式的数据。所以下面介绍用pandas来读取的方法。

当然pandas还可以读取许多其他格式的文件，之后会系统介绍。

pandas读取csv

要使用pandas首先要import pandas库。

然后使用.read_csv()方法，第一个传入的参数的要读取的文件路径，第二个参数传入的是列明的列表。

在下面的例子中，打印出了df的类型，是dataframe格式的。

调用.head()方法可以查看这个表格的前5行数据。如果往.hand(n)传入参数可以指定提取前n行。

import pandas as pd

filename = './files/presidential_polls.csv'
df = pd.read_csv(filename, usecols=['cycle', 'type', 'startdate'<

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

王小小小草

关注关注

1
点赞
踩
5

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

python读取html文件-使用Python解析html文件

weixin_39613548的博客

11-11

4026

import sysimport osimport os.pathfrom html.parser import HTMLParser#定义HTMLParser的子类,用以复写HTMLParser中的方法class MyHTMLParser(HTMLParser):#构造方法,定义data数组用来存储html中的数据def __init__(self):HTMLParser.__init__(se...

用python解析html

最新发布

weixin_34164146的博客

07-29

【Python笔记】read_html():获取网页表格数据 & 读取JSON数据 & XML和HTML:Web信息收集 & 使用HTML和Web API

西瓜太郎

01-27

1749

文章目录JSON数据XML和HTML:Web信息收集使用HTML和Web API JSON数据 JSON（JavaScript Object Notation的简称）已经成为通过HTTP请求在Web浏览器和其他应用程序之间发送数据的标准格式之一。它是一种比表格型文本格式（如CSV）灵活得多的数据格式。注意：全都要用英文输入模式下的双引号 “ obj=""" {"name":"Wes", "places_lived":["USA","Spain","China"], "pet":null, ".

利用Python实现爬虫，包括pandas库的read_html()方法、requests库和Scrapy库

weixin_54044641的博客

04-01

2313

# 利用Python实现爬虫，包括pandas库的read_html()方法、requests库和Scrapy库

使用pandas实现csv/excel sheet互相转换的方法

09-19

Pandas支持读取和写入多种数据格式，如CSV、Excel、SQL数据库等，并且可以非常方便地处理缺失数据、排序、分组等各种复杂的数据操作。 #### 二、安装Pandas 如果您的Python环境中还未安装Pandas，可以通过pip命令...

python的csv标准库,Python标准库: csv模块——CSV文件的读写

weixin_29093169的博客

03-26

1119

CSV简介CSV(Comma Separated Values，逗号分隔值)也称字符分隔值，因为分隔符可以不是逗号，是一种常用的文本格式，用以存储表格数据，包括数字或者字符。很多程序在处理数据时都会碰到CSV这种格式的文件，它的使用是比较广泛的(Kaggle上一些题目提供的数据就是csv格式)，csv虽然使用广泛，但却没有通用的标准，所以在处理csv格式时常常会碰到麻烦，幸好Python内置了cs...

Csv/Excel/mysql文件读写操作——Python数据清洗实战笔记(3)

直心I

03-25

501

文件读写操作文件操作1.csv读写2.excel文件读写3.数据库文件读写文件操作 1.csv读写 import pandas as pd import numpy as np #设置最大显示列数 pd.set_option('display.max_columns',20) #设置最大显示行数 pd.set_option('display.max_rows',100) #婴儿信息表;默认将...

详讲 Python 数据读写方式，面向Excel、Txt文档及Mongodb、MySQL等数据库

小张Python

06-21

717

1. 前言 Hello，大家好，我是小张~ 在日常与 Python 打交道过程中，不可避免会涉及到数据读写业务，例如做爬虫时，需要将爬取的数据首先存储到本地然后再做下一步处理；做数据可视化分析时，需要将数据从硬盘中读入内存上，再进行后续的数据清洗、可视化、建模等步骤对数据进行读写操作时，对于存储对象我们有多种选择，最方便的是本地文档类型：csv、txt 等，优点是方便简单、但弊端也很明显：文档型数据易丢失、损坏，删除不可恢复，且不方便多人间数据共享；另一大类存储对象为数据库，目前比较流性的持久化数据库为

使用python获取csv文本的某行或某列数据的实例

09-20

下面小编就为大家分享一篇使用python获取csv文本的某行或某列数据的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧

Python笔记：用read_html()来抓取table格式的网页数据

weixin_37537423的博客

11-26

2600

干货分享： #如何做出好看的Excel可视化图表(小白免费也能做出视觉炫酷的可视化图表) 更多精彩，请点击跳转到我的哔哩哔哩 read_html() 的基本语法及其参数： pandas.read_html(io,match='.+',flavor=None,header=None,index_col=None,skiprows=None, attrs=None, parse_dates=

【Python笔记】read_html():获取table类型网页表格数据

西瓜太郎

01-30

1万+

文章目录0 基础知识table类型的表格网页结构read_html()函数1 快速抓取法1.1 思路1.2 代码2 完整爬虫抓取法2.1 思路2.2 代码3 小结常见的各种官网都有这样一种情况：网站中很多表格，我们想对这些表格进行整理汇总、或者是筛选，或者是处理分析。于是我们需要考虑：如何将网页表格数据使用python保存为Excel文件？如果需要抓的表格很少或只需要抓一次，那么推荐快速抓取法 [引文1]。如果页数比较多，推荐完整爬虫抓取法 [引文2]。解析函数用了BeautifulSoup.

【python】read_html()处理网页中的表格数据

BananaChoas的博客

07-20

1806

read_html()从网页中识别<table>读取表格类数据。可识别对象包括有：网址、本地HTML文档、request模块得到的响应对象的文本。注意read_html()返回一个DataFrame类型的列表，每一项代表网页中的一个<table>，可用切片方式指定提取第几个表格。参数io 参数match 参数flavor 参数header 参数index_col 参数encoding ...

10行代码爬取全国所有A股/港股/新三板上市公司信息

weixin_30646315的博客

11-10

974

摘要：我们平常在浏览网页中会遇到一些表格型的数据信息，除了表格本身体现的内容以外，可能还想透过表格背后再挖掘些有意思或者有价值的信息。这时，可用python爬虫来实现。本文采用pandas库中的read_html方法来快速准确地抓取网页中的表格数据。由于本文中含有一些超链接，微信中无法直接打开，所以建议点击最左下角阅读原文阅读，体验更好，也可以复制链接到浏览器打开： https://www.m...

关于python获取网页表格数据（read_html()方法）

寄居蟹的博客

01-14

2万+

我们很常见的各种官方网站都有这样一种情况：网站中很多表格，我们想要官方的表格进行整理汇总、或者是筛选又或者是处理分析。但是我们如何将网页表格数据使用python保存为Excel文件？思路整理：一般情况下我们能发现网页的表格数据主要是在<table>标签中实现的网页表格数据，这里我们使用Pandas的read_html()方法就可以读取标签中的内容，首先进行查看元素。既然有对应的...

python pd.read_html 快速爬取网页表格数据与常规请求解析方式对比

又尔小风

08-21

1万+

为爬取网页表格数据，较易容想到的常规方式是通过requests请求以及lxml解析xpath定位获取元素，此外还可以通过pandas库的**read_html**直接获取表格数据，在此对比两种方式的时间效率。

使用pandas读取HTML和JSON数据

csdn1561168266的博客

01-15

1794

大家好，Pandas是一个功能强大的数据分析库，它提供了许多灵活且高效的方法来处理和分析数据。本文将介绍如何使用Pandas读取HTML数据和JSON数据，并展示一些常见的应用场景。