python保存文件的几种方式

最新推荐文章于 2024-07-18 19:21:27 发布
最新推荐文章于 2024-07-18 19:21:27 发布
阅读量2.9w 收藏 83
点赞数 14
分类专栏： python 文章标签： python csv mongodb excel txt
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_45020131/article/details/105347944
版权

当我们获取到一些数据时，例如使用爬虫将网上的数据抓取下来时，应该怎么把数据保存为不同格式的文件呢？下面会分别介绍用python保存为 txt、csv、excel甚至保存到mongodb数据库中文件的方法。

保存为txt文件

首先我们模拟数据是使用爬虫抓取下来的， 抓取的下来的数据大致就是这样的
在这里插入图片描述
下面使用代码保存为txt文件

import requests
from lxml import etree


url = 'https://ke.qq.com/course/list/?mt=1001'
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) "
                         "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36"}
# 获取放回的html源代码字符串
response = requests.get(url, headers=headers).text


def save_txt():  # 保存为txt文件
    f = open("./ke.txt", "w", encoding="utf8")
    # 抓取文章目录和标题
    html = etree.HTML(response)
    li_list = html.xpath('//ul[@class="course-card-list"]/li')
    for li in li_list:
        title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
        href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
        href = "https:" + href
        f.write(f'{title}-->{href}\n')
    f.close()
save_txt()

运行程序，效果图如下
在这里插入图片描述

保存为csv文件格式

代码如下

import requests
from lxml import etree
import csv

url = 'https://ke.qq.com/course/list/?mt=1001'
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) "
                         "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36"}
# 获取放回的html源代码字符串
response = requests.get(url, headers=headers).text

def save_csv():  # 保存为csv文件
    with open("ke.csv", "w", encoding="utf8", newline='') as f:
        header = ["title", "href"]
        writer = csv.DictWriter(f, header)  # 创建字典writer
        writer.writeheader()
        # 抓取文章目录和标题
        html = etree.HTML(response)
        li_list = html.xpath('//ul[@class="course-card-list"]/li')
        for i, li in enumerate(li_list):  # 获取索引和值
            title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
            href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
            href = "https:" + href
            item = {"title": title, "href": href}
            print(item)
            writer.writerow(item)
        print("保存成功...")

save_csv()

运行程序，文件会存储再当前目录下。
在这里插入图片描述

存储为excel文件

代码如下：

import requests
from lxml import etree
import openpyxl

url = 'https://ke.qq.com/course/list/?mt=1001'
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) "
                         "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36"}
# 获取放回的html源代码字符串
response = requests.get(url, headers=headers).text
def save_excel():  # 保存为excel文件
    wb = openpyxl.Workbook()  # 创建工作铺
    ws = wb.active  # 创建工作表
    # 写入表头
    ws["A1"] = "课程标题"
    ws["B1"] = "课堂链接"

    # 抓取文章目录和标题
    html = etree.HTML(response)
    li_list = html.xpath('//ul[@class="course-card-list"]/li')
    for i, li in enumerate(li_list):  # 获取索引和值
        title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
        href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
        href = "https:" + href
        ws.cell(row=i+2, column=1, value=title)  # 写入行，列所对应的值
        ws.cell(row=i+2, column=2, value=href)
    wb.save("./QQ课堂.xlsx")


save_excel()

运行程序，打开文件
在这里插入图片描述

保存在mongodb数据库中

代码如下

import requests
import pymongo
from lxml import etree
def save_mongo():  # 将数据存储到monggodb数据库
    client = pymongo.MongoClient()  # 连接数据库
    db = client["ke"]  # 创建数据库
    collection = db["ke_content"]
    items = []
    html = etree.HTML(response)
    li_list = html.xpath('//ul[@class="course-card-list"]/li')
    for i, li in enumerate(li_list):  # 获取索引和值
        title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
        href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
        href = "https:" + href
        item = {"title": title, "href": href}
        items.append(item)  # 将每个item添加到items列表中
    collection.insert_many(items)  # 插入多条数据
    for content in collection.find():  # 查看数据库中的数据
        print(content)

运行代码，可以在终端中查看数据库中的内容
在这里插入图片描述
也可以直接进入数据库中查看，打开终端，进入数据库。查看即可
在这里插入图片描述

小结

最后把所有代码整理一遍，大家只需要按需所用即可，只需要修改部分代码就好了。

import pymongo
import requests
from lxml import etree
import openpyxl  # 保存为excel文件
import csv  # 保存为csv文件


url = 'https://ke.qq.com/course/list/?mt=1001'
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) "
                         "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.90 Safari/537.36"}
# 获取放回的html源代码字符串
response = requests.get(url, headers=headers).text


def save_txt():  # 保存为txt文件
    f = open("./ke.txt", "w", encoding="utf8")
    # 抓取文章目录和标题
    html = etree.HTML(response)
    li_list = html.xpath('//ul[@class="course-card-list"]/li')
    for li in li_list:
        title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
        href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
        href = "https:" + href
        f.write(f'{title}-->{href}\n')
    f.close()


def save_csv():  # 保存为csv文件
    with open("ke.csv", "w", encoding="utf8", newline='') as f:
        header = ["title", "href"]
        writer = csv.DictWriter(f, header)
        writer.writeheader()
        # 抓取文章目录和标题
        html = etree.HTML(response)
        li_list = html.xpath('//ul[@class="course-card-list"]/li')
        for i, li in enumerate(li_list):  # 获取索引和值
            title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
            href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
            href = "https:" + href
            item = {"title": title, "href": href}
            print(item)
            writer.writerow(item)
        print("保存成功...")


def save_excel():  # 保存为excel文件
    wb = openpyxl.Workbook()  # 创建工作铺
    ws = wb.active  # 创建工作表
    # 写入表头
    ws["A1"] = "课程标题"
    ws["B1"] = "课堂链接"

    # 抓取文章目录和标题
    html = etree.HTML(response)
    li_list = html.xpath('//ul[@class="course-card-list"]/li')
    for i, li in enumerate(li_list):  # 获取索引和值
        title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
        href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
        href = "https:" + href
        ws.cell(row=i+2, column=1, value=title)  # 写入行，列所对应的值
        ws.cell(row=i+2, column=2, value=href)
    wb.save("./QQ课堂.xlsx")

    print("保存成功")


def save_mongo():  # 将数据存储到monggodb数据库
    client = pymongo.MongoClient()  # 连接数据库
    db = client["ke"]  # 创建数据库
    collection = db["ke_content"]
    items = []
    html = etree.HTML(response)
    li_list = html.xpath('//ul[@class="course-card-list"]/li')
    for i, li in enumerate(li_list):  # 获取索引和值
        title = li.xpath('.//a[@class="item-tt-link"]/@title')[0]
        href = li.xpath('.//a[@class="item-tt-link"]/@href')[0]
        href = "https:" + href
        item = {"title": title, "href": href}
        items.append(item)
    collection.insert_many(items)  # 插入多条数据
    for content in collection.find():  # 遍历在这个集合中的数据
        print(content)


if __name__ == '__main__':
    save_mongo()  # 调用相应的方法即可

如果有什么不足之处请指出，我会加以改进，共同进步！

mr.ocean
关注
专栏目录
python保存文件方法小结
09-20
在Python编程中，保存文件是一项基础且至关重要的任务，它涉及到数据持久化，即把程序运行过程中的数据存储到磁盘上，以便后续再次使用或分析。本文将深入探讨Python中常用的几种文件保存方法，包括二进制文件的保存...
python保存数据，使用文本文件（txt）、json、csv保存数据
博客来源实践
05-06 2315
Python提供了多种保存数据的方式，包括文本文件（txt）、JSON文件和CSV文件。这几种是最简单的保存方式，但也很实用。
python简单的保存数据所使用的三大方法
最新发布
dhudhj的博客
07-18 1238
json.dump(python数据 , 文件)，dump可以直接将python数据转为json字符串，并存于文件中。json.load()直接将文件中存储的json字符串转为python数据类型并存储进文件中。4.abspath（）返回一个文件夹的绝对路径和dirname（）返回一个文件路径的父级路径。json.loads()将文件中存储的json字符串转为python数据类型。Python open() 方法用于打开一个文件，并返回文件对象。readline（）读取文件中的一行内容，返回一个字符串。
python怎么保存？python怎么保存为py后缀的文件
xiangxueerfei的博客
09-13 6849
很多刚开始学习python的小伙伴在命令行编写python代码的时候会发现只能运行不能保存，并且一旦关闭窗口或者退出命令行之前编写的代码就会全部丢失，所以需要将其保存为文件的格式才能重复运行。那么python怎么保存为文件格式呢，下面这篇文章会有详细的介绍。
python中的保存文件，自用
qiuuu的博客
11-21 1180
python中的保存文件
python程序如何进行保存
菜鸟教程
12-02 1万+
更多编程教程请到：菜鸟教程 https://www.piaodoo.com/ 友情链接： 高州阳光论坛https://www.hnthzk.com/ 人人影视http://www.op-kg.com/ 保存Python程序，可以使用以下方法：使用编辑器编写代码并保存 1、打开Notepad++ 2、需要新建文本时，点击左上角”文本“，在弹出的菜单栏点击”新建“。 3、同时也可以直接点击”文本“下的新建图标即可. 4、保存的时候，保存为.py文件，这里保存为hello.py 内容扩展： 临
python保存文档的几种格式-excel-csv-json-txt
09-23
python保存文档的几种格式
详解python的几种标准输出重定向方式
09-21
接下来，文章介绍了几种标准输出重定向的方法： **2.1 控制台重定向** 这是最直观的重定向方式，通过操作系统提供的命令来实现。在Windows的cmd中，可以使用`>`或`>>`重定向输出到文件。例如： - `python script.py...
python保存文件常用的两种方式
活动的笑脸的博客
11-02 1万+
1.使用open()和close()进行写入： # 将文件保存到本地 # 1.创建一个文件 create_file = open("demo.txt", "w", encoding="utf-8") # 2.添加保存内容 data = "hello world" # 3.写入对应文件 create_file.write(data) # 4.关闭文件 create_file.close() 2.使用with方法写入： with open("1111.txt","w",encoding="utf-8") as
【Python】第七课 文件存储
笔触狂放的博客
08-30 1662
在Python中，使用open()这个 函数来打开文件并返回文件对象:第一个参数是传入文件名，如果只有文件名不带路径，那么Python会在当前文件夹中去找到该文件并打开。称为相对路径。第二个参数是设置打开文件的访问模式通过open()方法根据指定的路径打开文件，并获得该文件对象，需要通过以下方法读取或者写入数据到文件中。close()方法用于关闭文件。文件在每次读取或者写入之后需要进行文件关闭操作。...
python持久化存储文件操作
Sun__s的博客
02-22 389
一、 文件操作介绍 日常中的数据存储在纸上， 而计算机的数据存储在哪里呢? —硬盘上 1. 文件的作用 一个程序在运行过程中用了九牛二虎之力终于计算出了结果,试想一下如果不把这些数据存放起来,相比重启电脑之后,“哭都没地方哭了”。 默认数据是加载到内存中，结果也是保存到内存中， 程序执行结束，所有的数据释放。 2.文件的打开读写关闭 文件的打开模式 要读取二进制文件，比如图片、视频等等，用’rb’, ‘wb’, 'ab’等模式打开文件即可 # 1.打开文件 """ mode: r:只能读文件
Python-文件存储
qq_44936246的博客
01-19 561
差点迟到
python中的文件数据保存
采菊东篱下，Python满乾坤！
07-25 593
c语言中用于操纵文件的函数
Welcome to xiaoxiaoyang's thinking world
10-26 839
fp=fopen("workers","ab"); 以只写方式打开二进制文件，位置指针指向文件尾，向文件尾增加数据，原数据保留。 fwrite(&one，sizeof(people)，1，fp)? 将用户输入结构体写入文件 fclose(fp); 有打开必有关闭 fp=fopen("workers","rb");以只读形式打开二进制文件 fread(&one，sizeof(people),1,fp);从文件中读取一条记录 fp=fopen("workers","rb+") 以读写方式打开二.
Python中的文件存储
Android移动开发者
09-03 985
#!/usr/bin/python poem = '''\ Programming is run When the work is done if you wanna make your work also fun: using python ''' f = file('poem.txt', 'w') f.write(poem) f.close() f = file('poe
python保存文件的几种方法
热门推荐
AI_盲的博客
07-04 5万+
1>保存为二进制文件，pkl格式 import pickle pickle.dump(data,open('file_path','wb')) #后缀.pkl可加可不加若文件过大 pickle.dump(data,open('file_path', 'wb'),protocol=4)读取该文件： data= pickle.load(open('file_path','r
Python中各类文件读取及保存方法总结
weixin_43392789的博客
02-25 3577
python各类文件读取及保存方法
python中有几种打印方式
09-05
### 回答1： 在 Python 中有两种常用的打印方式: `print()` 和 `print(end='')`。 除此之外，还可以使用格式化输出，例如使用 `%` 和 `format()` 方法，来打印更丰富的输出。 ### 回答2： 在Python中，我们可以使用不同的方式进行打印输出。一共有三种常见的打印方式： 1. 使用print语句：这是最常见也是最简单的打印方式。可以通过print语句将指定的内容打印到控制台上。例如，我们可以使用print("Hello, World!")来打印出"Hello, World!"这个字符串。 2. 使用格式化字符串：通过使用格式化字符串，我们可以将变量的值插入到字符串中进行打印。我们可以使用占位符（比如%d和%s）来标记变量的位置，并使用%运算符和一个元组来指定要插入的变量值。例如，我们可以使用print("My name is %s and I am %d years old." % ("John", 25))来打印出"My name is John and I am 25 years old."这句话。 3. 使用f-string：f-string是Python 3.6版本引入的新特性。它允许在字符串前加上一个"f"前缀，并使用大括号{}来包含要插入的表达式。在大括号内，我们可以直接引用变量，甚至可以在大括号内执行表达式。例如，我们可以使用print(f"My name is {name} and I am {age} years old.")来打印上面提到的那句话。 这些是Python中常用的三种打印方式。根据不同的需求和习惯，我们可以选择适合的方式进行打印输出。 ### 回答3： 在Python中，常见的打印方式有三种： 1. 使用print()函数进行打印：print()函数是Python内置的函数，它可以将指定的内容输出到控制台。我们可以在print()函数中传入不同的参数，例如字符串、变量、表达式等，来实现不同内容的打印。 2. 使用格式化输出：Python中提供了多种格式化输出方式，其中比较常用的是使用百分号（%）和字符串的format方法。通过在字符串中使用占位符（例如%s表示字符串，%d表示整数等），并在字符串后添加%操作符或调用format方法，可以将指定的变量值以特定的格式插入到字符串中进行打印。 3. 使用日志模块进行打印：Python中的logging模块提供了一种更为灵活和强大的打印方式。通过引入logging模块，并使用其提供的方法（如logging.debug()、logging.info()等），可以将打印内容输出到控制台或保存到文件中。使用日志模块进行打印可以帮助我们更好地进行程序调试和日志记录。 总结起来，Python中常见的打印方式有print()函数、格式化输出和日志模块。根据不同的需求和场景，可以选择合适的方式进行打印。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值