Python爬虫鲁迅先生《经典语录》保存到Excel表格（附源码）

最新推荐文章于 2024-02-18 09:41:26 发布

千寻编程

最新推荐文章于 2024-02-18 09:41:26 发布

阅读量491

点赞数

分类专栏： Python数据爬虫案例文章标签： python 爬虫 excel 源码经验分享

本文链接：https://blog.csdn.net/Tsp2021713/article/details/119642608

版权

本文介绍了使用Python爬虫从‘好句子迷’网站抓取鲁迅先生的经典语录，并将其整理保存到Excel表格的过程。通过requests和lxml库解析网页，获取内容、来源和评分等信息，然后利用pandas将数据转化为DataFrame并保存为CSV文件，确保无中文乱码。此外，还展示了如何根据评分排序数据。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Python爬虫鲁迅先生《经典语录》保存到Excel表格（附源码）

前言

今天用Python 爬取鲁迅先生《经典语录》，直接开整~

代码运行效果展示

在这里插入图片描述

开发工具

Python版本： 3.6.4

相关模块

requests

lxml

pandas

以及Python自带的模块

思路分析

1、获取数据

通过“好句子迷”网站，获取网页。

http://www.shuoshuodaitupian.com/writer/128_1

利用request模块，通过URL链接，获取html网页，下一步进行网页分析。

其中，URL只有最后一部分发生改变（1-10 ：代表第1页–第10页的全部内容）

# 1、获取数据
headers = {
   "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) " \
                         "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.129 Safari/537.36",

最低0.47元/天解锁文章