使用python爬取12306上面所有车次数据

本文介绍如何利用Python爬虫技术抓取12306网站上的所有车次信息,涉及设置cookie、解析HTML、处理反爬策略等内容,为数据分析提供基础数据。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

在爬取12306之前需要做的工作就是:
1,分析请求过程
2,分析是否需要处理cookie
3,编写代码
4,测试爬取网站是否有访问次数限制
5,部署到正式服务器上
这里重点写 如何分析请求过程:
这是12306上面查询车次的界面, 出发地目的地 是我们需要输入的, 如果要爬取全国的所有的车次 那就需要找到全国所有的出发地到目的地的列表.

找了 很久发现在 车次查询页面 https://kyfw.12306.cn/otn/queryTrainInfo/init 有我们需要的
是以js 文件的形式 加载到页面的 ,文件很大,里面包含了 未来 45天 的车次数据, 但是这里只有出发点到终点,没有 中间站到中间站,我们可以使用这些数据 到上面的 搜索框中搜索我们需要的数据.

评论 12
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值