python基金筛选_如何利用python挑选基金?

本文介绍了如何使用Python爬取天天基金网的基金数据。通过分析网页结构,解决编码问题,利用xpath提取信息,并应对网站的AJAX加载和反爬策略,最终成功获取并保存基金数据。
摘要由CSDN通过智能技术生成

前几天有位朋友向我求助,想让我写个爬虫帮他爬取基金的数据。乐于助人的我怎么会袖手旁观呢?

首先捋一捋思路:获取网页→获取一条数据→获取全部数据→把数据保存为文件。有了思路就开干喽~朋友需要获取的数据来源于天天基金网的基金排行页,先来观察一下它的结构。每一个基金都在一行,翻页可获取下一页基金。

76b29d2cbbe3add036332a9fabaf83a5.png

获取数据

先试试能不能用requests库直接获取数据吧。

874170c8fd699ab639dfddd544a27855.png

emmm。。。看来是编码不对,改一下编码试试。在浏览器按F12查看一下网页是什么编码的。

7068cac2622b472c3b594a0a0fc99c0a.png

d51a22d1e472e1f7ce8d78dd8c188a8f.png

换一个编码后就好了。接下来获取一条数据,观

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值