抓取东方财富网股票信息

最新推荐文章于 2023-08-01 21:16:24 发布

米九

最新推荐文章于 2023-08-01 21:16:24 发布

阅读量4.8k

点赞数 4

分类专栏：爬虫文章标签： python

本文链接：https://blog.csdn.net/gzw12138/article/details/103704652

版权

本文介绍如何利用Python抓取东方财富网站的股票信息，并进行数据清洗，最终将数据存储到MySQL数据库中。重点在于处理Ajax异步加载的数据接口。

摘要由CSDN通过智能技术生成

举例
目标网站 : 东方财富网 (排行)  沪深A股
网站是使用Ajax异步加载 
url: http://quote.eastmoney.com/center/gridlist.html#hs_a_board

在这里插入图片描述
因为是Ajax异步加载所以要找到包含数据的json接口

包含数据json   url : http://33.push2.eastmoney.com/api/qt/clist/get

params = {
    'cb': 'jQuery1124011214511892561374_1575904469870',
    'pn': 1,
    'pz': '20',
    'po': '1',
    'np': '1',
    'ut': 'bd1d9ddb04089700cf9c27f6f7426281',
    'fltt': '2',
    'invt': '2',
    'fid': 'f3',
    'fs': 'm:0 t:6,m:0 t:13,m:0 t:80,m:1 t:2,m:1 t:23',
    'fields': 'f1,f2,f3,f4,f5,f6,f7,f8,f9,f10,f12,f13,f14,f15,f16,f17,f18,f20,f21,f23,f24,f25,f22,f11,f62,f128,f136,f115,f152',
    '_': '1575904469955'
}
	
	参数规律  pn值 +1