爬取东方财富的十大成交股

最新推荐文章于 2021-07-10 22:29:58 发布

feiyy404

最新推荐文章于 2021-07-10 22:29:58 发布

阅读量801

点赞数

分类专栏：爬虫实例

本文链接：https://blog.csdn.net/enjolras_fuu/article/details/113249481

版权

本文介绍了如何爬取东方财富网站上的十大成交股信息。通过分析接口和参数，确定基础请求URL为'http://dcfm.eastmoney.com/em_mutisvcexpandinterface/api/js/get?'，并解析返回的数据来构建相关数据表。项目源代码可在GitHub上找到。

摘要由CSDN通过智能技术生成

任务说明

爬取 http://data.eastmoney.com/hsgt/index.html 东方财富首页的十大成交股信息。

分析接口以及参数

刷新页面，搜索相关信息，排序筛选到带有数据的请求。
在这里插入图片描述
可知：基础的请求接口是:
api = ‘http://dcfm.eastmoney.com/em_mutisvcexpandinterface/api/js/get?’

四个方面请求参数分别是：

base_post_data = {
    'callback': f'jQuery112307259899045837717_{int(time.time()* 1000)}',
    'st': 'DetailDate,Rank',
    'sr': 1,
    'ps': 10,
    'p': 1,
    'type': 'HSGTCJB',
    'token': '70f12f2f4f091e459a279469fe49eca5',

} 

# 沪股通十大成交股参数
base_post_data.update(
    {
        'filter': '(MarketType=1)',
        'sty': 'HGT',
    }
)
hk_sh_post_data = copy.deepcopy(base_post_data)

# 深股通十大成交股参数
base_post_data.upda