python3爬取东方财富股东户数2013-2019年数据

本文利用Python3爬虫技术,详细介绍了如何从东方财富网站抓取2013年至2019年的股东户数数据,并通过JSON格式进行存储。内容涉及URL构造、请求发送、数据解析等关键步骤,为大数据分析提供了基础素材。
摘要由CSDN通过智能技术生成
!/usr/bin/env python
 -*- coding:utf-8 -*-


import re
import csv
import time
import random
import requests
import json
from bokeh.models import pd
from requests import session


class spider_DongFangCaiFu(object):
    def __init__(self):
        #初始化需要记录断点数据
        self.sync_log_dict = {
            #分类url
            "category_num": 0,
            #页数url
            "page_num": 1,
           #总页数
            "total_page":100,
        }
        # 日期
        self.start_date_list=[
            "2019-12-31",
            "2018-12-31",
            "2017-12-31",
            "2016-12-31",
            "2015-12-31",
            "2014-12-31",
            "2013-12-31",
        ]

    # 详情解析
    def parse_detail(self):
        for one_date_index in range(self.sync_log_d
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
引用: 东方财富股吧是一个提供股票相关讨论的平台,您可以通过Python进行爬取其发贴数据。根据引用中的描述,您可以使用Python爬取东方财富股吧的帖子信息,包括股吧名称、阅读量、评论数、标题、作者和发帖时间。具体的步骤如下: 1. 使用Python的网络虫库(例如BeautifulSoup或Scrapy)访问东方财富股吧网站,并获取页面的HTML内容。 2. 使用HTML解析库(例如BeautifulSoup或lxml)解析HTML内容,提取出帖子信息,例如股吧名称、阅读量、评论数、标题、作者和发帖时间。 3. 将提取的帖子信息存储到一个数据结构(例如列表或字典)中,方便后续的分析和处理。 引用中提到了探索更复杂的实际案例,并通过实际项目提升数据分析能力。因此,对于您的需求,您可以进一步扩展爬取的功能,例如分析帖子的情绪指数、研究帖子的亮点回顾等,以获得更深入的数据分析结果。 最后,引用中给出了一个跨份取月份对应时间戳的问题的解决方法。虽然这段代码与您的问题关系不大,但它提供了一个示例,展示了如何使用Python对时间进行处理和计算。 希望以上信息对您有所帮助!<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [东方财富股吧标题爬取分析](https://blog.csdn.net/kun666666/article/details/115222647)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* [Python数据分析入门:掌握基本工具与技巧.md](https://download.csdn.net/download/pleaseprintf/88229437)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值