Selenium自动翻页爬取证券公司公告信息——以中国平安为例

最新推荐文章于 2024-08-13 20:32:54 发布

谷曰十鑫

最新推荐文章于 2024-08-13 20:32:54 发布

阅读量1.1k

点赞数

分类专栏： Python 文章标签： selenium 证券公司新闻

本文链接：https://blog.csdn.net/weixin_43636302/article/details/103594431

版权

本文介绍了如何利用Selenium自动化爬取证券公司公告信息，以中国平安为例，展示了如何遍历198页公告，提取每个公告的标题和日期，并依据关键词筛选相关信息。

摘要由CSDN通过智能技术生成

预期效果

该公司有198页公告，每一页有若干公告，通过代码爬取每一个公告标题日期等信息并根据关键字判断是否为所需要的信息，对所需要的公告位置作标记。
在这里插入图片描述

代码实现

from selenium import webdriver
from selenium.common.exceptions import TimeoutException
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from pyquery import PyQuery as pq
import csv
import re
import time
# from bs4 import BeautifulSoup

driver = webdriver.Chrome()

# wait=driver.implicitly_wait(10)
wait=WebDriverWait(driver, 30,1)

def search(i):
    print('准备翻第{}页'.format(i))
    try:
        time.sleep(1.5)
        # smart_wait(self,"#pg_noticelist > a.nextP