爬取巨潮资讯网中与“贵州茅台”相关的公告的标题和网址。

1 需求

爬取巨潮资讯网中与“贵州茅台”相关的公告的标题和网址。

2 代码实现

import re

from selenium import webdriver


# 获取网页源代码
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument('--headless')
browser = webdriver.Chrome(options=chrome_options)
url = 'http://www.cninfo.com.cn/new/disclosure/stock?stockCode=600519&orgId=gssh0600519#latestAnnouncement'
browser.get(url=url)
data = browser.page_source
# 获取网页标题
p_title = '<span class="r-title">(.*?)</span>'
title = re.findall(p_title, data)
# 获取网页网址
p_href = '<div class="cell"><a target="_blank" href="(.*?)" data-id="'
href = re.findall(p_href, data)
for index in range(len(href)):
    href[index] = 'http://www.cninfo.com.cn' + href[index]
    print(href[index])