Selenium爬取会计师事务所新闻信息——以中准会计师事务所为例

预期效果

可以看到，该会计师事务所共有17页新闻，每一页有20条新闻，如果一个一新闻点开，收集具有某些关键字的新闻标题、内容、地址等信息，比较费时，使用爬虫可以较快爬取下来。

代码实现

from selenium import webdriver
import re
from selenium.common.exceptions import TimeoutException
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import requests
from bs4 import BeautifulSoup
import re
import csv

browser = webdriver.Chrome()
wait=WebDriverWait(browser, 10)

def search(i,j):
    try:
        browser.get('http://www.zhongzhuncpa.com/list-58956b7d6a3919c1448ca56a/page{}.shtml'.format(i))
        print('打开第{}页'.for