编译工具:PyCharm (community edition)
编译环境:Python 3.6
操作系统:Windows10 专业版
爬取目标:选股宝 的利好消息
需要用到的库:
from bs4 import BeautifulSoup
from selenium import webdriver
import time
为什么要用selenium呢?
答:一个页面的信息是有限的,我们需要加载更多,而这个东西可以模拟点击
PS:要模拟点击还需要下载模拟器对应的driver,这里我用的是Chrome的chromedriver (需要科学上网)
首先获取网页代码