Python爬虫入门实践

本文介绍了使用Python 3.6和PyCharm进行爬虫实践,目标是抓取选股宝的利好消息。通过selenium库模拟点击加载更多,配合Chrome的chromedriver,解析网页并定位到利好信息。利用beautifulsoup简化代码,将数据存入文档,强调了选择合适工具和动手实践的重要性。
摘要由CSDN通过智能技术生成

编译工具:PyCharm (community edition)

编译环境:Python 3.6

操作系统:Windows10 专业版

爬取目标:选股宝 的利好消息


需要用到的库:

from  bs4 import BeautifulSoup
from selenium import webdriver
import time


为什么要用selenium呢?

答:一个页面的信息是有限的,我们需要加载更多,而这个东西可以模拟点击


PS:要模拟点击还需要下载模拟器对应的driver,这里我用的是Chrome的chromedriver (需要科学上网)


首先获取网页代码

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值