python爬虫——获取新闻标题

  1. 打开要提取的新闻页面

  2. 右键-》审查元素(N)进入开发者界面

  3. 进入Network,选中recording network log(红色圆点),筛选
    (蓝色漏斗),然后重新加载页面。选择doc,左下第一列即为所选目标。通过headers 和 Responses可以确认是不是我们所要选择的内容。
    headers中 Request URL:https://news.sina.cn/2017-08-21/detail-ifykcqaw0391535.d.html?from=wap 就是我们所要爬取的网页的网址,将其复制到requests.get()中

这里写图片描述

  1. 标题的选取。
    点击“选择元素”图标,将光标放在标题上,即可看到标题所在代码行。

这里写图片描述

这里可以看到标题的calss 为

<h1 class="art_tit_h1">....</h1>

双击复制art_tit_h1,放入我们的soup.select()中 。

这里写图片描述

  1. 获取时间
timesource = soup.select('.weibo_time')[0].contents[1].text.strip()
type(timesource)
timesource

这里写图片描述

注意:

soup.select()调用的时候
class 用 ‘.*’
id 用 ‘#*’

  • 2
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值