Python爬虫：获取新浪网新闻

代码

#coding:utf-8

import requests
from bs4 import BeautifulSoup

res = requests.get("http://news.sina.com.cn/china/")
res.encoding = "utf-8"

soup = BeautifulSoup(res.text,'html.parser')
for news in soup.select('.blk122'):
    # print news
    new_as = news.select("a")
    i = 1
    for news_a in new_as:
        print '第%d条新闻标题:'%i,news_a.text
        i = i+1

结果

第1条新闻标题: 少将为何带500多名海军未来精英赴欧
第2条新闻标题: 9月18日 这4艘中国军舰齐聚日本海
第3条新闻标题: 中国最大市同时调整2名高层 其中1人为跨界入政
第4条新闻标题: “百名红通人员”王林娟回国投案 已到案45人
第5条新闻标题: 海军戚继光舰首次远航实习出访 舰上能唱K健身
第6条新闻标题: 35颗卫星3重天网 中国这个全球定位系统厉害了
第7条新闻标题: 港中大“标语战”升级 有人贴出：这里就是中国
第8条新闻标题: 韩媒:萨德问题致韩企对中国直接投资缩水近一半
第9条新闻标题: 刚与台“断交”三个月 巴拿马总统对中国送祝愿
第10条新闻标题: 天舟一号与天宫二号分离 最终将陨落太平洋
第11条新闻标题: 新华社：从金砖国家领导人会晤看五大民生实惠

转载于:https://www.cnblogs.com/Mysterious/p/7538833.html