python爬虫基础项目 -- 爬取新浪新闻

最新推荐文章于 2021-02-21 06:37:17 发布

D_dalei

最新推荐文章于 2021-02-21 06:37:17 发布

阅读量414

点赞数 1

分类专栏：爬虫文章标签： python

本文链接：https://blog.csdn.net/D_wart/article/details/103596132

版权

本文介绍使用Python进行网络爬虫的基础知识，通过实例详细讲解如何爬取新浪新闻，包括设置请求头、解析HTML、提取数据等步骤，帮助初学者掌握网页抓取技巧。

摘要由CSDN通过智能技术生成

import requests
base_url = 'https://search.sina.com.cn/?'
headers = {
   
    'user-agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.79 Safari/537.36',
}
kw = '首艘国产航母'
params = {
   
    'q': kw,