面是一个使用Python编写的简单爬虫示例:
import requests
# 设置要爬取的网页链接
url = "https://example.com"
# 发送请求,获取网页内容
response = requests.get(url)
content = response.text
# 打印网页内容
print(content)
1
2
3
4
5
6
7
8
9
10
11
在这个示例中,我们使用了requests库来发送GET请求并获取网页的内容。我们将目标网页的链接存储在url变量中,通过requests.get(url)发送请求并得到response响应对象。使用response.text可以获取网页的内容,最后通过print语句将网页内容打印出来。
请注意,在实际使用爬虫时,需要遵守相关网站的使用协议和法律法规,尊重网站的隐私政策和使用条款,避免对目标网站造成不必要的干扰或侵犯其合法权益。另外,为了提高爬虫的效率和稳定性,可能需要了解更多关于HTTP请求、网页解析和数据处理等方面的知识
————————————————
版权声明:本文为CSDN博主「偷拨网线的william」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/weixin_47059371/article/details/134784416