网络爬虫实战(5个案例)

最新推荐文章于 2024-08-07 14:40:08 发布

Q2605894893

最新推荐文章于 2024-08-07 14:40:08 发布

阅读量8.9k

点赞数 1

本文链接：https://blog.csdn.net/Q2605894893/article/details/85319583

版权

本文详细介绍了五个Python网络爬虫实战案例，包括京东和亚马逊商品页面抓取、百度360关键词提交、网络图片下载及IP地址归属地查询，帮助读者深入理解爬虫技术的应用。

摘要由CSDN通过智能技术生成

案例1：京东商品页面的爬取

商品链接

import requests
url = "https://item.jd.com/2967929.html"
try:
    r = requests.get(url)
    r.raise_for_status()
    r.encoding = r.apparent_encoding
    print(r.text[:1000])
except:
    print("爬取失败")

案例2：亚马逊商品页面的爬取

商品链接

import requests
url = "https://www.amazon.cn/gp/product/B01M8L5Z3Y"
try:
    kv = {'user-agent':'Mozilla/5.0'}
    r = requests.get(url, headers = kv)
    r.raise_for_status()
    r.encoding = r.apparent_encoding
    print(r.text[1000:2000])
except:
    print("爬取失败")