爬虫笔记——urllib实战之淘宝零食板块爬取

本文介绍了使用Python的urllib库爬取淘宝零食板块的信息,包括商品标题、价格、产地、销量和评论数。通过正则表达式匹配网页源代码,将数据写入txt文件。过程中强调了编写爬虫代码的逻辑思考、正则表达式的使用以及遇到的问题和解决方法,是提升Python爬虫技能的一次实践总结。
摘要由CSDN通过智能技术生成

  如题,此次为urllib爬取淘宝网零食板块的代码,并将其写入txt文件中:

一、进入淘宝网-查看源代码

二、通过源码得出正则表达式

  1. title_pat  =  '"raw_title":"(.*?)",'  
  2. price_pat  =  '"view_price":"(.*?)",'  
  3. loc_pat  =  '"item_loc":"(.*?)",'  
  4. sale_pat  =  '"view_sales":"(.*?)人付款",'  
  5. comment_pat  =  '"comment_count":"(.*?)",' 

三、书写代码进行爬取

  1. import re  
  2. import urllib.request  
  3. import urllib.error  
  4. import pandas as pd  
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值