爬取华为应用市场拼多多评论并写入EXCEL

最新推荐文章于 2025-03-12 16:44:24 发布

py3小白

最新推荐文章于 2025-03-12 16:44:24 发布

阅读量1.5k

点赞数

文章标签： python 爬虫

本文链接：https://blog.csdn.net/qq_45654257/article/details/123360473

版权

博主通过学习产品分析任务，初次尝试爬虫，成功爬取了华为应用市场中拼多多应用的用户评论，并将数据导出到EXCEL文件，以此分享自己的爬虫初体验。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

import requests
from requests.exceptions import RequestException
import json
import xlwt

def getcomment(url):
    try:
        headers = {
            'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36'
        }
        response = requests.get(url,headers=headers)
        if response.status_code == 200:
                return response.text
        else:
            return 'no200'
    except RequestException:
        return None

def main(pagestartnum ,pageendnum):
    new_workbook = xlwt.Workbook()
    for i in range(pagestartnum,pageendnum):
        url = 'https://web-drcn.hispace.dbankcloud.cn/uowap/index?method=internal.user.commenList3&serviceType=20&reqPageNum='+str(i)\
              +'&maxResults=25&appid=C10374976&version=10.0.0&zone=&loca