30行python代码完成某东商品评论数据的爬取，并且完成爬取的数据存在excel文档中_从淘宝、京东等电商平台爬取球鞋相关的评论10000条,以excel文档形式提交作业-CSDN博客

本文链接：https://blog.csdn.net/xzb5566/article/details/131046563

30行python代码完成某东商品评论数据的爬取，并且完成爬取的数据存在excel文档中

简单完成网络数据的爬取，非常简单，没有编程基础，看完你也会了。

# 为了完成一些测试数据的收集，编写了本应用代码

import requests
import json
import openpyxl
# 创建excel表格
wk = openpyxl.Workbook()
# 创建sheet
sheet = wk.create_sheet()
# 设置headers是为了解决服务器反爬机制
headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.0.0 Safari/537.36'}
url = 'https://club.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98&productId=8452201&score=0&sortType=5&page=0&pageSize=10&isShadowSku=0&fold=1'
resp = requests.get(url, headers=headers)
context = resp.text
# print(context)

result = context.replace("fetchJSON_comment98(", "").replace(");", "")
json_data = json.loads(result)
# print(json_data)
comments = json_data['comments']
for item in comments:	
    commentContent = item['content']
    color = item['productColor']
    size = item['productSize']
    # 在sheet中保存数据
    sheet.append([color, size,commentContent])
    # 把表格保存在一个磁盘里面 使用相对路径
    wk.save('D:/jd-data.xlsx')
print('数据保存成功')