python爬虫--获取微信投票中所有选手的票数以及其他详情信息

墨_风

已于 2023-09-13 15:24:08 修改

阅读量1.4k

点赞数 1

分类专栏：学习笔记文章标签： python 爬虫

于 2022-02-13 15:56:21 首次发布

本文链接：https://blog.csdn.net/mocoll/article/details/122910018

版权

学习笔记同时被 2 个专栏收录

207 篇文章 1 订阅

订阅专栏

编程语言

98 篇文章 1 订阅

订阅专栏

该博客介绍了一个Python脚本，用于抓取微信投票平台上的所有选手信息，并将其整理成表格存储为Excel文件。脚本通过POST请求获取投票列表，手动更换token以保持登录状态，并遍历所有页面获取详细数据，包括项目名称、排名、票数等信息。

摘要由CSDN通过智能技术生成

一、前言

功能：获取微信投票所有选手的信息，绘制成表格。
需要手动操作：因为需要微信登录，所以每十几分钟需要手动换一下token

二、代码

import requests
import json
from xlwt import *

headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:86.0) Gecko/20100101 Firefox/86.0",
    "token": "tWHfLl3/7mCadgpZYPoSDQ==" # 需要自己打开浏览器看请求，换token
}

id_list = []
for page in range(1, 7):
    url = "https://vote.tyzyz.com.cn/api/vote/get_vote_list.json"
    data = {
        "code_and_name": "",
        "recommend_type": 0,
        "pageno": page,
        "pagesize": 10,
        "area": ""
    }
    page_text = requests.post(url=url, headers=headers, data=data).text
    rows = json.loads(page_text)["data"]["page_list"]["rows"]
    for i in rows:
        id_list.append(i["id"])

message_list = [
    ["项目名称", "排名", "票数", "执行团队", "项目类型", "项目来源", "项目起源"],
    # ["项目名称", "排名", "票数", "执行团队", "项目类型", "项目来源"],
]
for id in id_list:
    url = "https://vote.tyzyz.com.cn/api/vote/get_id_vote.json?id=" + str(id)
    page_text = requests.get(url=url, headers=headers).text
    rows = json.loads(page_text)["data"]
    message = []
    message.append(rows["name"])
    message.append(rows["number"])
    message.append(rows["votes"])
    message.append(rows["orgname"])
    message.append(rows["recommendType"])
    message.append(rows["area"])
    message.append(rows["briefDeeds"])
    message_list.append(message)

# 写进Excel
# 指定file以utf-8的格式打开
file = Workbook(encoding='utf-8')
# 指定打开的文件名
table = file.add_sheet('message')
for i in range(0, len(message_list)):
    message_i = message_list[i]
    for j in range(0, len(message_i)):
        table.write(i + 1, j, message_i[j])
file.save('./message.xlsx')