爬取qq群信息

最新推荐文章于 2024-05-06 12:40:02 发布
最新推荐文章于 2024-05-06 12:40:02 发布
阅读量2.9k 收藏 20
点赞数 1
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaochen0913/article/details/113120801
版权

获取cookie和bkn参数

from selenium import webdriver
from selenium.webdriver import ChromeOptions
import time
import pyautogui
import redis

url='https://qun.qq.com/member.html#gid=453987149'

# 需要在这里边获取Cookie，bkn，和所有群号码，把所有群号码存起来，然后在爬虫里边一个一个取群号码，Cookie和bkn的值就直接传
# headers={
# "cookie": "SINAGLOBAL=6855701965715.122.1577692539947; __gads=ID=c5153c4711c3fa8d:T=1577692757:S=ALNI_MZn5p9pdEiyOo6N9NhaO3oLE1lKsg; _ga=GA1.2.789113268.1577692750; login_sid_t=62e1525776c0bc911756365be2f04f7c; cross_origin_proto=SSL; _s_tentry=cn.bing.com; Apache=8344750195808.959.1603933930414; ULV=1603933930438:89:2:2:8344750195808.959.1603933930414:1603763999621; wb_view_log=1920*10801; wb_view_log_3607491825=1920*10801; UOR=,,login.sina.com.cn; WBtopGlobal_register_version=2020102910; ALF=1635473639; SSOLoginState=1603937640; SCF=ApfIXjexvlOALW_AwBZGr5lNOOESACnJqp_QJtptKZ35jgGHHFSN2QNy3PWTydCN6YAT53oDzyHeUOE95ONOmSI.; SUB=_2A25ynlU4DeRhGeNN6lQU8ivFyjqIHXVR6sHwrDV8PUNbmtANLVr1kW9NScY2ECGW9SVd_9-19MZvuNdisoBSgzC4; SUBP=0033WrSXqPxfM725Ws9jqgMF55529P9D9WhXgPg0.VYZ6lqP_5Dg2LWr5JpX5KzhUgL.Fo-0eKqfeo-4eKq2dJLoIEBLxK-L12BL1heLxK-LB-qLB.zLxKBLBonL12-LxK-LBKnL1-et; SUHB=05i629ijI_wSsQ; wvr=6; wb_view_log_5316525916=1920*10801; webim_unReadCount=%7B%22time%22%3A1603958917009%2C%22dm_pub_total%22%3A0%2C%22chat_group_client%22%3A0%2C%22chat_group_notice%22%3A0%2C%22allcountNum%22%3A0%2C%22msgbox%22%3A0%7D"
# }
# browser.add_cookie(headers)

option = ChromeOptions()
option.add_experimental_option('excludeSwitches', ['enable-automation'])
# url=""
# 设置中文
option.add_argument('lang=zh_CN.UTF-8')
# 更换头部
option.add_argument('user-agent="Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36"')
browser = webdriver.Chrome(options=option)
browser.get(url)#打开浏览器预设网址
browser.maximize_window()
time.sleep(5)
# 模拟点击登陆
# browser.switch_to.frame('ptlogin_iframe')#frame切换，进入frame内部才可以进行点击
pyautogui.click(1016, 595)
# time.sleep(5)
# browser.find_element_by_xpath('//*[@id="bottom_qlogin"]').click()#使用xpath找到头像按钮元素
# print(browser.page_source)
# print(browser.execute_script('return event = event||window.event;x=event.clientX;y=event.clientY'))
# browser.find_element_by_id('img_out_3526748995').click()
time.sleep(2)

# print(browser.page_source)#打印网页源代码
# 获取cookies
# 'Cookie': 'RK=3hYoIM4OUR; ptcz=22062646123ccd493ed12173c7b29ec0dbe8425bb3c65e1fd6f12f2d1709caea;
# pgv_pvid=4613506960; _qpsvr_localtk=0.6521903418751458; uin=o1784329053; skey=@UIIkmNdEJ; p_uin=o1784329053;
# pt4_token=DLWBd9LdPUwpXTsYe-tg7eAM1dVCX9-HKjjvo6YdlHI_; p_skey=kd1ZrcOjDHPyY-9g6fSvQ8Mui8gnJdGt9J9PZIpkeLA_;
# traceid=1e9a5faf2a'

# print(browser.get_cookies())
cookie = browser.get_cookies()
for lq in cookie:
  # print(lq)
  if lq["name"] == 'RK':
    # print(lq["value"])
    RK = lq["value"]
  elif lq["name"] == 'ptcz':
    # print(lq["value"])
    ptcz = lq["value"]
  elif lq["name"] == 'pgv_pvid':
    # print(lq["value"])
    pgv_pvid = lq["value"]
  elif lq["name"] == '_qpsvr_localtk':
    # print(lq["value"])
    _qpsvr_localtk = lq["value"]
  elif lq["name"] == 'uin':
    # print(lq["value"])
    uin = lq["value"]
  elif lq["name"] == 'skey':
    # print(lq["value"])
    skey = lq["value"]
  elif lq["name"] == 'p_uin':
    # print(lq["value"])
    p_uin = lq["value"]
  elif lq["name"] == 'pt4_token':
    # print(lq["value"])
    pt4_token = lq["value"]
  elif lq["name"] == 'p_skey':
    # print(lq["value"])
    p_skey = lq["value"]
  elif lq["name"] == 'traceid':
    # print(lq["value"])
    traceid = lq["value"]
# 拼接Cookies
cookies = 'RK='+RK+'; '+'ptcz='+ptcz+'; '+'_qpsvr_localtk='+_qpsvr_localtk+'; '+'uin='+uin+'; '+'skey='+skey+'; '+'p_uin='+p_uin+'; '+'pt4_token='+pt4_token+'; '+'p_skey='+p_skey+'; '+'traceid='+traceid+'; '
print(cookies)
# RK=31gEwhzu1Q;ptcz=b2456e2b484e6ec14abbfda2e37ed7dcdcd49215e0df8ef0ac601d2c8c589f3f;_qpsvr_localtk=0.5913548757973062;uin=o3526748995;skey=@15ZJAbNkW;p_uin=o3526748995;pt4_token=K1YlECESkc03EeCGCBxhkpIFOYtZPWNCNFHeT4D*mrU_;p_skey=YkbDrjjcbxSMPo8pdKPDDfR*kpJ8ZINkwcnt9*ALBM4_;traceid=f00fb9b92c;
# _qpsvr_localtk=0.5913548757973062; uin=o3526748995; skey=@15ZJAbNkW; RK=31gEwhzu1Q; ptcz=b2456e2b484e6ec14abbfda2e37ed7dcdcd49215e0df8ef0ac601d2c8c589f3f; p_uin=o3526748995; pt4_token=K1YlECESkc03EeCGCBxhkpIFOYtZPWNCNFHeT4D*mrU_; p_skey=YkbDrjjcbxSMPo8pdKPDDfR*kpJ8ZINkwcnt9*ALBM4_; traceid=f00fb9b92c
# RK=31gEwhzu1Q; ptcz=75cea5abd61decb2916239bf7951fe4e43076a6a34a57b3fed25ec40ce416a61; _qpsvr_localtk=0.1803814196177329; uin=o3526748995; skey=@15ZJAbNkW; p_uin=o3526748995; pt4_token=TRmwjYWuulBbk-5rTyHf7zmYLxEmCsYGoSt4AKWOnPU_; p_skey=SBnVUwqCr2yaVQkdgLb*4Lk28g0ZJgBnsKIUoS0QlX0_; traceid=23a67f1f50;


# 执行js语句，然后获取bkn的返回值
# 获取bkn参数
bkn = browser.execute_script('return $.getCSRFToken()')
print(browser.execute_script('return $.getCSRFToken()'))

写提取群号和爬虫逻辑

import requests
import json
import time
from qq.getBkn import bkn,cookies
import xlwt
import random

def getqun():
    global user_agent
    user_agent = [
        "Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_6_8; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50",
        "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-us) AppleWebKit/534.50 (KHTML, like Gecko) Version/5.1 Safari/534.50",
        "Mozilla/5.0 (Windows NT 10.0; WOW64; rv:38.0) Gecko/20100101 Firefox/38.0",
        "Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; .NET4.0C; .NET4.0E; .NET CLR 2.0.50727; .NET CLR 3.0.30729; .NET CLR 3.5.30729; InfoPath.3; rv:11.0) like Gecko",
        "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)",
        "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.0; Trident/4.0)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0)",
        "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)",
        "Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv:2.0.1) Gecko/20100101 Firefox/4.0.1",
        "Mozilla/5.0 (Windows NT 6.1; rv:2.0.1) Gecko/20100101 Firefox/4.0.1",
        "Opera/9.80 (Macintosh; Intel Mac OS X 10.6.8; U; en) Presto/2.8.131 Version/11.11",
        "Opera/9.80 (Windows NT 6.1; U; en) Presto/2.8.131 Version/11.11",
        "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_0) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; Maxthon 2.0)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; TencentTraveler 4.0)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; The World)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; Trident/4.0; SE 2.X MetaSr 1.0; SE 2.X MetaSr 1.0; .NET CLR 2.0.50727; SE 2.X MetaSr 1.0)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; 360SE)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; Avant Browser)",
        "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)",
        "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36"]

    headers = {
        'User-Agent':user_agent[random.randint(0, len(user_agent)-1)],
        'Cookie': str(cookies)

    }

    global  qunid
    qunid = []
    global qunname
    qunname = []
    url = 'https://qun.qq.com/cgi-bin/qun_mgr/get_group_list'
    json_data = {
        'bkn': str(bkn)
    }

    res = requests.post(url, headers=headers, data=json_data)
    html_str = res.text
    print(html_str)
    a = json.loads(html_str)
    print(a)
    for quid in a["join"]:
        # print(quid)
        qunid.append(quid['gc'])
        # print(quid['gc'])
        qunname.append(quid['gn'])
        # print(quid['gn'])
    print(qunid)
    print(qunname)


if __name__ == '__main__':

    getqun()
    # print(qunid)
    # print(qunname)
    # print(len(qunid))
    # print(len(qunname))
    # print(qunid[0])
    # print(qunname[2])
    length = len(qunid)
    for q in range(0,length):
        time.sleep(5)
        print(qunname[q])
        book = xlwt.Workbook(encoding='utf-8', style_compression=0)
        sheet = book.add_sheet('群成员信息', cell_overwrite_ok=True)
        col = ('账号', '加入时间', '最后发言时间', '群昵称', 'qq昵称','q龄')
        for inser in range(0, 6):
            sheet.write(0, inser, col[inser])
        # flag =1
        i=0
        j=20
        headers = {
            'User-Agent':user_agent[random.randint(0, len(user_agent)-1)],
            'Cookie':str(cookies)
        }

        url = 'https://qun.qq.com/cgi-bin/qun_mgr/search_group_members'
        # 先请求一次，获取并计算相关参数，获取第一页的数据
        json_data = {
            'gc':str(qunid[q]),
            'st':str(i),
            'end':str(j),
            'sort':'0',
            'bkn':str(bkn)
        }
        i = i+21
        j= j+21
        res = requests.post(url, headers=headers,data = json_data)
        html_str = res.text
        # print(html_str)
        a = json.loads(html_str)#json转为字典
        # 提取群里面的总人数
        person = a["count"]
        # person = person+11
        # 计算出页码和最后一页的个数
        c=int(person/21) #除最后一页之外的页数
        if person>21 and person<42:
            c=int(person/21)+1
        # print(c)
        d=person%21      #最后一页的人数
        print(c,d)
        down = 1
        for lala in a["mems"]:

            joinTime = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(lala['join_time']))
            last_speak_time = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(lala['last_speak_time']))
            # sheet.write(lala['uin'],joinTime,last_speak_time,lala['card'],lala['nick'])
            data = [lala['uin'],joinTime,last_speak_time,lala['card'],lala['nick'],lala['qage']]
            for inser in range(0,6):
                sheet.write(down, inser, data[inser])
            down += 1
            print("账号：",str(lala['uin']),"加入时间：",joinTime,"最后发言时间：",last_speak_time,"群昵称",lala['card'],"qq昵称：",lala['nick'],lala['qage'])

        # 得到相关参数后加入循环，进行循环请求，获取中间页码数据
        if c>=2:
            code = 1
            for flag in range(1,c):
                # code = 1
                code+=1
                json_data = {
                    'gc':str(qunid[q]),
                    'st': str(i),
                    'end': str(j),
                    'sort': '0',
                    'bkn': str(bkn)
                }
                i = i + 21
                j = j + 21
                # if code==c-1:
                #     i = i + 21
                #     j = j + d
                res = requests.post(url, headers=headers, data=json_data)
                html_str = res.text
                # print(html_str)
                a = json.loads(html_str)  # json转为字典
                # print(a)
                # 提取群里面的总人数
                # person = a["count"]
                # # 计算出页码和最后一页的个数
                # c = int(person / 21)  # 除最后一页之外的页数
                # d = person % 21  # 最后一页的人数
                for lala in a["mems"]:
                    joinTime = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(lala['join_time']))
                    last_speak_time = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(lala['last_speak_time']))
                    # sheet.write(lala['uin'], joinTime, last_speak_time, lala['card'], lala['nick'])
                    data = [lala['uin'], joinTime, last_speak_time, lala['card'], lala['nick'], lala['qage']]
                    for inser in range(0, 6):
                        sheet.write(down, inser, data[inser])
                    down += 1
                    print("账号：", str(lala['uin']), "加入时间：", joinTime, "最后发言时间：", last_speak_time, "群昵称", lala['card'],
                          "qq昵称：", lala['nick'], lala['qage'])



            # 获取最后一页的数据
            if c !=2:
                if d!=0:#保证这个最后一页是存在的
                    j=j-20+d
                    # print(i,j)
                    json_data = {
                        'gc':str(qunid[q]),
                        'st': str(i),
                        'end': str(j),
                        'sort': '0',
                        'bkn': str(bkn)
                    }
                    res = requests.post(url, headers=headers, data=json_data)
                    html_str = res.text
                    a = json.loads(html_str)  # json转为字典
                    for lala in a["mems"]:
                        joinTime = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(lala['join_time']))
                        last_speak_time = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(lala['last_speak_time']))
                        # sheet.write(lala['uin'], joinTime, last_speak_time, lala['card'], lala['nick'])
                        data = [lala['uin'], joinTime, last_speak_time, lala['card'], lala['nick'], lala['qage']]
                        for inser in range(0, 6):
                            sheet.write(down, inser, data[inser])
                        down += 1
                        print("账号：", str(lala['uin']), "加入时间：", joinTime, "最后发言时间：", last_speak_time, "群昵称", lala['card'],
                              "qq昵称：", lala['nick'], lala['qage'])

        # 保存excel文件,以群名称保存
        savepath = 'C:/Users/Administrator/Desktop/shuju/'+str(qunname[q])+'.xls'
        book.save(savepath)

        print(a["mems"])
        print(html_str)
        print(c,d)
    # ss=12
    # c=ss/2
    # print(c)
    # print(type(person))
    # print(html_str)

最后参考下面的博客把py文件合并成exe
pyinstaller打包py文件压缩成exe

最后要记得将浏览器驱动放在exe所在的目录下

xiaochen0913
关注
  • 1
    点赞
  • 踩
  • 20
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
网络机器人之爬虫
Alex
04-01 2484
Spider 爬虫 引子 看看美女养养眼 养眼吧，是不是经常苦于寻找不到这些资源？是不是经常因为网址的变更又找不到某些资源？ 要想解决这个问题，简单嘛，就是把资源都保存到电脑上，但要是一口气保存两百多张，估计手都都抽筋。 这时候，就需要用到我们的爬虫了。 爬虫，即网络机器人，如果把互联网理解为一张巨大的蜘蛛网，那么爬虫就是在这张网上捕猎的蜘蛛，它会根据你给定的目标将资源保存下来，也就是持久化存...
tg_crawler：只是基于tg-cli的Telegram凌乱爬虫。 现在已弃用，请使用telegram-export
02-05
电报爬虫 使用此搜寻器，您可以搜寻电报频道，群组或私人聊天。 聊天记录将保存在SQLite数据库和文本文件中。 您可以使用不同的参数在数据库中查询，例如通道名称，组名称，电报用户名，电报唯一ID等。 适用于Python 3.3+。 依存关系 使用以下命令安装依赖项： pip install -r requirements 如果没有sqlite3，请安装它： sudo apt-get install sqlite3 用法 为了运行这个可爱的爬虫，首先需要编译。 我修复了一些导致tg崩溃的tg问题。 使用make命令编译tg之后，使用以下命令运行它： ./bin/telegram-cli
qpython爬虫_python爬虫教程：批量抓取 QQ 群信息
weixin_39970064的博客
11-29 1530
前言本文讲解Python批量抓取 QQ 群信息，包括群名称、群号、群人数、群主、地域、分类、标签、群简介等内容，返回 XLS / CSV / JSON 结果文件。基本环境配置版本：Python2.7相关模块：bottlerequestssimplejsonpyexcel-xlsunicodecsv代码实现部分截图ps：这里推荐一下我的python零基础系统学习交流扣扣qun：322795889，学...
Python爬虫使用selenium爬取qq群的成员信息（全自动实现自动登陆）(1)
m0_61331407的博客
05-06 1250
学好 Python 不论是就业还是做副业赚钱都不错，但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！Python所有方向路线就是把Python常用的技术点做整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。工欲善其事必先利其器。学习Python常用的开发软件都在这里了，给大家节省了很多时间。书籍的好处就在于权威和体系健全，刚开始学习的时候你可以只看视频或
爬虫项目十六：用 Python 三十行代码采集QQ群成员信息，很简单
weixin_47163937的博客
04-10 2911
文章目录前言一、抓包二、使用步骤1.引入库2.读入数据总结 前言 用Python爬取QQ群成员信息数据 提示：以下是本篇文章正文内容，下面案例可供参考 一、抓包 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。 二、使用步骤 1.引入库 代码如下（示例）： import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import warni
爬虫实战-python爬取QQ群好友信息
python练手项目实战
11-30 1万+
自从开始学习爬虫后，总是无法控制那一颗躁动的心。每天总是想要爬点什么，爬过电影、爬过电影影评、爬过图片(美女图)、爬过视频链接，从最初的简单解析网页到模拟登陆再到异步加载，现在看到一个网页最先想的就是要不要爬一下。话不多说，来我们今天的项目，通过模拟登陆和异步加载爬一下QQ群成员的信息。 大概思路 我们通过网页版QQ群管理去获取相应的群信息，通过点击QQ群首页上的“群管理”进入到QQ群页面...
Python爬虫教程，利用Python采集QQ群成员信息
Python_sn的博客
11-02 2780
Python–selenium 加载并保存QQ群成员，去除其群主、管理员信息。 基本思路 模拟登陆页面 页面分析 代码实现 选择所需加载群 页面分析 代码实现 保存所需信息 页面分析 代码实现 完整代码 很多人学习python，不知道从何学起。 很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。 很多已经做案例的人，却不知道如何去学习更加高深的知识。 那么针对这三类人，我给大家提供一个好的学习平台，免费领取视频教程，电
Python获取统计自己的qq群成员信息的方法
01-02
前提：获取自己的qq群成员信息，自己必须是群主或者管理员，然后通过管理页面进入到成员高级管理网页端，就可以对数据进行爬取了！  步骤： ①：首先安装环境 selenium库，selenium是一个自动化库，但是使用它必须...
QQGroupsSpiderQQ群爬虫
08-10
批量抓取 QQ 群信息，包括群名称、群号、群人数、群主、群简介等内容，最终生成 XLS(X) / CSV 结果文件。
QQ相册获取-易语言
06-12
利用自己的QQ登录 会全部显示 查看别人的有可能不一定成功~??这里就需要各位取参考我以前写的 QQ相册封面获取??利用是 旧版接口XML 主要是 取 相册ID 数量 名字? ?是吧~~~ 代码里面的地址已经经过过滤阉割了 不保证...
phpspider:php爬虫，demo包含淘宝、天猫、京东等详情页的爬取
05-13
对爬虫感兴趣的开发者可以加QQ群一起讨论：147824717。 下面以糗事百科为例, 来看一下我们的爬虫长什么样子: $configs = array( 'name' => '糗事百科', 'domains' => array( 'qiushibaike.com',
飞快 QQ 群信息自动抓取工具破解版
06-14
飞快 QQ 群信息自动抓取工具破解版，好用的QQ群邮件地址智能抓取工具。
掘宝QQ群掏人工具
09-11
实现快速从Q群中导出群成员，包括Q昵称、Q号、Q龄、加群时间等信息
python爬虫爬取研招网的所有考研招考信息，并写入到本地轻量级数据库，再从数据库写入到excle中，整体代码都在里面
最新发布
06-27
在“创建数据库和表.py”中第6行修改一下你的数据库文件夹（就是说必须先创建文件夹，有没有那个db数据库无所谓） “将数据库插入到excle.py”中第5行也要修改一下你的数据库文件夹（文件名和...QQ交流群：922754208
Python爬虫入门——有手就行
weixin_42596778的博客
10-04 242
1.爬虫逻辑： 模仿服务器发起http请求，获取网页信息，从返回信息中过滤出自己想要的数据。 2.用到的技术 python——requests库，BeautifulSoup库 下载requests库：pip install requests 下载BeautifulSoup库：pip install beautifulsoup4 3.开始写爬虫 这是我们本次要爬取的图片和url地址。 点开F12，可以看到请求方式为get请求。 使用requests库发起get请求，方法很简单： #设置头 headers
零基础爬虫requests初阶教程，手把手教你爬数据
PY洋洋
11-13 4605
目录 一、环境与工具 二、学爬虫必备知识 三、简单体验 requests 四、get 请求 3.1 基础讲解一 3.3 基础讲解二 3.2 基础讲解三 3.4 获取cookie 3.5 获取请求头 3.6 添加请求头 3.5 知乎爬取+反扒技术 3.6 抓取二进制数据 3.7 美女私房照爬取（ 准备发车） 四、 POST 请求 4.1 数据表单提交 4.2 添加请求头 4.3 提交json 4.4 普通文件上传
QQ群成员提取器|QQ群成员提取工具|QQ群成员获取导出
2401_83448745的博客
03-27 1579
3.1.导出条件、Q号、昵称、性别、群名片、加群时间、发言时间、邮箱格式。1.2.一键获取显示Q号、昵称、性别、群名片、加群时间、发言时间。2.1.导出好友Q号、好友昵称、勾选邮箱格式，就是导出号码加邮箱。1.1.双击群号获取提取群成员。1.可扫码登录，无需输入密玛。3.导出群号、群名、群主Q。3.2.指定性别导出。
QQ群信息爬取-------抓包破解接口(2)
热门推荐
a_hui_tai_lang的博客
01-07 2万+
QQ群信息爬取-------使用模拟登陆(1) 这个比之前的爬取效率更高，爬取的网站https://qun.qq.com/member.html，简单说一下思路 首先首先使用模拟登陆获取cookie 经过抓包，我发现了Q群的数据接口为https://qun.qq.com/cgi-bin/qun_mgr/search_group_members，使用requests模块向该网站发送post请求，需...
使用Python+Scrapy爬取并保存QQ群空间帖子
lvlei19911108的博客
06-30 212
首先声明，在Python和爬虫这方面，我是业余的那一卦，只是平时玩一玩，不能当真的，请各位大佬轻拍。虽然爬虫与传统意义上的大数据技术不属于同一类，但大概也只能放在大数据分类下面了。 今天接到了 @小阿妩 的一个需求(她是做产品经理的，也只有“需求”这个词最合适了)。大意是因为担心QQ群空间不稳定或者关闭，因此需要备份某个QQ群空间的所有帖子。帖子量比较大，有几千条，人工操作会很麻烦，才会想到用爬虫...
python爬取qq群
09-11
要使用Python爬取QQ群的信息，可以采用以下步骤： 1. 安装必要的库：首先，您需要安装Selenium库，用于模拟登录QQ网页版。您可以使用以下命令在Python中安装Selenium库： ``` pip install selenium ``` 2. 下载并配置浏览器驱动程序：Selenium需要使用浏览器驱动程序来控制浏览器。您可以根据您所使用的浏览器下载相应的驱动程序，如Chrome驱动程序或Firefox驱动程序。下载后，将驱动程序添加到您的系统路径中。 3. 导入必要的库：在Python中，导入Selenium库和WebDriver对象，如下所示： ```python from selenium import webdriver ``` 4. 创建WebDriver对象：使用适当的驱动程序创建WebDriver对象。例如，如果您使用Chrome浏览器，可以使用以下代码创建一个ChromeWebDriver对象： ```python driver = webdriver.Chrome() ``` 5. 打开QQ群页面：使用`get()`方法打开要爬取的QQ群链接。链接形式为“https://qun.qq.com/member.html#gid=”加上群号码。例如，您可以使用以下代码打开链接： ```python url = "https://qun.qq.com/member.html#gid=群号码" driver.get(url) ``` 6. 登录QQ网页版：由于QQ网页版是异步加载的，需要模拟登录才能获取到网页的源码。使用Selenium的自动化操作，您可以模拟点击二维码登录。扫描二维码后，您将登录到QQ网页版。 7. 解析源码并提取所需信息：登录后，您可以使用Selenium的各种方法和技巧来解析页面的源码并提取您想要的QQ群信息。例如，您可以使用XPath或CSS选择器来定位和提取群成员的网名、群名片、QQ号、性别、Q龄、入群时间等信息。 请注意，爬取QQ群信息可能有一些法律和隐私方面的限制，请遵守相关法律法规并尊重用户隐私。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值