爬取腾讯招聘信息（动态加载）职位

最新推荐文章于 2021-11-24 00:57:40 发布

dongxieaitonglao

最新推荐文章于 2021-11-24 00:57:40 发布

阅读量281

点赞数

本文链接：https://blog.csdn.net/dongxieaitonglao/article/details/106575626

版权

本文介绍如何利用Python爬虫技术，结合Selenium或Scrapy等库，解析和抓取腾讯网站上采用动态加载方式显示的职位信息，包括职位详情、要求和投递方式，帮助求职者获取最新招聘数据。

摘要由CSDN通过智能技术生成

import requests
import json
import time
import random

class TencentSpider(object):
    def __init__(self):
        self.headers={
   'User-Agent':'Mozilla/5.0'}
        self.one_url='https://careers.tencent.com/tencentcareer/api/post/Query?timestamp=1591347155453&countryId=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex={}&pageSize=10&language=en-us&area=gb'
        self.two_url='https://careers.tencent.com/tencentcareer/api/post/ByPostId?timestamp=1591347751739&postId={}&language=en-us'

    #请求函