关于如何爬取腾讯招聘信息

最新推荐文章于 2022-06-07 15:53:42 发布

墨先生与惠惠姐

最新推荐文章于 2022-06-07 15:53:42 发布

阅读量568

点赞数

分类专栏： python爬虫文章标签：爬虫

本文链接：https://blog.csdn.net/weixin_44972500/article/details/99673426

版权

本文详细介绍了如何利用爬虫技术来获取腾讯公司的最新招聘信息，包括爬取步骤、所需工具及可能遇到的问题和解决策略，旨在帮助求职者及时掌握岗位动态。

摘要由CSDN通过智能技术生成

如何使用爬虫

import requests，json，time，random

class TencentSpider(object):
  def __init__(self):
    self.headers = {
   'User-Agent':'Mozilla/5.0'}
    self.one_url = 'https://careers.tencent.com/tencentcareer/api/post/Query?timestamp=1565852070318&countryId' \
                   '=&cityId=&bgIds=&productId=&categoryId=&parentCategoryId=&attrId=&keyword=&pageIndex={' \
                   '}&pageSize=10&language=zh-cn&area=cn'
    self.two_url = 'https://careers.tencent.com/tencentcareer/api/post/ByPostId?timestamp=1565857096001&postId={}' \
                   '&language=zh-cn'

    # 请求函数（两级页面都需要请求）
  def get_page(self