爬取前程无忧51job(动态数据)

爬取前程无忧51job网上全国“python”关键字所对应的岗位招聘信息

利用Requests和正则表达式方法,爬取前程无忧51job网站上全国“爬虫”关键字对应岗位的所有招聘信息,如下图所示,把爬取到的招聘数据存储在当前工程目录下的“51job.csv”文件中,需要爬取的信息有:职位名、公司名、工作地点、薪资和发布时间 。

标题思路分析:(1)导入第三方库;(2)指定url;(3)设置携带参数;(4)发起请求;(5)用正则表达式定位标签;(6)输出结果。

难点:翻页,抓包,以及解密的方法,其实没有涉及到正则表达式,用的json。
爬取的结果:
在这里插入图片描述在这里插入图片描述
代码:

import csv
import json
import re
import requests
import pprint
import requests
import hmac
from hashlib import sha256
import time

f =open('前程无忧数据2.csv',mode='a',encoding&#
  • 0
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值