通过selenium爬取51.job职位信息

通过selenium自动化爬取51.job的职位信息。期间因为对csv的写入不是很了解,耗费了好多时间,后来才发现是对齐方式弄错了。真是什么问题都会遇到。问题自己解决后还是感觉挺有收获的,对这几天学习的定位方式有了新的理解,同时对页面跳转以及如何跳转回当前页面有有了新的认识。详细代码如下:

#!/usr/bin/env python
# _*_ coding:utf-8 _*_
'''使用selenium爬取51.job网站的职位信息,并将爬取职位信息结果保存在csv文件中'''

from selenium import webdriver
import time
import csv

class QCWY(object):

    def __init__(self,keyword,city,maxpagenum):

        self.keyword = keyword
        self.city = city
        self.maxpagenum = maxpagenum


    def run(self):
        driver = webdriver.Chrome()
        driver.implicitly_wait(10)

        driver.get('http://www.51job.com')
        # 输入关键字
        driver.find_element_by_id('kwdselectid').send_keys(self.keyword)
        # 输入城市
        driver.find_element_by_id('work_position_input').click()
        # 等待1s 确保页面稳定
        time.sleep(1)

        # 点击上方已经选中的城市,即取消选中的默认城市

        selectCityEles = driver.find_elements_by_css_selector('#work_position_click_multiple_selected>span')

        for el in selectCityEles:
            el.click
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值