python 爬取智联招聘

最新推荐文章于 2024-08-02 09:46:03 发布

laiczhang

最新推荐文章于 2024-08-02 09:46:03 发布

阅读量3.1k

点赞数 1

分类专栏： python库实例文章标签：智联招聘爬虫 selenium pyquery

本文链接：https://blog.csdn.net/qq_44621510/article/details/100679986

版权

本文介绍了一个使用Python3.7、selenium和pyquery库爬取智联招聘网站信息的实例，详细讲解了爬虫的实现过程。

摘要由CSDN通过智能技术生成

一个爬取智联的一个小爬虫

python版本：python3.7
依赖模块：selenium、pyquery
废话少说，上代码

from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.keys import Keys
from pyquery import PyQuery as pq
import time
 
 
class ZhiLian:
    def __init__(self):
        # 设置 chrome 无界面化模式
        self.chrome_options = Options()
        self.chrome_options.add_argument('--headless')
        self.chrome_options.add_argument('--disable-gpu')
        self.driver = webdriver.Chrome(chrome_options=self.chrome_options)
 
    def get_url(self, search='python'):
        """
        获取搜索职位的url, demo里面默认搜索python
        :param search:
        :return:
        """
        self.driver.get("https://www.zhaopin.com/")
        element = self.driver.find_element_by_class_name("zp-search__input")
        element.send_keys(f"{search}"