![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫系统
文章平均质量分 62
风的芸芸
数据分析,追求技术是我的乐趣!
展开
-
虎嗅网数据爬取(Scrapy Splash)
huxiu_spider.py提取当前网页的所有article链接,通过解析artile内部的推荐文章(Splash动态爬取)进行跟踪爬去。 ···!/usr/bin/env python-- encoding: utf-8 --“”” Topic: 爬取虎嗅网首页 Desc : “”” import logging import scrapy from coolscrapy.ite原创 2017-08-30 14:57:24 · 1701 阅读 · 0 评论 -
51 Job招聘数据分析与可视化
招聘数据分析与可视化背景为了分析现有数据行业的招聘情况,抓取2017年3月14日到2017年5月13日发布在51Job上的数据相关招聘职位116273条信息,并从中筛选出职位是数据分析、数据挖掘、文本挖掘、视觉学习、计算广告、数据开发、数据架构师等的数据岗位招聘信息10134条。 从地域分布、企业情况、岗位需求、薪酬等维度去量化分析数据岗位的招聘现状。发现不同薪酬分层下的岗位数量基本与城市发展趋势原创 2017-08-31 09:33:56 · 5972 阅读 · 5 评论