qq_51868627的博客

原创 Spark On Yarn集群模式搭建

Spark On Yarn集群模式搭建

原创 Spark On Standalone 环境搭建

Spark On Standalone 环境搭建

原创 Spark Local模式环境搭建

Spark Local模式环境搭建

原创 Flume环境搭建

Flume环境搭建

原创 Hive安装配置

Hive安装配置

原创 HBase集群环境搭建

HBase集群环境搭建

原创 双十一淘宝美妆数据分析

原创 去哪网数据处理

原创 美妆商品分析与挖掘

原创 链家二手房数据处理

原创 python爬虫——爬取拉勾上的职位信息

爬取拉勾网站岗位数据1、调用网页查找网页链接规律写一个for循环，爬取每一个网页的职位信息def down(): for i in range(1,4): if i == 1: strUrl = "http://72.itmc.org.cn/JS001/open/show/zhaopin/index.html" else: strUrl ="http://72.itmc.org.cn/JS001/open/sh

原创 python爬虫——正则获取手机号

用正则匹配网页手机号安装re模块、requests库、beautifulsoup4库cmd → pip install re → 回车cmd → pip install requests → 回车cmd → pip install beautifulsoup4 → 回车调用import requestsimport refrom bs4 import BeautifulSoup调用网址r = requests.get(“http://www.haomahao.com/”)编写正则表达