- 博客(6)
- 收藏
- 关注
原创 使用Streamlit做出基于python的交互式数据分析产品
Streamlit是一个开源的Python库,利用Streamlit可以快速构建机器学习应用的用户界面,你可以仅仅使用python数据分析的代码就实现交互数据分析的功能,并且提供网页应用,可以快速发布分享。安装pip install streamlit本地启动服务器打开编辑器,创建一个streamlitDemo.py文件,写入以下内容import streamlit as stimport pandas as pdimport numpy as npimport matplotlib.py
2020-09-21 13:20:29 5485 1
原创 使用selenium实现BOSS爬虫自动投递
selenium介绍以及配置Boss直聘是大家常用找工作的招聘平台,虽然Boss直聘上面可以跟 HR 直接沟通很实用,但是投递职位非常麻烦,需要一个一个的手动去点击,大多数沟通了还没有反应,我今天用 Selenium + Python 写了一个自动沟通的脚本,实现自动和HR打招呼的功能。selenium在python里使用之前需要先下载浏览器的驱动,用来驱动你本地电脑上安装的浏览器。chrome浏览器的驱动webdriver可以在此处下载:http://chromedriver.storage.goo
2020-09-17 12:06:45 1077
原创 clickhouse+superset搭建数据平台(一)-安装clickhouse
本文介绍clickhouse的安装方法,在本文里涉及到两种安装方法,一种是将官方的源加入apt源中使用源安装,一种是下载所有的deb包到机器上独立安装。以下是本文目录:1、安装1.1、配置apt源使用源安装1.2、使用deb包安装1.2.1、下载deb包1.2.1.1、到官网上下载1.2.1.2、使用国外服务器下载1.2.2、上传到服务器1.2.3、安装deb包...
2020-04-29 17:12:25 2057 1
原创 clickhouse+superset搭建数据平台(二)-创建数据库并导入数据
以下是本文目录:一、创建数据库二、创建表三、上传数据到服务器四、导入到数据库我们首先进入到clickhouse中创建数据库以及对应的表。aukuno@vm-ubuntu:~/Documents/taxi_chicago$ clickhouse-client --passwordClickHouse client version 19.17.6.36 (official bui...
2020-04-29 17:11:44 2113
原创 clickhouse+superset搭建数据平台(三)-superset安装并连接clickhouse
本文主要介绍superset的安装以及如何从superset连接clickhouse数据库。Superset 是apache的一个孵化项目,定位为一款现代的,准商用BI系统。Superset是由Airbnb开源的数据分析与可视化平台,该工具主要特点是可自助分析、自定义仪表盘、分析结果可视化(导出)、用户/角色权限控制,还集成了一个SQL编辑器,可以进行SQL编辑查询等。比较常用的功能有:...
2020-04-29 17:10:41 10378 4
原创 clickhouse+superset搭建数据平台(四)-数据应用(报表可视化设计)
经过前面的步骤,我们已经成功搭建好了数据库,将csv文件中的数据导入到clickhouse中,并将superset和clickhouse成功地连接起来了。现在我们就可以对我们的数据尝试提出一些实际业务问题,使用SQL查询出我们想要的数据结果,并将其可视化为报表形式保存在superset上。我们不妨从以下几个问题入手:⾏⻋⾥程最多的出租⻋Top 100是哪些?出租⻋每⽇⾼峰期和低峰期(⼩时级...
2020-04-29 17:08:59 3621 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人