- 博客(23)
- 收藏
- 关注
RSS订阅原创 数据分析入门-数据分析的常方法和一般步骤
通过漏斗分析，企业可以科学地评估一种业务过程，从起点到终点，各个阶段的转化情况，帮助业务找到有问题的业务环节，并进行针对性的优化。在对比分析中，选择合适的对比标准是十分关键的步骤，选择的合适，才能做出客观的评价，选择不合适，评价可能得出错误的结论。数据分析的目的是把隐藏在一大批看来杂乱无章的数据中的信息集中和提炼出来，从而找出所研究对象的内在规律。ABtest是一种做比较的手段，在同一总体下，用不同的策略作用于两个或多个同质的样本，通过分析不同策略导致的样本数据表现出的差异，来推断或者比较不同策略的效果。
2024-06-04 11:12:07
777
原创 入门篇2-Hive常用文件格式、压缩方式、分割符
压缩特性运用得当能提高性能，但运用不当也可能降低性能。CPU集型的job，少用压缩。IO密集型的job，多用压缩。
2023-07-02 17:51:16
260
原创 Hadoop单机 阿里云ecs服务器部署
Hadoop 阿里云ecs服务器部署一、Jdk安装二、Hadoop安装一、Jdk安装1.JDK1.8安装(查看是否已安装其他jdk,需先卸载)wget https://download.java.net/openjdk/jdk8u41/ri/openjdk-8u41-b04-linux-x64-14_jan_2020.tar.gz2.解压tar -zxvf openjdk-8u41-b04-linux-x64-14_jan_2020.tar.gz3.移动jar并重名mv java-se-8
2021-07-03 15:49:44
281
1
原创 Matplotlib入门07-饼图
饼图[2020年4月]1.饼图的作用饼图（pie chart）是用圆形及圆内扇形的角度来表示数值大小的图形，它主要用于表示一个样本（或总体）中各组成部分的数据占全部数据的比例。2.参数解释（只涉及常用参数）参数解释x要用饼图展示的数据。explode每一块饼图就圆心的位置，比例是半径的倍数labels每块饼图的名称colors设置颜色，这个是...
2020-04-29 22:18:45
515
原创 Matplotlib入门06-箱线图
箱线图[2020年4月]1、箱线图的功能01、直观明了地识别数据批中的异常值箱形图可以用来观察数据整体的分布情况，利用中位数，25/%分位数，75/%分位数，上边界，下边界等统计量来来描述数据的整体分布情况。通过计算这些统计量，生成一个箱体图，箱体包含了大部分的正常数据，而在箱体上边界和下边界之外的，就是异常数据。02、判断数据的偏态和尾重对于标准正态分布的大样本，中位数位于上下四分位数...
2020-04-16 23:04:46
1923
原创 Matplotlib入门05-直方图
直方图官方文档1.直方图在统计数据时，按照频数分布表，在平面直角坐标系中，横轴标出每个组的端点，纵轴表示频数，每个矩形的高代表对应的频数，称这样的统计图为频数分布直方图。作直方图的目的就是通过观察图的形状，判断生产过程是否稳定，预测生产过程的质量。2.绘制简单图形...
2020-04-13 23:48:34
145
原创 现学现卖之pandas-02数据的选择
数据的选择[2020年3月]1 Series AND Dataframe1 Series AND Dataframeseries是一个数据
2020-04-05 22:16:02
137
原创 matplotlib入门03-散点图
散点图[2020年03月]1 . 同样以气温变化作为样本数据。 每天最高温度： [10, 9, 8, 7, 9, 10, 15, 6, 11, 11, 16, 14, 12, 16, 18]2.开始做图，老规矩先做一个简单的图，然后逐渐优化#导入包 from matplotlib import pyplot as plt import numpy as np #先画一个简单的图...
2020-03-16 21:53:37
289
原创 Mac下MongoDB的安装
MongoDB安装1 、安装前的准备2、开始安装3、 启动这里采用官方给出的安装文档进行安装，版本4.2，没有自定义目录，因为采用官方的比较简单（我懂????）。1 、安装前的准备注意事项：MongoDB4.2仅支持MacOS10.12及以上版本。Install XCodexcode-select --installInstall Homebrew/bin/bash -c "$(cur...
2020-03-12 10:34:51
137
原创 numpy常用方法
numpy 的使用数据的加载#常用参数np.loadtext(frame,delimiter,dtype,skiprows,usecols,unpack)#egfile_path = ""np.loadtext(file_path,delimiter=",",dtype="int",skiprows=0,usecols=(0,),unpack=ture)参数注释...
2020-02-27 20:58:15
180
原创 Matplotlib入门-02折线图
折线图02书接上文01 修改颜色、粗细#绘制图形 只需要修改对应的参数就可修改这些属性plt.plot(x_ticks,y_temp_h,color='orange',lw = 2,linestyle = '-.',label = '最高温度')02 添加另外一条线#添加最低温度的线 plt.plot(x_ticks,y_temp_l,color='green',lw = 2,li...
2020-02-14 18:20:31
135
原创 历史天气信息数据爬取
北京市2020年1月份历史天气爬取视频教程（讲的阔以的）1 确定目标网址1.1 目标网址[2345天气]1.2 目标数据北京2020年一月份2 分析网页分析过程大家去看视频吧，讲的很好，现学现卖 ????3 爬取js文件爬取过程1.构造URL2.用requests获取js，处理成json样式，接下转换成标准的json3.用demjson转换成标准的json4.解析数据放入...
2020-02-13 21:02:32
2136
2
原创 SQL优化笔记
SQL优化笔记1.表的连接数2.exist 与 in 详解- in () 适合B表比A表数据小的情况 - exists() 适合B表比A表数据大的情况 - 当A表数据与B表数据一样大时,in与exists效率差不多,可任选一个3. “*”号尽量避免使用*，Oracle数据库中，数据库会先把*号解析为表中所有的列名，在这个过程中，会去查数据字典，这个过程会耗费一定的时间。4....
2020-01-16 15:54:10
320
原创 数据库SQL语句的执行
参考 https://www.cnblogs.com/XiaoZone/p/7851898.html； https://cloud.tencent.com/developer/news/254038；https://blog.csdn.net/somezz/article/details/84844581；DB2S数据库sql的执行顺序SQL的执行浅析基础SQL语句组成及书写顺序新的改变...
2019-08-12 18:44:20
658
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人