archmagus-CSDN博客

原创 5. pandas案例：2015到2017年25万条911的紧急电话的数据分析

2015到2017年25万条911的紧急电话的数据分析 import numpy as np import pandas as pd import matplotlib.pyplot as plt 统计出出这些数据中不同类型的紧急情况的次数 data=pd.read_csv("./911.csv") data.head() data.shape (652692, 9) class_list=data[“title”].unique() len(class_list) 148 创建一个用于统计报警电话类型的0

2020-06-30 20:32:56 716

原创 3. pandas使用1

DataFrame的结构 import pandas as pd import numpy as np # 创建一个符合正态分布的10个股票的5天的涨跌幅数据 stock_change=np.random.normal(0,1,(10,5)) stock_change array([[ 1.76548834, -2.1033278 , -0.44765295, 1.6133684 , 0.56440317], [-0.28406163, 0.33190268, 0.15697

2020-06-30 20:29:43 110

原创 2. numpy的使用

import numpy as np numpy的基本操作 a = np.array([[1,2,3],[4,5,6]]) b = np.array([1,2,3,4]) c = np.array([[[1,2,3],[4,5,6]],[[1,2,3],[4,5,6]]]) print(a.shape) print(b.shape) print(c.shape) (2, 3) (4,) (2, 2, 3) a.dtype dtype('int64') a.itemsize...

2020-06-30 20:26:33 188

原创 1. Matplotlib使用

示例1.绘制原始折线图 # 展示上海市最近一周的天气 import matplotlib.pyplot as plt # 1. 创建画布 plt.figure(figsize=(20,8),dpi=80) # 2. 绘制折线图 plt.plot([1,2,3,4,5,6,7],[17, 17, 18, 15, 11, 11, 13]) # 3. 保存图片 plt.savefig("test.png") 示例2. 完善原始折线图 # 画出北京和上海11点到12点1小时内每分钟的温度变化折线图，温度范围在15

2020-06-30 20:21:03 2267

原创 4. pandas使用2

import pandas as pd import numpy as np 示例股票数据离散化 stock=pd.read_csv("/home/python/练习/stock_day/stock_day.csv") stock.head() open high close low volume price_change p_change ma5 ma10

2020-06-30 20:14:21 815

原创 HBASE实例开发学习

1、开发环境在进行Hbase开发前，需要安装JDK、Hadoop和HBase 注：以下代码中的版本信息需根据自己的安装环境进行修改。使用Maven构建项目，在pom.xml中添加hbase的依赖如下： cloudera https://repository.cloudera.com/artifactory/cloud

2016-10-23 22:18:34 280

转载 Hbase开发提高

首先需要安装配置HDFS和eclipse，此步骤可通过前面的博客查阅。运行此过程时可以考虑在eclipse中加入Hadoop插件对HDFS文件进行管理，此过程暂不做描述，可自行查找相关教程文档。 1. 通过终端开启Hadoop $ start-all.sh $jps 2. 打开eclipse，创建project，创建包和class 3. 导入jar包，Bui

2016-10-23 20:06:22 271

原创 HBASE原理笔记

1、 HBase简介 HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建大规模结构化的存储集群。HBase的目标是存储并处理大型数据，具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。与MapReduce的离线批处理计算框架不同，HBase是一个可以随机访问的

2016-10-16 13:07:40 1419

archmagus的博客