藏知阁

好记性不如烂笔头

回归模型评价指标RMSE、MSE、MAE、MAPE、SMAPE

RMSE 均方根误差(Root Mean Square Error) MSE 均方误差(Mean Square Error) MAE 平均绝对误差(Mean Absolute Error) MAPE 平均绝对百分比误差(Mean Absolute Percentage Error) ...

2019-02-21 10:50:31

阅读数 4

评论数 0

使用XGBoost进行时间序列预测流程代码

原始数据 也就是两列数据,一列是时间,一列是电力消耗量: Datetime,PJME_MW 2002-12-31 01:00:00,26498.0 2002-12-31 02:00:00,25147.0 2002-12-31 03:00:00,24574.0 2002-12-31 04...

2019-02-20 21:52:01

阅读数 3

评论数 0

Python生成requirements.txt文件

参考 使用自带pip $ pip freeze > ./requirements.txt 这种方法缺点是会把环境中所有安装的包都包括进来。 使用pipreqs包 安装 $ pip install pipreqs 在项目根目录下,使用 $ pipreqs...

2019-02-20 11:55:01

阅读数 8

评论数 0

Redis入门

常用命令 哨兵服务器 连接 $ ./redis-cli -h 192.168.0.1 -p 8001 查看信息 $ 192.168.0.1:8001> info # Server redis_version:2.8.19 redis_git_s...

2019-02-19 18:09:01

阅读数 4

评论数 0

使用Impyla连接Hive

依赖: sasl-0.2.1 six-1.12.0 thrift-0.11.0 thrift-sasl-0.3.0 安装sasl时报错:sasl/saslwrapper.h:22:10: fatal error: sasl/sasl.h: No such file or direct...

2019-02-18 15:50:40

阅读数 1

评论数 0

Python多进程多线程详细剖析

主要涉及的模块: threading multiprocessing concurrent.futures

2019-02-15 13:46:19

阅读数 7

评论数 0

使用PyHive连接Hive数据仓库

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask. Cannot initialize Cluster. Please check your configuration ...

2019-02-13 15:26:22

阅读数 5

评论数 0

TensorFlow笔记——常用运算函数解析

1. 矩阵乘法 tf.matmul(a, b, transpose_a=False, transpose_b=False, adjoint_a=False, adjoint_b=False, a_is_sparse=False, b_is_sparse=False, name=None) 函...

2019-02-12 16:51:15

阅读数 19

评论数 0

Pandas各种骚操作

找出NaN值的位置: df.isnull().stack()[lambda x: x].index.tolist()

2019-01-08 20:28:39

阅读数 17

评论数 0

论文解读—Deep Multimodal Hashing with Orthogonal Regularization

占坑

2018-12-19 14:39:41

阅读数 22

评论数 0

Docker常用命令

# docker build # docker build -t prediction-api . 镜像管理 保存和加载 # docker save -o myimage.tar myimage # docker load myimage....

2018-11-09 11:17:57

阅读数 72

评论数 0

使用Supervisor和Gunicorn部署Flask应用入门

最简单的Flask Web应用: myapp.py from flask import Flask app = Flask(__name__) @app.route('/') def index(): return 'Hi! It works!' if __nam...

2018-11-09 11:08:47

阅读数 197

评论数 0

Hive之常用运算符和函数

用户手册 日期函数 int datediff(string enddate, string startdate) 返回从startdate到enddate的天数。 例子: hive> select datediff('2009-0...

2018-11-07 14:17:03

阅读数 62

评论数 0

HBase入门基本:命名空间、建表、增删改查

进入HBase数据库 # hbase shell 注意HBase Shell 中的回格键没用,要用【Ctrl+Backspace】,每个命令之后不需要分号(;)结束。 HBase帮助命令: hbase&am...

2018-11-02 16:14:08

阅读数 1555

评论数 0

Hive优化

set hive.groupby.skewindata=true; 当HQL语句中有GROUP BY时,默认情况下,Hive将具有相同分组键的数据放入同一个Reducer。如果分组键的不同值具有数据倾斜,则一个Reducer可能会获得大部分数据,与其他Reducer相比,这个Reducer需...

2018-09-29 15:36:56

阅读数 36

评论数 0

Hive中多种新建表方式

最基本的建表语句: create table student( id string comment '学号', name string comment '姓名', sex string comment '性别', age string comment '年龄' ) comment '学...

2018-09-27 15:58:50

阅读数 200

评论数 0

Ubuntu 18.04 Anaconda使用

Anaconda官网下载 学过Python的估计都知道virtualenv可以用来创建Python的虚拟环境,然而它的一个缺点是难以指定Python的确切版本,比如电脑只安装了Python 3.6,那我们就只能以Python 3.6为基础环境,然后安装任意版本的第三方包。 Anacon...

2018-09-11 11:28:58

阅读数 1158

评论数 0

Gurobi之Python调用实例——简单整数规划

一个简单的整数规划问题: maxs.t.x+y+2zx+2y+3z≤4x+y≥1x,y,zbinary(78)(78)maxx+y+2zs.t.x+2y+3z≤4x+y≥1x,y,zbinary\begin{equation} \begin{aligned} & max &...

2018-09-10 23:46:26

阅读数 1128

评论数 0

大数据基本组件(Hadoop、HDFS、MapRed、YARN)入门命令

HDFS、MapRed、YARN是Hadoop大数据的基础组件,安装好Hadoop之后,这些组件自然包含在里面。 正常安装Hadoop之后,通常可以通过环境变量$HADOOP_HOME知道Hadoop的安装位置: $ echo $HADOOP_HOME 切换到Hado...

2018-08-28 09:41:44

阅读数 149

评论数 0

[LeetCode] 01 Matrix

题目: 01矩阵 思路: 首先想到的就是穷举遍历的方法了,不过穷举也有点规律。 我们以矩阵中的一个1为例,如下图,有颜色的的格子的数字表示距离,每一层也都是正方形,只不过这个正方形旋转了45°。 麻烦的地方在于数组下标的确定,对于每一层,可以先确定上下左右4个点,然后根据上点和下点确...

2018-04-28 10:22:14

阅读数 66

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭