压力测试工具

1.siege a.安装 $ wget http://download.joedog.org/siege/siege-latest.tar.gz $ tar -xvf siege-latest.tar.gz $ cd siege-4.0.4/ $ ./configure $ make &...

2019-02-20 11:47:32

阅读数 23

评论数 1

git

1.远程与本地冲突 git pull origin error: Your local changes to the following files would be overwritten by merge: recallctr-topology.iml src/...

2019-02-18 19:55:51

阅读数 18

评论数 0

opentsdb加kerberos认证

1.编辑启动脚本 cat start_tsdb.sh OPENTSDB_HOME=/data/opentsdb JVMARGS="${JVMARGS} -Djava.security.auth.login.config=${OPENTSDB_HOME}/jaas.conf -D...

2019-02-15 11:42:37

阅读数 75

评论数 0

flink 学习笔记资料

1.https://blog.csdn.net/yanghua_kobe/article/category/6170573 2.http://www.54tianzhisheng.cn/tags/Flink/ 3.https://blog.csdn.net/liguohuabigdata/arti...

2019-01-02 10:40:39

阅读数 74

评论数 0

hbase 数据迁移

#!/bin/bash #hbase org.apache.hadoop.hbase.mapreduce.Import -Dimport.wal.durability=SKIP_WAL namespace:tablename /user/tjoffline/hbase_export_tablen...

2018-12-27 18:32:29

阅读数 57

评论数 0

hbase Filter使用

背景 昨天同事反馈hbase查询返回无数据了,查了下返回RowTooBigEXcepiton,初步看是value过大导致?以为是有异常数据写入,我们hbase设计上一个列族,然后对应每个时间分片会通过动态列会记录时间分片类的数据指标,每天查询的时候通过rowkey +时间窗户, get返回对应...

2018-11-01 19:03:47

阅读数 135

评论数 0

hbase-2.1.0 源码阅读-2

接着上篇 我们看看在hmaster //hbase 继承自HRegionServer public class HMaster extends HRegionServer implements MasterServices //HRegionServer继承自 HasThread public ...

2018-10-15 19:57:31

阅读数 88

评论数 0

hbase-2.1.0 源码阅读

1.Hmaster启动 用了这么久的hbase,今天开始着手hbase方面的源码阅读 2.1.0版本刚发布不久,是Hbase 2.x系列的第二次版本。旨在提高 HBase 的稳定性和可靠性,主要更新内容如下: 基于 Procedure v2 的复制对等修改 串行复制 最小 Hadoop 版本已更改...

2018-10-11 15:50:59

阅读数 304

评论数 0

hive 使用技巧

1.抽样 从一个表中随机抽样得到一个不重复的数据样本, 随机取样 SELECT * FROM <Table_Name> DISTRIBUTE BY RAND() SORT BY RAND(...

2018-10-10 12:06:45

阅读数 171

评论数 0

hive如何使用json格式的数据

查看当前hive支持的json函数 show functions like "*json*"; OK get_json_object json_tuple Time taken: 0.006 seconds, Fetched:...

2018-09-26 14:12:09

阅读数 548

评论数 0

Java 快速排序

Java 快速排序 https://arxiv.org/pdf/1511.01138.pdf

2018-09-18 13:17:05

阅读数 36

评论数 0

python 消费 kafka 数据

1.安装python模块 pip install --user kafka-python==1.4.3 如果报错压缩相关的错尝试安装下面的依赖 yum install snappy-devel yum install lz4-devel pip install python-snapp...

2018-09-11 16:53:58

阅读数 876

评论数 0

mac python 多版本管理

https://youjiexia.github.io/2017/05/01/Installing-Python27-and-Python36-Concurrently/

2018-08-20 17:03:12

阅读数 398

评论数 0

opentsdb+hbase+grafana

hbase 监控 https://blog.bcmeng.com/post/hbase-monitor.html http://www.54tianzhisheng.cn/2017/10/21/HBase-metrics/ grafana 1.表的读写qps hbase metric ...

2018-08-03 15:54:42

阅读数 376

评论数 0

python 操作hive pyhs2

使用kerberos时 import pyhs2 class HiveClient: # 初始化 def __init__(self, db_host, user, password, database, port=10000, authMechanism=&q...

2018-07-25 18:17:37

阅读数 779

评论数 0

kylin 新版 dashbard 功能开启

1.在 kylin.properties 中将一下配置开启 kylin.server.query-metrics2-enabled=true kylin.metrics.reporter-query-enabled=true kylin.metrics.reporter-job-enable...

2018-07-17 20:18:35

阅读数 389

评论数 0

cassandra 笔记

数据迁移 第一次使用cassandra,笔记一下,业务迁移,有两列数据没有迁移到新平台,特此实验,研究一下 查看db DESCRIBE KEYSPACE 查看表 DESCRIBE TABLES 查看表信息 DESCRIBE tablename 创建测试表 CREA...

2018-07-12 17:22:07

阅读数 175

评论数 0

idea中git的使用

1.将项目添加到git中

2018-05-24 10:32:11

阅读数 2965

评论数 0

hive1.2.1 分区表 增加列显示为null 问题

1.问题 hive中增加字段 发现之后之后添加的数据正常,之前数据无法读取 问题修复: 查找hive元数据的分区字段边 SDS MySQL [hive]> SELECT * FROM SDS WHERE location LIKE '%video_te...

2018-04-26 13:54:20

阅读数 133

评论数 0

kylin 开源可视化工具 superset使用

superset + kylin 1.superset 和kylin 连接问题 使用kylinpy pip install kylinpy 在kylin.py 增加解决下拉列表问题 @compact_response() def list_schemas(self): ...

2018-03-31 14:21:32

阅读数 882

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭