自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

原创 Apache IoTDB 系列教程-5:常见问题汇总(1)

在过去的一段时间,收集了不少大家在使用过程中反馈的问题,今天把一些常见问题列出来,给更多人提供参考。开了个交流群二维码,可以扫码进群。正文 1974 字,预计阅读时间 5 分钟。扫码进群...

2020-07-06 16:06:47 27 0

原创 Apache IoTDB 发布 0.10.0!

经历了半年的时间,0.10.0 大版本终于发布了!下面来看看这个版本的功能吧~正文 2652 字,预计阅读时间 7 分钟。发布手册参考:https://raw.githubusercon...

2020-06-30 19:00:00 47 0

原创 Apache IoTDB 系列教程-4:客户端接口

说了半天语法和部署运维,实际使用还是要落到代码里的,今天介绍一下客户端的接口。正文 3516 字,预计阅读时间 5 分钟。现在的客户端和服务器通信采用了跨语言的 RPC 框架 Thirf...

2020-06-21 19:44:13 56 0

原创 Apache IoTDB 系列教程-3:部署运维

今天介绍 IoTDB 的部署运维相关知识,帮助大家玩转 IoTDB!正文 1859 字,预计阅读时间 5 分钟。开箱即用IoTDB 的理念就是系统运维要简单,要一键启动、开箱即用。就从启...

2020-06-15 15:00:00 43 0

原创 Apache IoTDB 系列教程-2:基础 SQL 操作

今天主要介绍常用的 SQL ,包括对元数据和数据的增删改查,本文的sql都是基于 0.10.0 的,这个大版本马上发布!正文 11018字(大部分是 sql 和打印信息,汉字不多),预...

2020-06-06 20:30:00 116 6

原创 Apache IoTDB 系列教程-1:数据模型

大家周末快乐!随着最近项目落地,0.10.0 即将发布,准备写一系列教程,今天第一篇,介绍 IoTDB 的数据模型和建模方式。正文 2855 字,预计阅读时间 8 分钟。什么是时序数据?...

2020-05-31 15:55:10 122 0

原创 IoTDB Can not establish connection

IoTDB客户端连接不到服务器 Required field ‘statusCode’ was not present 解决方法 以上连接问题是客户端和服务器版本不一致导致的。确保程序中 pom 中的版本,iotdb 服务器的版本,或者 cli 的版本,都属于同一个大版本。 目前 0.8.x 、...

2020-05-21 15:15:23 73 0

原创 Apache IoTDB 发布 0.9.3!

很久没有写文章了,一直在搞开发,趁着这次版本发布来写一篇。0.9.3 是一个小版本,没有动文件结构和 rpc,可以无痛升级。其实之前新发布了一个0.9.2,不过又发现一个比较严重的bug...

2020-05-16 17:06:30 87 0

原创 JProfiler CPU views中无线程

问题 JProfiler 启动之后 CPU views 中没有想监控的线程。 解法 左上角 Session Settings -> 右边的 + 号 -> Add profiled package or class 在新增的监控项上写上包名就行了。 ...

2020-03-22 13:08:22 89 0

原创 Latex 增加通讯作者邮箱标志

\usepackage[misc]{ifsym} 在作者名字后边加这个 $^{(\textrm{\Letter})}$ 就出来这个小邮件了:

2020-02-21 20:46:14 2267 0

原创 漫游 Apache IoTDB 2019

虽然学校已经放假了,还是要做个年度总结的,不然本小编有点良心不安。今年 IoTDB 是飞速发展的一年,有很多值得记录的,下面一起回顾一下物联网时序数据库 IoTDB 的 2019吧!~正...

2020-01-23 11:05:51 850 3

原创 Apache IoTDB 荣获2019年度最受欢迎中国开源软件!

感谢大家的大力支持!经过快一个月的投票,Apache IoTDB 荣获 2019年度最受欢迎中国开源软件。在由开源中国社区在深圳科兴科学园国家会议中心主办的《OSC源创会·年终盛典》上进...

2019-12-17 09:51:53 496 0

原创 IoTDB 通过大数据产业生态联盟认定并获“优秀大数据产品”称号

2019年12月,“清华数为物联网数据库IoTDB”在由大数据产业生态联盟、联盟大数据与产品质量保障工作组、中国软件评测中心组织的专业评审活动中被评为“优秀大数据产品”,并获得大数据基础设施类产品认定证书。据悉,包括IoTDB在内,本次评审共选出6项优秀大数据产品。 清华数为物联网数据库 IoT...

2019-12-10 22:28:47 213 0

原创 Apache IoTDB 0.9.0 发布啦!

万众期待的 0.9.0 终于发布了! 正文 1493 字,预计阅读时间 4 分钟。 下载使用 直接下载地址: https://mirrors.tuna.tsinghua.edu.cn/apache/incubator/iotdb/0.9.0-incubating/apache-iotdb-...

2019-12-02 13:01:28 510 11

原创 将博客搬至CSDN

将 IoTDB漫游指南 公众号文章搬过来

2019-11-26 11:58:58 94 0

原创 BibTex 网页引用出现 [n.d.]

编译出来 Reference 出现 [n.d.] [1] NOAA Global Surface Summary of the Day Weather Data. [n.d.]. https://cloud.google.com/bigquery/docs/dataset-gsod 我是网页里边...

2019-11-18 15:46:09 543 0

原创 Apache IoTDB “硬实力”——从 PLC 采集到 Spark 分析实物展示台

Apache IoTDB 已经在很多物联网系统中得到了应用。为了让大家理解工业物联网的时序数据是如何采集、存储、查询分析,并进行可视化。我们做了一个IoTDB展示台,这是一个 IoTDB 在实际应用中功能的缩小版,展示了 IoTDB 管理物联网时序数据的几种常见场景。 正文 1978 字,预计阅...

2019-11-17 13:24:04 458 0

原创 Apache IoTDB 0.8.1 发布啦!

我又回来啦!这段时间 IoTDB 发布了两个版本,0.8.0 和 0.8.1,其中 0.8.1 是一个bug修复版。今天主要带大家上手使用 IoTDB,清华自研物联网时序数据库。 正文 1430字,预计阅读时间 4 分钟。 发布版下载 IoTDB 的 Apache 正式版从 0.8.0 开始...

2019-10-26 13:13:30 134 0

原创 IoTDB 系统找不到指定的路径 解决方法

问题描述 在 windows 启动 IoTDB 客户端出现 “系统找不到指定的路径” 问题 原因 启动脚本里是这么写的, 一般是这句话出的问题: "%JAVA_HOME%\bin\java" %JAVA_OPTS% -cp "%CLASSPATH%" %M...

2019-10-18 14:33:59 157 0

原创 IDEA 导入 IoTDB 源码并编译

IoTDB 是清华大学软件学院自研时序数据库,全国高校首个进入apache的项目。 github网址: https://github.com/apache/incubator-iotdb 克隆项目 git clone https://github.com/apache/incubator-iotd...

2019-08-14 09:55:59 1775 2

原创 ORC 查询流程

ORC 文件格式 ORC 文件分成多个 Stripe,每个 Stripe 里包括这个文件所有列的一部分数据,每个 Stripe 中的各个列的点数都一样,是可以对齐的。 只在 RowGroup 层做过滤,每个 RowGroup 默认有 10000 行元组。过滤完一个 RowGroup 就都读出来了。...

2019-05-17 20:50:14 382 0

原创 Parquet 编码方式

虽然 Parquet 的文档里写了很多编码方式 (https://github.com/apache/parquet-format/blob/master/Encodings.md ),但实际上 Parquet 只支持两种编码:Delta Encoding,Dictionary Encoding。...

2019-05-16 18:55:01 693 5

原创 Parquet 查询流程

总体流程:根据用户给定的 Filter,先对文件中所有 RowGroup (Block) 过滤一遍,留下满足要求的 RowGroup。对这些 RowGroup 中涉及到的所有 Chunk 都读出来,对其中的 Page 一个一个解压缩,拼成一个一个 Record,再进行过滤。 细节: 不管一个 p...

2019-05-15 21:14:19 759 0

原创 Grafana通过rest添加dashboard并访问url

目标 配置 Grafana,允许匿名访问 通过 rest 接口注册 dashbord 获取 dashbord url 进行可视化 mac 安装配置 安装 brew update brew install grafana 配置匿名访问:/usr/local/etc/grafana/gra...

2019-04-23 22:07:16 3521 2

原创 ORC 文件层 API 读写

参考:https://codecheese.wordpress.com/2017/06/13/reading-and-writing-orc-files-using-vectorized-row-batch-in-java/ 目标: orc 各种数据类型写入 orc 查询,带过滤条件,带投影 ...

2019-04-06 15:55:19 1513 4

原创 Ubuntu 安装 TimescaleDB

卸载 postgresql 如果之前用 apt 装过,可以清掉 sudo apt-get --purge remove postgresql\* sudo rm -Rf /etc/postgresql /var/lib/postgresql 安装 PostgreSQL 和 TimescaleDB...

2019-03-27 16:16:33 557 0

原创 Tranquility 写入数据到 Druid

需求 启动一个单机版 Druid 直接通过一个客户端写一些数据进去,不通过其他 kafka 或者 批量导入之类的 调研出来的方案 启动 Druid + tranquility Druid+Tranquility 快速启动:http://druid.io/docs/latest/tutori...

2019-03-19 15:14:23 1700 0

原创 tar 批量解压多层目录文件

需求 tgz 文件存放在多层目录中 想解压到另一个位置,不影响当前文件夹 例子 类似这种目录结构 ./compressed_data/2011/01/01/file1.tgz ./compressed_data/2012/02/02/file2.tgz ./compressed_data...

2019-03-16 16:14:03 1670 0

原创 Cassandra 安装配置

官网下载 https://cassandra.apache.org/download/ 配置 conf/cassandra.yaml cluster_name: 'QJL Cluster' # 需要写 ip,尽量别用 hostname - seeds: "192...

2019-03-14 21:35:17 165 0

原创 Kairosdb 安装配置

下载 下载解压1.2.2:https://github.com/kairosdb/kairosdb/releases KairosDB 靠 Cassandra 做分布式,自己是单机客户端。 配置 官方文档:http://kairosdb.github.io/docs/build/html/Gett...

2019-03-14 13:26:42 666 0

原创 Google Cloud Storage下载数据

以这个为例 https://console.cloud.google.com/storage/browser/archive-measurement-lab/utilization/ 安装 gsutil https://github.com/GoogleCloudPlatform/gsutil 下...

2019-03-12 17:58:28 3401 0

原创 Storm 单机、集群安装部署

下载:http://storm.apache.org/downloads.html 单机配置 官方文档:http://storm.apache.org/releases/current/Setting-up-a-Storm-cluster.html 注意 storm.yaml 每个属性名前和冒号后...

2019-03-11 13:15:37 239 0

原创 HBase 分布式安装部署

下载:https://www.apache.org/dyn/closer.lua/hbase/ 配置 先配 hadoop,启动好,主节点 192.168.10.17:9000 conf/hbase.env.sh export JAVA_HOME=/usr/lib/jvm/java-8-orac...

2019-03-11 12:59:57 155 0

原创 Zookeeper 安装部署

下载解压:https://www.apache.org/dyn/closer.cgi/zookeeper/ mv ./conf/zoo_sample.cfg ./conf/zoo.cfg tickTime=2000 initLimit=10 syncLimit=5 // 数据、日志目录 da...

2019-03-11 12:46:40 177 0

原创 OpenTSDB 安装流程

依赖环境 A Linux system (or Windows with manual building) Java Runtime Environment 1.6 or later HBase 0.92 or later GnuPlot 4.2 or later HBase 安装 https:...

2019-03-05 16:57:07 498 1

原创 Google BigQuery 数据集下载示例

https://cloud.google.com/bigquery/public-data/ 描述 A public dataset collected by National Climatic Data Center, which contains the daily climatic da...

2019-03-05 14:40:49 11570 1

原创 Hbase 单机安装部署

下载:https://www.apache.org/dyn/closer.lua/hbase/ 配置项 conf/hbase-env.sh export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_112.jdk/Contents/...

2019-03-04 14:59:54 257 0

原创 SummaryStore导入IDEA

SummaryStore来自这篇文章: 《Low-Latency Analytics on Colossal Data Streams with SummaryStore》 安装步骤 git clone git@github.com:ayvee/summarystore.git cd su...

2019-03-02 09:00:35 157 0

原创 IoTDB 招实习生啦

清华大学软件学院,大数据系统软件国家工程实验室数据库团队,招募实习生同学。 团队介绍 清华大学软件学院、大数据系统软件国家工程实验室欢迎本科生、研究生前来实习。数据库团队目前主要进行时间序列数据库、分布式数据库的研发和应用。团队自研的时间序列数据库 IoT...

2019-02-28 15:38:06 918 0

原创 Time Series Management Systems: A Survey

今天分享一篇时序数据库Survey,《Time Series Management Systems: A Survey》,2017 年 TKDE 的。作者Søren K...

2019-02-25 19:46:02 166 0

提示
确定要删除当前文章?
取消 删除