物联网IOT时序数据库influxdb(2.x)

物联网IOT时序数据库influxdb(2.x)

1.简介

InfluxDB是开源时序型数据库，由Go写成，不过可惜的是开源的只有单机版，InfluxDB在集群方面闭源收费了，想大规模应用请引起注意。时序数据库经常应用于机房运维监控、物联网IoT设备采集存储、互联网广告点击分析等基于时间线且多源数据连续涌入数据平台的应用场景，InfluxDB专为时序存储而生，尤其是在工业领域的智能制造。由清华大学开源的IOTDB也是一款面向物联网的时序数据库，现在是apache旗下的顶级项目，未来潜力无限。

InfluxDB在DB-Engines的时序数据库类别里排名世界第一，国内的TDengine排名第14，Apache IotDB目前排名第20。

2.InfluxDB相关概念

• Database：InfluxDB可以创建数据库，一个数据库可以包含多个user、保存策略、schemaless ，支持随时灵活创建mersurement
• Measurement：相当于表的概念；
• Tags：是一些kv的结构，标签会被用来建立索引；
• Fields：是保存真实数据的结构，也是kv结构，但是不会被用来建立索引；
• Point： 代表了一条记录，可以理解为关系型数据库中的一条记录；
• Timestamp：既然InfluxDB被称之为时序数据库，少了时间是不可能的，每条记录必须要有一个时间戳；
• Series：是由Measurement+Tags组成的

3.InfluxDB安装

3.1 本地安装

添加yum源

cat <<EOF | tee etc/yum.repos.d/influxdb.repo

[influxdb]

name = InfluxDB Repository - RHEL \$releasever

baseurl = https://repos.influxdata.com/rhel/\$releasever/\$basearch/stable

enabled = 1

gpgcheck = 1

gpgkey = https://repos.influxdata.com/influxdb.key

EOF

安装 Telegraf Influxdb

yum -y install telegraf influxdb

启动软件

systemctl start influxdb
systemctl start telegraf

3.2 docker容器方式

官方的安装文档：https://docs.influxdata.com/influxdb/v2.1/install/?t=Docker

创建一个新目录来存储数据，然后导航到该目录

mkdir -p /mysoft/influxdb/influxdb-docker-data-volume && cd $_

在主机文件系统上生成默认配置文件

docker run \
  --rm influxdb:2.1.1 \
  influxd print-config > config.yml

再重新启动InfluxDB 容器

docker run -p 8086:8086 --name influxdb2 \
  -v $PWD/config.yml:/etc/influxdb2/config.yml \
  -v $PWD:/var/lib/influxdb2 \
  -d influxdb:2.1.1

4.设置 InfluxDB

运行成功后，在浏览器登录：http://127.0.0.1:8086/

第一次登录，输入账号密码等初始化信息

• organization(组织),简称org
  organization 是一组用户的工作空间，一个组下用户可以创建多个bucket

• bucket(桶)
  所有的 influxdb数据都存储在bucket中，bucket结合了数据库和保存期限（每条数据会被保留的时间）的概念，类似于RDMS的database的概念。bucket属于一个organization

当然也可以通过命令行的方式进行初始化

[influxdb]$ influx setup \> --username dbadmin \> --password mypna123 \> --host http://localhost:8086 \> --org userservice-org \> --bucket userredis-identity \> --retention 21900h \> --force

5.常用操作

查看所有用户

root@ce039e2603b8:/# influx user list
ID                      Name
09822514674b9000        dba

查看当前客户端配置

root@ce039e2603b8:/# influx config
Active  Name    URL                     Org
*       default http://localhost:8086   brddmorg
root@ce039e2603b8:/#

查询所有的bucket

root@ce039e2603b8:/# influx bucket list -o brddmorg
ID                      Name            Retention       Shard group duration    Organization ID         Schema Type
efc7ed5f1b8651ae        _monitoring     168h0m0s        24h0m0s                 ade0829bb3f73d60        implicit
9d4179049d56cb17        _tasks          72h0m0s         24h0m0s                 ade0829bb3f73d60        implicit
98fd2ef6dbae8047        bucketa         infinite        168h0m0s                ade0829bb3f73d60        implicit

新增bucket

root@ce039e2603b8:/# influx bucket create --name test
ID                      Name    Retention       Shard group duration    Organization ID         Schema Type
8704034ab5701f0a        test    infinite        168h0m0s                ade0829bb3f73d60        implicit
root@ce039e2603b8:/#

数据写入

#数据内容
myMeasurement,tag1=value1,tag2=value2 fieldKey="fieldValue"

influx write \
  -b test \
  -o brddmorg \
  -p ns \
  'myMeasurement,tag1=influx-cli,tag2=influx-cli fieldKey="influx-cli"'

数据查询
InfluxDB2.x新增了语法查询数据：Flux，InfluxDB1.x只支持InfluxQL。
Flux是一种功能性数据脚本语言，旨在将查询、处理、分析和对数据的操作统一为一个语法。每个Flux查询需要以下步骤：

1、数据源；

2、时间范围；

3、数据过滤器。

root@ce039e2603b8:/# influx query
from(bucket: "test")
    |> range(start: -15m)
    |> yield(name: "results")
root@ce039e2603b8:/# influx query
from(bucket:"test")
    |> range(start: -1d)
    |> filter(fn: (r) => r.tag1== "influx-cli")
Result: _result
Table: keys: [_start, _stop, _field, _measurement, tag1, tag2]
                   _start:time                      _stop:time           _field:string     _measurement:string             tag1:string             tag2:string                      _time:time           _value:string
------------------------------  ------------------------------  ----------------------  ----------------------  ----------------------  ----------------------  ------------------------------  ----------------------
2022-06-12T14:16:10.054365576Z  2022-06-13T14:16:10.054365576Z                fieldKey           myMeasurement              influx-cli              influx-cli  2022-06-13T13:50:59.393464863Z              influx-cli
root@ce039e2603b8:/#