1.TDengine介绍

官网简介:

TDengine是涛思数据专为物联网、车联网、工业互联网、IT运维等设计和优化的大数据平台。除核心的快10倍以上的时序数据库功能外,还提供缓存、数据订阅、流式计算等功能,最大程度减少研发和运维的复杂度,且核心代码,包括集群功能全部开源(开源协议,AGPL v3.0)。

  • 10 倍以上性能提升。定义了创新的数据存储结构,单核每秒就能处理至少2万次请求,插入数百万个数据点,读出一千万以上数据点,比现有通用数据库快了十倍以上。
  • 硬件或云服务成本降至1/5。由于超强性能,计算资源不到通用大数据方案的1/5;通过列式存储和先进的压缩算法,存储空间不到通用数据库的1/10。
  • 全栈时序数据处理引擎。将数据库、消息队列、缓存、流式计算等功能融合一起,应用无需再集成Kafka/Redis/HBase/Spark等软件,大幅降低应用开发和维护成本。
  • 强大的分析功能。无论是十年前还是一秒钟前的数据,指定时间范围即可查询。数据可在时间轴上或多个设备上进行聚合。即席查询可通过Shell/Python/R/Matlab随时进行。
  • 与第三方工具无缝连接。不用一行代码,即可与Telegraf, Grafana, EMQ X, Prometheus, Matlab, R集成。后续还将支持MQTT, OPC, Hadoop,Spark等, BI工具也将无缝连接。
  • 零运维成本、零学习成本。安装、集群一秒搞定,无需分库分表,实时备份。标准SQL,支持JDBC,RESTful,支持Python/Java/C/C++/Go/Node.JS, 与MySQL相似,零学习成本。

-----------------------------------------------------------------------------------------------------------------------------------------------------------------

文档:

文档

TDengine 是一个高效的时序数据存储、查询、分析平台。它是专为物联网、车联网、工业物联网、IT基础设施和应用监控等而设计和优化的。它的工作原理类似于关系数据库,如MySQL,但强烈建议您在体验之前通读以下文档,尤其是数据模型和数据建模部分。除了本文档,您还应该下载并阅读我们的技术白皮书。对于较旧的 TDengine 1.6 版文档,请单击此处。

TDengine简介

入门

整体架构

数据建模

TAOS SQL

  • 数据类型:支持timestamp、int、float、nchar、bool等类型
  • 数据库管理:添加、删除、检查数据库
  • 表管理:添加、删除、检查、更改表
  • STable 管理:添加、删除、检查、更改 STables
  • 标签管理:添加、删除、更改标签
  • 插入记录:支持每表写单项/多项,跨表多项,支持写入历史数据
  • 数据查询:支持时间段、值过滤、排序、查询结果手动分页等
  • SQL Function:支持各种聚合函数、选择函数和计算函数,如avg、min、diff等
  • 时间维度聚合:按时间段对表数据进行聚合和降维
  • 边界限制:对库、表、SQL 等的限制
  • 错误代码:TDengine 2.0 错误代码及对应的十进制代码

高效的数据摄取

  • SQL 摄取:通过 SQL 插入命令将一条或多条记录写入一个或多个表中
  • Prometheus Ingestion:配置Prometheus直接写入数据,无需任何代码
  • Telegraf Ingestion : 配置 Telegraf 直接写入收集的数据,无需任何代码
  • EMQ X Broker : 配置 EMQ X 直接写入 MQTT 数据,无需任何代码
  • HiveMQ Broker : 配置 HiveMQ 直接写入 MQTT 数据,无需任何代码

高效的数据查询

高级功能

  • 连续查询:基于滑动窗口,定期自动查询和计算数据流
  • 数据发布者/订阅者:像典型的消息传递系统一样订阅新到达的数据
  • Cache : 每个设备/表新到达的数据都会被缓存
  • 告警监控:自动监控超限数据,根据配置规则主动推送

连接器

  • C/C++ 连接器:通过 libtaos 客户端库连接到 TDengine 服务器的主要方法
  • [Java Connector(JDBC)]:使用JDBC API从Java应用程序连接到服务器的驱动程序
  • Python 连接器:用于从 Python 应用程序连接到 TDengine 服务器的驱动程序
  • RESTful 连接器:一种通过 HTTP 与 TDengine 交互的简单方法
  • Go Connector:用于从 Go 应用程序连接到 TDengine 服务器的驱动程序
  • Node.js 连接器:用于从 Node.js 应用程序连接到 TDengine 服务器的驱动程序
  • C# 连接器:用于从 C# 应用程序连接到 TDengine 服务器的驱动程序
  • Windows Client : 编译你自己的 Windows 客户端,这是 Windows 环境下各种连接器所需要的

与其他工具的连接

  • Grafana:查询TDengine中保存的数据并提供可视化
  • MATLAB : 通过在 MATLAB 中配置的 JDBC 访问存储在 TDengine 服务器中的数据
  • R : 通过 R 中配置的 JDBC 访问存储在 TDengine 服务器中的数据
  • IDEA 数据库:通过 IDEA 数据库管理工具直观地使用 TDengine

TDengine集群的安装与管理

TDengine运维

TDengine技术设计

  • 【系统模块】:taosd功能和模块划分
  • 【数据复制】:支持实时同步/异步复制,保证系统高可用
  • 技术博客:更多技术分析和架构设计文章

常用工具

性能:TDengine 对比其他

更多关于物联网大数据

常问问题

--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

关于时序数据库的概念,请参考下面的文章:

时序数据库概念

-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

阅读后理解:

我们在进行物联网数据开发过程中,会发现很多数据使用传统数据库存储已经无法满足需求,这个时候我们会考虑到使用大数据技术来解决大数据的问题。

然而在实际过程中,大数据有很多中间件,但是集成起来会遇到很大的技术成本,数据查询操作成本在离线情况下并不能做到实时查询千万条数据。

由此TDengine应运而生。

TDengine说是大数据平台,更多的是时序数据库的功能。包括时序数据的存储,查询,分析。其本身具备了大数据,流式处理,队列,缓存,时序数据库,集群功能等多种功能。

其架构简单来讲,是服务器和客户端的架构。

一般情况下,Linux下安装服务端,windows安装客户端。

所以安装和部署,也应该分为两部分:

1.Linux下的服务器端的安装部署

2.windows下的客户端的安装部署。

源码下载与源码开发环境的搭建:

由于是java语言开发,GitHub托管,所以直接使用idea即可下载源码,

1.项目在GitHub托管,java语言开发

2.源码下载地址:

https://github.com/taosdata/TDengine/

3.idea gitclone项目到本地

4.前置条件:jdk8,git,maven安装成功

方式:略

但我们正常不是在源码的基础上开发,而是基于项目,开发业务代码,进行时序数据的增删改查,分析统计等。

那么需要创建对应的项目。引入时序数据库的连接文件。

这个和连接mysql是一个思路。

具体不详解。操作sql语句,应该也差不多。

在启动服务上之后创建数据库语句:

systemctl start taosd//启动服务
taos//打开数据库
create database edenginedb;
use edenginedb;

实际 的项目中

需要引入jar包,如下:

<!-- https://mvnrepository.com/artifact/com.taosdata.jdbc/taos-jdbcdriver -->
<dependency>
    <groupId>com.taosdata.jdbc</groupId>
    <artifactId>taos-jdbcdriver</artifactId>
    <version>2.0.30</version>
</dependency>

https://mvnrepository.com/artifact/com.taosdata.jdbc/taos-jdbcdriver/2.0.30

参与评论 您还未登录,请先 登录 后发表或查看评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
©️2022 CSDN 皮肤主题:博客之星2020 设计师:CSDN官方博客 返回首页

打赏作者

水上冰石

赠人玫瑰手有余香

¥2 ¥4 ¥6 ¥10 ¥20
输入1-500的整数
余额支付 (余额:-- )
扫码支付
扫码支付:¥2
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值