炎凰数据平台2.10发布 | 多查询节点（Beta版）；开箱即用的 Syslog 采集页面配置；仪表板展示和交互优化

最新推荐文章于 2023-12-12 09:21:37 发布

炎凰数据

最新推荐文章于 2023-12-12 09:21:37 发布

阅读量533

点赞数

文章标签：数学建模 java 服务器

本文链接：https://blog.csdn.net/Yhpdata888/article/details/131174798

版权

芒种已过，夏至未至。初夏时节，我们很高兴为大家带来炎凰数据平台企业版 2.10.0 和社区版（鸿鹄）2.10.0 的最新发布，企业版和社区版的大部分功能保持一致。每一次的版本更新都离不开您的使用反馈和宝贵建议，炎凰数据期待新版本能够给您带来更佳的使用体验。

01. 查询分析

新增多查询节点（BETA 版）功能，提升并发查询性能
选择性索引读取，提升选择性低的查询性能
Json 解析加强，新增表函数 parse_json_kv_table 等

02. 数据导入

开箱即用的 Syslog 采集页面配置

03. 可视化

仪表板展示和交互大幅优化：丰富主题颜色选项，单值图和富文本图表集中优化等
预存查询页面提供状态信息

04. 系统

内置的审计概览仪表板

查询分析

| 多查询节点支持 (multi-searcher support, BETA 版)

我们现已引入了一个新的计算部署拓扑结构，包括一个 broker 节点和多个 worker 节点。这将允许您更好地分布计算负载并提高查询性能。

Broker 节点：Broker 节点负责接收来自客户端的 SQL 查询请求，解析查询并将其分发给某一 Worker 节点以进行实际计算。这使得系统可以更有效地管理和分发查询任务。
Worker 节点：Worker 节点用于执行实际的计算任务。您可以根据需要增加 Worker 节点的数量，以便轻松地横向扩展系统并支持更多的并发查询。

| 新增选择性索引读取功能

新增选择性索引读取 (selective index reading) 功能，能够提高字段索引访问效率，提升选择性低的范围查询或者模式匹配条件查询的性能。

| Json 解析加强

新增表函数 parse_json_kv_table (text)，可将 text 对应的 json 字符串的第一层键值对解析成字段的值，分别对应 key 和 value 两个默认字段。

样例查询语句：

查询结果：

使用 parse_json_kv_table，可实现对具有动态键（Dynamic Key）的 json 数据的解析。
样例数据和查询语句：

解析结果：

| 优化对一维及多维 json 数据的解析

表函数 parse_json()，新增参数 array_mode 和 max_depth，优化对一维及多维 json 数据的解析。

array_mode：控制 json 中数组的解析行为，可选模式有merge_nested（默认）和 flatten_nested（遇到值类型为数组的字段会停止展开）。
max_depth：控制 json 解析的深度，默认为不受限制。

| 新增标量函数

SQRT：计算一个数的平方根
CIDR_MATCH：检查一个 IP 地址是否匹配指定的 CIDR 地址块
TYPEOF: 返回一个表达式的数据类型

| 支持通过SQL语法读取和设置系统变量

支持通过 SQL 语法读取和设置系统变量，助您便捷地了解系统配置并按需调整。

样例：查看与查询相关的变量

| 对视图、物化视图等数据目录新增 comment on（注释）语法

对视图、物化视图和表函数等数据目录新增 comment on（注释）语法，便于您更好地记录和理解资源的用途。同时视图的创建和列表页面也会提供注释选项。

数据导入

| 新增 Syslog 数据采集页面配置

新增 Syslog 数据采集页面配置，开箱即用，简化了之前繁琐的配置流程。您可在“数据导入”页面，选择并新建 Syslog 数据源，指定接收 Syslog 的监听端口和协议类型，以及数据导入的目标数据集和数据源类型；在上游 Syslog 数据源端，配置发送相关日志到炎凰数据平台的 IP 地址和端口；轻松开启 Syslog 数据接收。

Syslog 数据采集页面配置

| 优化数据集管理的设计

优化数据集管理的设计：优化“禁止导入“、“删除数据集”功能的逻辑，提示信息更清晰。数据集容量新增 1GB 的最小设置。