- 博客(85)
- 资源 (1)
- 收藏
- 关注
原创 数睿通2.0更新:数据指标 / 指标模型 / AI 建指标
这些数据,最终要沉淀成什么样的业务指标?过去很多项目里,指标建设往往分散在报表、SQL、临时口径文档、业务人员和开发人员的反复沟通中。大家都知道“指标体系很重要”,但真正落地时,又很容易变成一件成本很高、协作链路很长的事情。这次数睿通 2.0 围绕“数据指标”做了一轮比较完整的补充:新增指标管理、指标模型、宽表生成、刷新调度、执行记录,并接入 AI 创建能力,希望让指标从“口径讨论”更顺畅地走向“可管理、可执行、可复用”的数据资产。
2026-05-06 10:11:47
348
原创 数睿通2.0更新:数据接入支持TDengine,新增数据任务链,即席查询优化
这次更新既有新能力(TDengine 接入、任务链、即席查询归类与导出),也有体验优化(cron 配置与手动构建),更有面向生产环境的稳定性增强(定时任务自愈、跨库语法兼容)。如果你正在使用平台进行数据接入、数据生产与即席分析,这些改动会体现在日常工作的细节里:更容易找到要用的查询、更顺畅地导出交付、更清晰地编排任务、更稳定地跑调度,以及更少因数据库差异踩坑。
2026-02-13 15:12:41
572
原创 数睿通智库系统正式发布:企业级 AI 知识与应用平台
面向业务人员:像聊天一样提问,得到可追溯的答案面向管理员:可管理的知识库、模型、权限、租户面向交付与运维:支持私有化与容器化部署,环境可控、成本可控它的主要模块包括:模型管理、知识库管理(含文档管理与问答管理)、AI 对话、AI 智能体、AI 工具集(ComfyUI/LLaMA-Factory 入口)、可视化工作流编排、系统管理(租户/用户/角色/菜单/存储等)。首发版本不是终点,而是一个可以持续被“喂养、被优化、被复用”的起点。
2026-01-27 17:14:43
661
原创 数睿通2.0升级:支持docker一键部署,升级flink版本,更新操作手册,优化数据开发、数据权限
更快把环境搭起来:系统包 + 组件包按需组合,一键跑通核心流程;更顺畅地接入业务系统:业务库新增 PostgreSQL / Kingbase 兼容支持;更放心地把作业跑起来:Flink 1.18/2.0.1 与 SeaTunnel 2.3.11 完成适配;更有底气把平台开放给更多业务角色使用:表/字段级权限与脱敏策略覆盖到数据生产。欢迎在实践中持续给我们反馈,你遇到的每一个问题和想法,都会成为平台下一次迭代的起点。以上便是本次更新的主要内容了,这些改进都来源于用户的实际需求和反馈。
2026-01-18 13:27:10
1288
3
原创 数睿通2.0更新:添加AI助手、提供BI接口案例、优化现有功能
背景:使用的场景中,若存在同步阻塞或任务互相等待,容易出现公共池饥饿与卡住。引入自定义(区分 IO 密集与 CPU 密集场景),配置核心/最大线程数、队列与拒绝策略。使用命名线程工厂与监控指标,便于排查与容量评估。在等并发工具中显式传入自定义执行器,避免隐式落入公共池。},new ThreadPoolExecutor.CallerRunsPolicy() // 高峰期降级,保障任务不丢AI 助手:通用会话助手上线;
2025-12-03 10:05:59
1019
原创 数睿通2.0升级:数据血缘优化重构,业务库支持达梦
本次2.0版本更新主要解决了用户反馈的关键问题,在技术架构、功能完善、性能优化等方面都有所改进。我们将继续根据用户需求和技术发展趋势,持续优化产品功能和用户体验。源码可用于二开商用,但不可直接或经过修改后公开销售源码,数睿通 2.0 数据中台版权归天津数睿通科技有限公司所有,违规者将追究其法律责任!感兴趣的朋友请关注公众号 螺旋编程极客 加入星球,我们一起成长,一起进步。
2025-09-16 10:20:44
746
原创 数睿通2.0 ETL 全面优化升级,让数据流动更智能
提取(Extract):从各种数据源获取数据转换(Transform):对数据进行清洗、整理、加工加载(Load):将处理后的数据存储到目标系统想象一下,您的企业每天产生大量的销售数据、客户信息、财务记录,这些数据分散在不同的系统中,格式各异。ETL 就像一个智能的数据管家,帮您把这些 “散乱” 的数据收集起来,整理成统一的格式,最终形成有价值的商业洞察。
2025-06-24 17:22:17
1382
原创 数睿通2.0数据接入升级——支持增量字段同步,表单独映射
本次更新内容就是这些了,看上去不多,但背后也是付出了很多的劳动,希望平台以后能越做越好,给大家的工作带来便利。下个版本会优先更新自研数据血缘页面,完善数据标签,有时间的话会支持 excel,api 等非结构化的数据集成,这几个功能呼声较高,优先考虑,平台后期打算跟 AI 结合,争取让现有功能变得更加智能,强大,任重而道远!
2024-03-08 17:34:45
1292
1
原创 数字化转型必备:数睿通 2.0 数据中台升级详解
本次中台的新功能介绍就到此结束了,目前系统大体的模块该有都有了,剩下的就是不断完善打磨了,希望大家可以继续支持。目前源码,部署指南,讲解视频等相关资料是付费获取的,价格相比其他同系列的产品连个零头都不到,可以说是非常良心了。我创建了一个知识星球,星球内可以获取到数睿通 2.0 的最新源码资料等,功能发布之后也会第一时间分享。感兴趣的朋友请关注公众号螺旋编程极客加入星球,我们一起成长,一起进步。
2023-08-29 09:30:00
3593
3
原创 数睿通2.0功能发布—集成Doris、数仓动态配置、质量任务完善、接入速度优化
本次中台的新功能介绍就到此结束了,目前数据资产和数据集市尚处于开发之中,由于各种因素影响,开发进度比预计的慢了一个多月,纸上得来终觉浅,绝知此事要躬行,数据中台并不是一蹴而就的东西,需要细细打磨,耐心思考,才能开发出它应有的价值,需要不断完善,不断优化才行。目前源码,部署指南,讲解视频等相关资料是付费获取的,价格相比其他同系列的产品连个零头都不到,可以说是非常良心了。我创建了一个知识星球,星球内可以获取到数睿通 2.0 的最新源码资料等,功能发布之后也会第一时间分享。感兴趣的朋友请关注公众号。
2023-06-27 20:30:00
1060
原创 数睿通2.0数据服务功能模块发布
现在平台已经具备了拉数,造数,供数的能力,剩下需要开发的模块还有数据治理,数据资产和数据集市,预计五月底整体可以基本开发完毕,之后便会对系统做进一步的优化完善,提升交互和使用体验,更好的服务业务,创造更大的价值。目前源码,部署指南,讲解视频等相关资料是付费获取的,价格相比其他同系列的产品连个零头都不到,可以说是非常良心了。
2023-02-27 09:18:35
1665
原创 新年快乐—数睿通2.0数据中台全新功能模块发布
离上次发文已经有接近三个月了,这三个月主要在开发数睿通的数据生产模块,同时优化了一下数据集成,目前已经基本开发完毕了,集成了 Flink,Hadoop,可以在线开发 FlinkSql 作业任务,同时支持 Sql 任务开发,使平台初步具备了拉数,造数的能力,正值新年,在这里给大家拜年了,祝大家新年快乐!
2023-01-23 13:31:28
3426
原创 精品分享—数睿通ETL异构数据库迁移工具(支持集成开发)
今天分享一款非常实用的异构数据库迁移工具,可以进行多种常见数据库之间的数据或结构迁移,相比于其他的数据迁移工具,它还支持字段索引,默认值,字段约束的信息同步,mysql 的主键递增等,支持基于正则表达式转换的表名与字段名映射转换。同步方式分为全量和增量同步两种类型,同步算法借鉴了 kettle 的数据同步算法,支持手动和定时执行。
2022-08-22 09:06:54
5883
6
原创 精品源码分享:基于 SpringCloud 和 Vue 的企业一站式数据治理中台
精品源码分享:基于 SpringCloud 和 Vue 的企业一站式数据治理中台
2022-05-05 09:00:00
4032
2
原创 Apache Atlas精讲:由浅入深,从概念,原理,使用,到自定义数据模型,生成血缘关系,带你玩转Atlas
Apache Atlas精讲:由浅入深,从概念,原理,使用,到自定义数据模型,生成血缘关系,带你玩转Atlas
2022-04-20 08:30:00
33697
11
原创 精品分享:基于 SpringBoot + Vue 开发的云盘系统(含大文件断点续传剖析)
基于 SpringBoot + Vue 开发的云盘系统,为用户提供一个简单、方便的文件存储方案,快来围观吧!
2022-03-16 09:00:00
5437
2
原创 双十一大放送:深入了解性能提升大杀器—缓存
文章目录引言缓存的使用缓存雪崩、缓存穿透、缓存击穿问题缓存数据一致性问题分布式锁小结引言在我们平时的开发工作中,对于一些复杂的业务接口可以通过优化业务逻辑来增加接口的吞吐量,但在更多时候,简单的优化业务逻辑,调节系统参数仍然无法满足性能提升的要求,为了系统性能的提升,我们选择将部分数据放入缓存当中,数据库则主要承担数据落盘的工作,合理,正确的使用缓存可以极大的提升系统的性能,大幅提升接口的响应速度!下面就让我们一起深入了解性能提升大杀器—缓存。缓存的使用缓存固然香,但绝不是万金油,盲目为了提升性能而
2021-11-11 09:00:00
1298
原创 Java代码生成器codeMan重磅更新——添加权限管理模块生成功能,实现动态菜单和按钮级别的权限控制
前言转眼又过去了两个多月,时间就像一个隐形的精灵,总是在不经意间从眼皮底下溜走,不知不觉已经8月底了,金九银十近在眼前,不知道小伙伴们有没有跳槽的打算呢?相信此时你的心中已经有了自己的答案。闲言少叙,经过周末加上今天上午的赶工,终于把代码生成器更新了一版,这次更新虽然在界面上只是加了一个添加权限管理的radio,但背后的工作却一点不少,先让我们一起来看一下效果吧。实现效果推荐大家通过idea插件的方式来使用代码生成器,不容易出现问题。因为exe是我用ikvm把Java代码编译成dll,然后使用visu
2021-08-30 17:03:23
869
1
原创 Lucene还可以这样玩?SpringBoot集成Lucene实现自己的轻量级搜索引擎(附源码)
文章目录前言Lucene为什么查的快前言哈喽,大家好,我是丸子。搜索引擎想必大家都并不陌生,比如百度,谷歌都是常见的搜索引擎。在我们实际的项目开发中,也经常遇到类似的业务需求,比如公司要开发一个知识库项目,知识库里有上百万条文章,要求我们能够输入关键字,查询出包含有关键字的文章内容,并且对关键字进行高亮处理,显示查询后的最佳摘要,这个时候传统的数据库LIKE查询虽然能勉强满足业务需求,但是查询速度令人无法忍受,这个时候就需要借助搜索引擎来进行处理。在Java开发领域,Lucene可以算是开山鼻祖,
2021-04-10 21:13:00
1985
1
原创 Nginx+FFmpeg打造自己的视频直播服务(超级全面)
文章目录引言安装yasm和FFmpegnginx安装nginx-rtmp-module模块修改nginx配置FFmpeg转流推流代码实现自动转流前台利用video.js播放视频流结语引言现在很多项目都有视频实时播放的功能需求,例如监控,直播等,原始的摄像头采集的视频流协议一般都是rtsp协议,在旧版的浏览器中使用FLASH可以支撑其进行播放,但是现在各大主流浏览器都关闭了对FLASH的支持,这就需要我们把rtsp转为浏览器支持的http,业务体量很大的公司一般会把这种事情委托给专业的第三方公司去做,但很
2021-03-31 09:05:02
6263
原创 Springboot代码生成器V2.21版本更新——升级相关依赖版本、加入全局响应处理、使用注解控制登录和日志记录等
文章目录前言全局跨域配置添加控制登录和日志记录的注解响应统一处理swagger优化其他更新生成的代码展示结语前言生成器下载地址:http://www.zrxlh.top:8088/coreCode/.源码地址:https://gitee.com/zrxjava/codeMan由于工作和生活等多方面的影响,半年多没有更新博客,代码生成器也没有继续维护,后来不断有朋友发私信催我更新,并且提出相关的优化建议,今天终于得空把生成的代码根据朋友们的建议整体改良了一下,以后我也会尽量保持健康的更新速度,希望可以
2021-01-10 19:21:01
535
2
原创 五分钟带你搞懂线程池的线程复用原理
前言公众号有一个多月没更新了,主要是因为刚换了工作,需要适应一下新环境,另外新公司正好赶上了几个比较忙的项目,每天晚上到家就比较晚了,实在是分身乏术,不过该更新还是要更新滴,不然也对不起关注我的粉丝们,今天就来讲一下线程池的复用原理吧,希望能对你有所帮助!线程池的作用及创建方式提起线程,相信大家并不陌生,它可以帮助我们异步处理任务,提高CPU的利用率。在平时的开发中我们通常会利用线程池来创建和使用线程,这样我们可以对线程进行重复利用,避免频繁创建线程带来的内存开销,它会自动帮助我们对线程资源进
2020-06-25 11:10:06
2628
原创 Java代码生成器加入postgresql数据库、HikariCP连接池、swagger2支持!
前言 最近几天又抽时间给代码生成器增加了几个新功能,目前已全面支持postgresql数据库,HikariCP连接池和swagger2,顺便讲解一下postgresql和mysql的区别,HikariCP和Druid的区别以及swagger2的使用方法,不然就没东西写啦,没错,我就是来水文的!让我们一起看一下吧。PostgreSql VS MySql Mysql相信大家都再熟悉不过了,体...
2020-04-29 11:12:56
1259
1
原创 体积虽小,功能不少!SSM/SpringBoot代码生成器新增idea插件支持,安装到idea可直接使用!
前言 开发代码生成器到现在,取得了一些关注,我感到十分荣幸,最近有不少朋友反应说代码生成器如果能安装到idea中就好了,那样用起来将会十分方便,既然这样,只有满足各位!之前没有开发过idea插件,所以今天找了个demo看了一下,发现跟安卓很像,所以很快便开发完成了,让我们一起看一下吧!顺便讲一下开发idea插件相关的入门知识,因为我发现这类的教程实在是少的可怜。idea插件开发入门 就拿...
2020-04-24 23:34:01
620
原创 SSM/SpringBoot代码生成器全面升级—增加全新前后端分离响应式主题,修复若干Bug
文章目录前言功能清单运行效果最新版生成的代码结构及页面展示推荐源码的查看方式源码运行方式生成后代码的运行方式结语前言代码生成器从开发到现在已经接近一年,虽然实际的开发时间不过几个月,但还是从中学到了很多,包括软件运营模式,服务器维护等,虽然目前使用人数并不多,大概1000人左右吧,但还是满满的成就感,看到每天公众号零星增长的粉丝数,我就知道自己的努力终究没有白费。开发之初只是为了方便自己,功能...
2020-04-21 18:33:35
2278
1
原创 建站难?史上最全指南 — 教你使用WordPress搭建出属于自己的站点!
文章目录引言购买服务器购买域名解析域名部署WordPress安装nginx服务器安装PHP运行环境新建个人站点下载并安装WordPress安装主题网站备案SSL证书(HTTPS)页面伪静态网站类型选择结语引言 很多朋友都想拥有自己的个人网站,但事实如果自己从头搭建出一个网站却需要花费不少的功夫,尤其是前台,这对于我们后台开发人员是硬伤,所以这时候自然要借助第三方建站系统,wordpress就...
2020-04-08 23:42:33
2136
原创 代码生成器最新获取方式
代码生成器的服务器今天过期了,换了一个服务器,想要使用的朋友可以通过以下方式获取: 网页地址:点击前往 git地址:点击前往 百度网盘: 链接:https://pan.baidu.com/s/1g-QTi_FEFmkTCuija8JORA 提取码:ijte 代码生成器支持mac和window平台,可以根据实际需要自行下载。 附最新版的几张图:...
2020-03-27 14:47:21
652
1
原创 【Java代码生成器】SpringBoot、SSM代码生成器功能更新,源码全开放
引言 代码生成器一直有在断断续续的更新,只是由于时间关系没能一直坚持写博客,但每天依然有朋友前去下载关注,对此我感到十分荣幸,源码已经全部开放至码云,感兴趣的朋友可以去文末链接自行提取查看,同时今天更新了几个小功能,让我们一起看一下吧。全局异常处理 增加了全局异常处理模板:allExceptionHandler.ftl,代码很简单,相信熟悉SpringBoot的朋友一眼就能看明白:pa...
2020-03-24 15:24:29
640
1
原创 代码生成器——开放源代码
文章目录引言推荐源码的查看方式运行方式运行效果相关链接引言 开发代码生成器已经有比较长一段时间了,一直也在断断续续得更新和维护,使用人数每天也有零星的增长。生成器开发之初,主要是为了方便自己,后来发布到网上,没想到有人使用。而且提出建议,就这样一步步走到现在。今天决定把生成器的源码开放出去,发布到码云上(链接在文末),有兴趣的朋友可以去下载查看,或者提出修改建议,不胜感激。推荐源码的查看方...
2020-02-26 16:24:12
1648
原创 微服务热点之幂等性问题解决方案
文章目录引言何为幂等性如何解决幂等问题token校验乐观锁唯一主键去重表总结引言 受到疫情的影响,很多企业都采用了在家办公的方式,希望疫情可以早点结束,这样我们就可以拥抱美好的春天了。言归正传,今天我们来对微服务中的热门问题: 幂等性 来进行探究。何为幂等性 在开发的过程中,我们常常听到 “保证接口幂等” 这样的话,从字面角度理解即接口在多次调用的情况下,最终返回的结果是一致的。但我认...
2020-02-17 18:19:35
1501
原创 使用netty自定义协议,手撸一个RPC框架
文章目录RPC概述RPC调用流程说明RPC实现思路RPC编码实现创建公共接口服务提供方代码实现服务消费方代码实现测试小结RPC概述 RPC(Remote Procedure Call)— 远程过程调用,是一个计算机通信协议。该协议允许运行于一台计算机的程序调用另一台计算机的子程序,而程序员无需额外地为这个交互作用编程。两个或多个应用程序分布在不同的服务器上,它们之间的调用都像是本地方法调用一...
2020-01-20 16:11:15
1203
原创 JVM专题系列——类装载器代码级介绍;手撸一个简易热加载器
文章目录概述装载验证流程加载链接验证准备解析初始化类加载器ClassLoader双亲委派机制证明类是自顶向下加载的破坏双亲委派机制案例:手撸一个热加载器小结概述 本篇博客来介绍一下类装载器,即ClassLoader,它跟我们程序的运行密切相关,通过了解其装载流程和工作机制有利于我们对Java本身有更加深刻的理解。装载验证流程加载 加载是装载类的第一个阶段,它会取得类的二进制流,将字节...
2020-01-15 18:19:12
576
原创 使用netty手撸一个简易http服务器
文章目录netty概述netty架构模型手撸一个http服务器pom.xml引入netty编写netty服务端运行测试小结netty概述 netty是基于java NIO封装的一款网络编程框架,可以帮助我们便捷,快速的开发网络应用程序,例如有名的dubbo框架就是基于netty实现的RPC远程服务调用。netty封装了NIO大部分的底层操作,所以需要我们对NIO有一定的了解才能更好的掌握ne...
2020-01-13 17:12:53
2125
原创 安全框架Shiro十分钟极速入门——springBoot整合Shiro实现认证+授权
摘要 在平时的日常开发当中,系统的认证和授权等安全相关的业务是必不可少的一部分,很多公司都是自己简单的造个轮子或者面向过程编程,导致相关的业务逻辑分散,不利于相关模块的扩展和维护,所以本篇博客将介绍一款常用的安全框架,可以帮助我们集中管理相关逻辑,让代码更加规整简洁,利于维护。目前市面上常用的安全框架主要有两种,apacher的Shiro和spring的Spring Security,Shir...
2020-01-05 02:10:52
810
2
原创 jvm专题系列——详解垃圾回收器、常用jvm参数、性能监控工具以及调优案例
文章目录摘要jvm垃圾回收器摘要 本篇博客接着jvm专题系列—详解垃圾回收机制及其算法讲解,看懂此篇博客需要你对jvm内存结构,垃圾回收机制和算法有一定了解,所以推荐没有了解的朋友可以先看一下上篇jvm的博客,大神请无视。言归正传,有了充实的理论基础,便要开始运用于实践当中,本篇博客主要讲解jvm垃圾回收器的分类和选择,常用jvm参数,性能监控工具以及调优实战,带你一步步揭开jvm的神秘面纱...
2020-01-03 00:58:52
1015
原创 java代码生成器集成dubbo,springcloud详解以及微服务遐想
摘要 今天终于有了点空闲时间,所以更新了一下代码生成器,修复了用户反馈的bug,本次更新主要增加了dubbo和springcloud脚手架的下载,架子是本人亲自搭建,方便自由扩展或者小白学习使用,你也许会问为什么它们不能像springboot一样通过配置的方式生成项目,我只能回答:理论上是可以的,以后有时间会摸索可行之道,但是我觉得微服务框架业务复杂多变,不如直接使用脚手架自由扩展,所以目前是...
2019-12-28 02:35:30
1083
3
code_generator.zip
2020-03-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅