数据仓库
文章平均质量分 58
码农服务社
这个作者很懒,什么都没留下…
展开
-
世界各个国家主要城市经纬度
世界各个国家主要城市经纬度原创 2024-03-06 14:46:56 · 2363 阅读 · 0 评论 -
【ETL】Kettle清洗任务异常提醒,Spoon作业异常通知
清洗作业如果挂在第三方任务平台或比较多的任务,执行失败无法跟踪,需要给任务添加异常提醒,这里用钉钉的群消息机器人。原创 2023-12-05 13:58:56 · 277 阅读 · 0 评论 -
【Kettle实战】字符串处理及网络请求JSON格式处理
经过大量的kettle操作实践,我们会渐渐掌握一些技巧,大大减轻清洗的工作量。比如在哪里,处理字符串更方便,在哪儿处理更合理都是一个取舍问题。原创 2023-11-20 20:57:30 · 338 阅读 · 0 评论 -
【Kettle实战】数据分批处理及参数化传递子作业任务
数据分批处理及参数化传递子作业任务原创 2023-11-13 18:34:15 · 582 阅读 · 0 评论 -
【BI看板】superset api接口分析
superset 的图表功能已经非常强大了,但是要满足个性化需求,定制是比不可少的了。。。来吧,我们一起看看他的API。原创 2023-10-25 12:56:12 · 480 阅读 · 0 评论 -
【数据仓库】Linux、CentOS源码安装Superset
Linux、CentOS源码安装Superset步骤,遇到的各种问题。原创 2023-08-24 18:21:11 · 898 阅读 · 0 评论 -
【BI看板】Docker-compose安装Superset,安装最新版本2.1.0
【BI看板】Docker-compose安装Superset,安装最新版本2.1.0原创 2023-08-16 18:05:26 · 744 阅读 · 0 评论 -
【数据仓库】Apache Hive初体验
为什么使用Hive?使用Hadoop MapReduce直接处理数据所面临的问题:人员学习成本太高需要掌握ava语言MapReduce实现,复杂查询逻辑开发难度太大!1,使用Hive处理数据的好处操作接口采用类SQL语法,提供快速开发的能力(简单、容易上手)避免直接写MapReduce,减少开发人员的学习成本支持自定义函数,功能扩展很方便。背靠Hadoop,擅长存储分析海量数据集原创 2023-07-28 15:50:57 · 592 阅读 · 0 评论 -
【数据仓库】Windows源码安装DataEase,DataEase二次开发
【数据仓库】Windows源码安装DataEase,DataEase二次开发原创 2023-07-12 00:08:34 · 3906 阅读 · 4 评论 -
【数据仓库】BI看板DataEase入坑指南
开头夸夸国产开源BI软件DataEase,支持常见各种报表,还支持图表联动和上下级钻取,超赞有木有!!!再来为什么说入坑,源码启动各种不服啊。本地用的maven3.5一直导入不了Java项目backend。后来看了官网bilibili源码启动视频,搞了1个多小时。原创 2023-07-11 17:01:03 · 2352 阅读 · 3 评论 -
【数据仓库】数据仓库稳定性保障实践
数据仓库稳定性保障实践,核心链路数据准确率:全年>=99,45%(2次/年);快发现:核心链路问题(主动发现)时间原创 2023-07-05 18:18:28 · 172 阅读 · 0 评论 -
【数据仓库】FineBI数据可视化使用体验
【数据仓库】FineBI数据可视化使用体验原创 2023-07-05 17:39:27 · 1734 阅读 · 0 评论 -
【数据仓库】Apache Doris介绍
Apache Doris介绍原创 2023-07-04 20:31:16 · 965 阅读 · 0 评论 -
【Kettle实战】Kettle分组求和,按时间分组求和,时间字段格式化
分组求和在数据层是很简单数组分析方法,在kettle里面也有类似的功能。SQL里面的分组功能还是比较强大的,在这里可需要用到一些特殊处理。原创 2023-06-29 21:15:00 · 921 阅读 · 0 评论 -
【BI数据可视化】Docker部署metabase
Docker部署metabase,使用 Metabase 可以大大节省成本,简单易上手,Metabase 把数据分析常用的查询通过一个个易于操作的界面呈现,非常适合不懂SQL的业务人员使用,只需要点几下鼠标,就可以快速得出一个直观的可视化的数据报表。原创 2023-06-20 10:44:54 · 1494 阅读 · 0 评论 -
【MySQL】MySQL主从同步失败Slave_IO_Running: No与 Slave_SQL_Running: No。MySQL主从同步修复
最近在学习MySQL集群,主从集群,多主多从,负载Haproxy,高可用Keepalived。MySQL主从同步失败Slave_IO_Running: No与 Slave_SQL_Running: No。MySQL主从同步修复原创 2023-06-13 17:54:06 · 611 阅读 · 0 评论 -
【数据仓库】常用数据集成工具对比
【数据仓库】常用数据集成工具对比原创 2023-06-08 10:44:49 · 214 阅读 · 1 评论 -
Superset-Windows开发环境安装
13. superset-frontend\webpack.config.js (修改如下 如图一)5. Microsoft Visual C++ 14.0 环境安装 (安装完重启一次)4. cd superset (进入superset目录 看你放在哪的)8. superset fab create-admin(创建用户 )11. cd superset-frontend(进入前端文件)6. pip install -e . (安装本地依赖)1. 安装node.js。2022年1月15日。原创 2023-06-01 21:06:42 · 839 阅读 · 1 评论 -
【Kettle实战】作业和转换任务文件
Kettle作业和转换任务文件的保存原创 2023-05-31 15:58:19 · 223 阅读 · 0 评论 -
【BI数据可视化】Superset绘制地图,ISO 3166-2 CODES国家城市编码,中国地图
BI数据可视化,Superset绘制地图,需要关联国家编码。ISO 3166-2 CODES国家城市编码,中国地图.原创 2023-05-31 00:05:03 · 1090 阅读 · 0 评论 -
【ETL实战】kettle分批读取大表数据
【ETL实战】kettle分批读取大表数据,发现kettle非常占用内存,排查服务器资源情况,发现是polkitd进程原创 2023-05-27 13:04:14 · 1695 阅读 · 1 评论 -
【BI数据可视化】使用Docker快速部署Superset
使用Docker快速部署Superset原创 2023-05-25 18:03:50 · 916 阅读 · 1 评论 -
【ETL实战】Kettle多任务嵌套子任务和转换
Kettle多任务嵌套子任务和转换原创 2023-05-24 18:15:12 · 874 阅读 · 0 评论 -
【ETL实战】Kettle学习实践之基本数据转换和过滤
Kettle学习实践之基本数据转换和过滤原创 2023-05-24 16:57:10 · 764 阅读 · 0 评论 -
企业数据仓库搭建学习之二-分层架构
数据仓库分层框架,介绍ODS,DIM,DWD,DWS,ADS各个分层的计算和存储框架分析原创 2023-05-23 20:11:42 · 49 阅读 · 0 评论 -
企业数据仓库搭建学习之一-数据仓库知识汇总
企业数据仓库搭建学习,数据仓库介绍,与传统数据库对比。常见的数据仓库产品原创 2023-05-23 00:48:07 · 109 阅读 · 0 评论