![](https://img-blog.csdnimg.cn/2019092715111047.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
老姜大数据
文章平均质量分 60
老姜大大数据
紫金小飞侠
这个作者很懒,什么都没留下…
展开
-
老姜--数仓基础进阶
数据中台数据统一接入 数据资源池 数据大盘接入情况数据规范处理 治理 集市 针对不同部门数据权限把控 质量监控数据统一应用 Bi报表展示、算法产生应用 比如推荐 用户画像 预警 图计算 关联整体信息技术部 来做个这个事情 。大数据架构Lambda架构Lambda架构算是大数据系统里面举足轻重的架构,大多数架构基本都是Lambda架构或者基于其变种的架构。Lambda的数据通道分为两条分支:实时流和离线。实时流依照流式架构,保障了其实时性,而离线则以批处理方式为主,保障了最终一致性。什么意原创 2021-08-01 20:14:04 · 187 阅读 · 0 评论 -
老姜 大数据金融项目
1大数据金融项目背景1.3商业智能(BI)的价值 出报告(非重点)1.行业报告2.竞争对手分析3.自我认知出报表1.直面领导层的数据展现(驾驶舱)2.为公司的发展提供数据决策支持3.数据驱动4.业务迭代5.风险管理(金融)1.4MIS与BISMIS偏向于出报表BIS 偏向于出报告2金融BI体系介绍2.1什么是BI可视化工作1.专职的前端团队2.使用一些开源/商业的BI工具BI是什么?1.BI本身是从数据采集到加工到展示的一系列的工作2.对于大数据来说,BI是数据组原创 2021-07-28 21:40:55 · 2163 阅读 · 0 评论 -
老姜-政务数据治理项目-数据治理实战
1. 数据分层介绍以及数据源梳理政务大数据治理数仓模型2.数据建模、数据模型mapping示例3. 主题层sql编写–来源系统:消防技术服务机构和注册消防工程师业务信息管理系统–来源表:std_xfyw_p_org_info,std_xfyw_p_org_qual_info,std_xfyw_p_org_reg_info,std_xfyw_p_org_register–1.取所有来源系统表机构信息进行汇总,按照机构代码,注册申请标识去重–2.按照注册申请标识进行关联获取注册信息和登原创 2021-07-25 22:58:34 · 1003 阅读 · 0 评论 -
老姜-政务数据治理项目-数据治理方法论
数据治理主要包含:数据接入数据处理数据治理数据组织1.数据接入主要包含:数据探查数据定义数据读取数据对账2. 数据处理主要包含:数据提取数据清洗数据关联1. 数据提取2. 数据清洗3. 数据关联3. 数据治理主要包含:质量管理运维管理资源编目分级分类1. 质量管理2.运维管理4. 数据组织主要分为:主题层专题层主题层专题层根据实际业务需求,从主题重抽取数据形成专题...原创 2021-07-25 20:15:10 · 801 阅读 · 1 评论 -
老姜大数据-数仓基础
第1章数仓概念数仓的特性面向主题传统的操作型系统是围绕组织的功能性应用进行组织的,而数据仓库是面向主题的。主题是一个抽象概念,简单地说就是与业务相关的数据的类别,每一个主题基本 对应一个宏观的分析领域。数据仓库被设计成辅助人们分析数据。例如,一个公司要分析销售数据,就可以建立一个专注于销售的数据仓库。集成集成的概念与面向主题是密切相关的。还用销售的例子,假设公司有多条产品线和多种产品销售渠道,而每个产品线都有自己独立的销售数据库。此时要想从公司层 面整体分析销售数据,必须将多个分散原创 2021-07-24 18:41:32 · 1147 阅读 · 3 评论 -
@SentinelResource 来指定出现限流和降级时候的异常处理策略
使用@SentinelResource注解实现限流 @GetMapping("/sentinel-resource") @SentinelResource(value = "test-sentinel",blockHandler = "handleException") public String byResource2(){ return "sentinel-resource"; } public String handleException(Blo原创 2020-08-06 13:52:22 · 1654 阅读 · 1 评论