acumen_leo的博客

银行在日常生活中大家经常接触，但在柜台、ATM、手机银行等后面是一个庞大的系统在支持着银行的各项业务，那数据仓库作为银行的数据中心，具有什么样的作用和功能呢？

统计报表和数据分析平台是银行各部门及业务人员常用的两种分析方式，本节主要介绍这两种分析方式的重点功能和架构设计。

数据仓库作为全行数据中心能高效支持全行或全公司的统计 、数据分析工作，除了稳定的ETL架构、高效的数据处理能力，流畅的开发管理流程，还需要有全面的数据管理体系，确保提供的数据准确性和高质量。数据管理主要有数据标准，元数据和数据质量3方面。那数据治理是指对没有规范或者不符合规范的数据进行清理并建立标准和规范，那也是从这3方面着手。那这三方面的数据管理也是全行级的管理，并不仅仅限于数据仓...

银保监和央行作为银行的管理者，对银行提出了许多数据报送要求，监管报送的数据也是数据仓库重点的数据服务之一，涉及面广、报送类型多，本节简单介绍下各报送数据的内容，供大家了解。

本节主要介绍了巴塞尔新资本协议的内容以及在银行实施时的系统支持。数据仓库作为资本充足率等重要指标计算的数据源，高效稳定的数据服务是新资本协议相关指标和信息披露报表准确性和及时性重要保障。

整个系列的文章从银行数据仓库架构，ETL，模型，数据管理以及几大方面应用介绍了数据仓库，可以让大家对银行数据仓库有个概要的了解，但在各子系统设计，技术方面没有太深入介绍，后续也会陆续补充。作为这个系列文章的最后一节，简单谈谈对银行数据仓库发展的一些想法。数据仓库作为银行数据中心，在这个大数据时代也发挥了重要的作用，那随着银行业业务系统架构的演变，特别是目前目前银...

风险应用作为银行的主要数据应用之一，也是数据仓库重点支持的数据应用方向，本节主要介绍了银行信用风险防控中的模型建设步骤以及应用，供各位参考。

财务分析是每家公司或银行发展决策的重要依据，也是银行精细化管理适应市场竞争的重要手段，也是数据仓库重点支持的数据应用，本节主要介绍了主要的财务分析系统--管理会计以及所需要的数据支持。

精准营销是银行数据应用中最多样化、变化最快、需求最多的一部分，也是数据发现价值、数据支持业务发展有效体现。本节对主要的营销数据应用进行介绍。

数据仓库管理着整个银行或公司的数据，数据结构复杂，数据量庞大，任何一个数据字段的变化或错误都会引起数据错误，影响数据应用，同时业务的发展也带来系统不断升级，数据需求的不断增加，数据仓库需要不断的升级和维护，才能保证为全行提供持续完整准确的数据服务。所以数据仓库基本上是全行或全公司版本最多的系统，如何保证在频繁的变化中保证数据的准确和系统的稳定，需要数据仓库的开发管理必须做到高效、有条不...

建立多层次的数据访问服务体系，有力提升数据仓库的价值。基于指标汇总层、集市层、可以提供面向业务人员的即席数据查询、以及面向应用开发者的数据接口、应用访问接口，满足不同类型应用的需要。1、汇总指标层模型设计原则及步骤 1.1建设目标：汇总指标层也叫中间层，他提炼出对ODS具有共性的数据访问、统计需求，从而构建出的一个面向支持应用的、提供共享的数据访...

银行数据仓库有哪些部门组成，又各有什么功能，这些功能如何组合并形成一个整体实现银行数据的存储、计算、分析呢？本文从系统架构和技术实现角度进行了介绍，详见正文

狭义的数据仓库数据架构用来特指数据分布，广义的数据仓库数据架构还包括数据模型、数据标准和数据治理。即包含相对静态部分如元数据、业务对象数据模型、主数据、共享数据，也包含相对动态部分如数据流转、ETL、整合、访问应用和数据全生命周期管控治理。数据架构层面通过数据分类、分层部署等手段，从非功能性视角将数据合理布局。通过整体架构管控和设计，支持业务操作类和管理分析类应用（系统），满足业...

1、ETL和ELTETL是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合：E：抽取，从源系统(Souce)获取数据；T：转换，将源系统获取的数据进行处理加工，比如数据格式转化、数据精度转换、数据清洗、缺失数据补齐、异常数据排除等。L：加载，将数据加载到目标数据库(Target)。...

数据仓库作为全行或全公司的数据中心和总线，汇集了全行各系统以及外部数据，通过良好的系统架构可以保证系统稳定性和处理高效性，那如何保障系统数据的完备性、规范性和统一性呢？这里就需要有良好的数据分区和数据模型，那数据分区在第三部分数据架构中已经介绍，本节将介绍如何进行数据模型的设计。1、各数据分区的模型设计思路： 数据架构部分中提到了在数据仓库中主要分为以下区域，那...

主数据区域中保留了数据仓库的所有基础数据及历史数据，是数据仓库中最重要的数据区域之一，那主数据区域中主要分为近源模型区和整合（主题）模型区。上一节讲到了模型的设计流程如下图所示。那近源模型层的设计在第2.3和3这两个步骤中相对简化，模型表设计的结构同源系统的表结构，字段也一一映射即可。那下面以整合（主题）模型的设计步骤来进行介绍: 整合（主题）模型层主要按主题进行...

数据转换作业主要是指在数据仓库内的结构化数据批量加工，对于非结构化数据以及在线查询接口、数据流的开发主要是遵循代码开发规范以及各中间件的开发规范，如使用java来开发遵守java开发规范，使用Kafka需要遵循Kafka的使用和设计规范。同时做好组件的设计，提高复用程度和开发效率。这里就不再赘述，那对于批量加工数据各平台也有相应的开发规范，对于不同的平台有不同的规范，用来提高代码的...

调度系统是数据仓库的重要组成部分，也是每个银行或公司一个基础软件或服务，需要在全行或全公司层面进行规划，在全行层面统一调度工具和规范，由于数据类系统调度作业较多，交易类系统批量优先级高，为不互相影响可以和交易类系统独立分开，建2套调度环境。1，调度系统常见架构上图是一种常见的调度架构，它分为两个部分： （1）调度服务器集群作为调度中心...

随着计算机性能以及深度神经网络技术的发展，大数据概念的普及，AI成了最近几年投资界和互联网的风口，本文主要介绍了AI技术在银行的应用以及AI平台的主要功能。