- 博客(24)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 TensorFlow深度学习（2）深度学习中文书推荐《TensorFlow深度学习》
《TensorFlow深度学习》是龙龙老师（新加坡国立大学老师）在2019年10月份在GitHub开源的一本中文教程，基于最新的TensorFlow2.0进行算法和实际案例讲解。近几个月趁工作之余学习了该书，从神经网络的发展到最新的论文算法，结合TensorFlow2点源代码讲解，由浅入深，通俗易懂。非常适合IT从业人员学习，以下是此书的目录。（1）第1-3部分讲解了人工智能...
2020-02-03 19:54:18
1262
原创 TensorFlow深度学习1--TensorFlow2.0及安装
2019年下半年， tensorflow更新到了2.0版本，对Keras API进行了兼容，使用起来更加方便，可以快速搭建神经网络进行模型计算。最近几年陆续也利用工作之余，学习过一些机器学习和神经网络的书籍，许多内容没有吃透，因此准备整理下之前的材料，作为学习笔记，也和大家一起沟通学习。 TensorFlow虽然在运算速度上并不一定最快，但它有以下优点：...
2020-02-02 12:45:25
677
原创 如何提高工作效率--慢思考
作者首先介绍了大脑的结构和功能作用，然后说明了目前人们在移动时代随时在线，多任务并行，长期压力，睡眠不足这4点正在摧毁大脑及专注力，建议个人及团队离线思考，批量处理同类别事物，科学面对压力和保持正常睡眠，并提供了一些实用工具和技巧，教导人们在一心多用的时代如何保持专注。
2019-10-10 12:52:42
687
1
原创 灰度决策--如何解决棘手复杂问题
本书属于管理学范畴，旁征博引了很多哲学典著，比较晦涩，本书介绍的更多是一种解决灰度问题的思维习惯和态度。通过5大方面全面思考，来解决灰度问题，它可以作为一种解决复杂问题的思维框架。
2019-10-10 09:23:29
470
原创 如何登上月球，只有疯狂到位
《疯狂到位》由火星登陆系统集成部门负责人亚当根据好奇号火星车登陆项目经历写的一本书，有个人成长经历，有项目管理的感悟，有许多火星登陆研发的问题，最主要的是如何打造一只具有凝聚力有创造力队伍。
2019-08-27 12:54:17
196
原创 银行数据仓库体系实践（20）--浅谈银行数据仓库发展趋势
整个系列的文章从银行数据仓库架构，ETL，模型，数据管理以及几大方面应用介绍了数据仓库，可以让大家对银行数据仓库有个概要的了解，但在各子系统设计，技术方面没有太深入介绍，后续也会陆续补充。作为这个系列文章的最后一节，简单谈谈对银行数据仓库发展的一些想法。数据仓库作为银行数据中心，在这个大数据时代也发挥了重要的作用，那随着银行业业务系统架构的演变，特别是目前目前银...
2019-08-25 10:45:45
2670
2
原创 银行数据仓库体系实践（19）--数据应用之AI
随着计算机性能以及深度神经网络技术的发展，大数据概念的普及，AI成了最近几年投资界和互联网的风口，本文主要介绍了AI技术在银行的应用以及AI平台的主要功能。
2019-08-23 17:36:55
1164
原创 银行数据仓库体系实践（18）--数据应用之信用风险建模
风险应用作为银行的主要数据应用之一，也是数据仓库重点支持的数据应用方向，本节主要介绍了银行信用风险防控中的模型建设步骤以及应用，供各位参考。
2019-08-20 19:03:06
2309
原创 文章正在审核中 银行数据仓库体系实践（17）--数据应用之营销分析
精准营销是银行数据应用中最多样化、变化最快、需求最多的一部分，也是数据发现价值、数据支持业务发展有效体现。本节对主要的营销数据应用进行介绍。
2019-08-16 18:05:32
1444
原创 银行数据仓库体系实践（16）--数据应用之财务分析
财务分析是每家公司或银行发展决策的重要依据，也是银行精细化管理适应市场竞争的重要手段，也是数据仓库重点支持的数据应用，本节主要介绍了主要的财务分析系统--管理会计以及所需要的数据支持。
2019-08-12 13:09:33
2495
原创 银行数据仓库体系实践（15）--数据应用之巴塞尔新资本协议
本节主要介绍了巴塞尔新资本协议的内容以及在银行实施时的系统支持。数据仓库作为资本充足率等重要指标计算的数据源，高效稳定的数据服务是新资本协议相关指标和信息披露报表准确性和及时性重要保障。
2019-08-08 19:59:15
1407
原创 银行数据仓库体系实践（14）--数据应用之内部报表及数据分析
统计报表和数据分析平台是银行各部门及业务人员常用的两种分析方式，本节主要介绍这两种分析方式的重点功能和架构设计。
2019-08-03 10:00:13
2856
原创 银行数据仓库体系实践（13）--数据应用之监管报送
银保监和央行作为银行的管理者，对银行提出了许多数据报送要求，监管报送的数据也是数据仓库重点的数据服务之一，涉及面广、报送类型多，本节简单介绍下各报送数据的内容，供大家了解。
2019-07-28 11:31:10
18989
3
原创 银行数据仓库体系实践（12）--数据管理及治理
数据仓库作为全行数据中心能高效支持全行或全公司的统计 、数据分析工作，除了稳定的ETL架构、高效的数据处理能力，流畅的开发管理流程，还需要有全面的数据管理体系，确保提供的数据准确性和高质量。数据管理主要有数据标准，元数据和数据质量3方面。那数据治理是指对没有规范或者不符合规范的数据进行清理并建立标准和规范，那也是从这3方面着手。那这三方面的数据管理也是全行级的管理，并不仅仅限于数据仓...
2019-07-27 21:01:06
2059
原创 银行数据仓库体系实践（11）--数据仓库开发管理系统及开发流程
数据仓库管理着整个银行或公司的数据，数据结构复杂，数据量庞大，任何一个数据字段的变化或错误都会引起数据错误，影响数据应用，同时业务的发展也带来系统不断升级，数据需求的不断增加，数据仓库需要不断的升级和维护，才能保证为全行提供持续完整准确的数据服务。所以数据仓库基本上是全行或全公司版本最多的系统，如何保证在频繁的变化中保证数据的准确和系统的稳定，需要数据仓库的开发管理必须做到高效、有条不...
2019-07-20 23:43:44
3966
1
原创 银行数据仓库体系实践（10）--汇总指标层和集市模型设计
建立多层次的数据访问服务体系，有力提升数据仓库的价值。基于指标汇总层、集市层、可以提供面向业务人员的即席数据查询、以及面向应用开发者的数据接口、应用访问接口，满足不同类型应用的需要。1、汇总指标层模型设计原则及步骤 1.1建设目标：汇总指标层也叫中间层，他提炼出对ODS具有共性的数据访问、统计需求，从而构建出的一个面向支持应用的、提供共享的数据访...
2019-07-17 23:30:00
10366
原创 银行数据仓库体系实践（8）--主数据模型设计
主数据区域中保留了数据仓库的所有基础数据及历史数据，是数据仓库中最重要的数据区域之一，那主数据区域中主要分为近源模型区和整合（主题）模型区。上一节讲到了模型的设计流程如下图所示。那近源模型层的设计在第2.3和3这两个步骤中相对简化，模型表设计的结构同源系统的表结构，字段也一一映射即可。那下面以整合（主题）模型的设计步骤来进行介绍: 整合（主题）模型层主要按主题进行...
2019-07-12 22:35:20
4718
1
原创 银行数据仓库体系实践（7）--数据模型设计及流程
数据仓库作为全行或全公司的数据中心和总线，汇集了全行各系统以及外部数据，通过良好的系统架构可以保证系统稳定性和处理高效性，那如何保障系统数据的完备性、规范性和统一性呢？这里就需要有良好的数据分区和数据模型，那数据分区在第三部分数据架构中已经介绍，本节将介绍如何进行数据模型的设计。1、各数据分区的模型设计思路： 数据架构部分中提到了在数据仓库中主要分为以下区域，那...
2019-07-07 21:46:38
5061
2
原创 银行数据仓库体系实践（6）--调度系统
调度系统是数据仓库的重要组成部分，也是每个银行或公司一个基础软件或服务，需要在全行或全公司层面进行规划，在全行层面统一调度工具和规范，由于数据类系统调度作业较多，交易类系统批量优先级高，为不互相影响可以和交易类系统独立分开，建2套调度环境。1，调度系统常见架构上图是一种常见的调度架构，它分为两个部分： （1）调度服务器集群作为调度中心...
2019-07-06 23:51:30
2136
原创 银行数据仓库体系实践（5）--数据转换
数据转换作业主要是指在数据仓库内的结构化数据批量加工，对于非结构化数据以及在线查询接口、数据流的开发主要是遵循代码开发规范以及各中间件的开发规范，如使用java来开发遵守java开发规范，使用Kafka需要遵循Kafka的使用和设计规范。同时做好组件的设计，提高复用程度和开发效率。这里就不再赘述，那对于批量加工数据各平台也有相应的开发规范，对于不同的平台有不同的规范，用来提高代码的...
2019-06-28 21:03:02
2576
2
原创 银行数据仓库体系实践（4）--数据抽取和加载
1、ETL和ELTETL是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合：E：抽取，从源系统(Souce)获取数据；T：转换，将源系统获取的数据进行处理加工，比如数据格式转化、数据精度转换、数据清洗、缺失数据补齐、异常数据排除等。L：加载，将数据加载到目标数据库(Target)。...
2019-06-23 19:24:34
3655
原创 银行数据仓库体系实践（3）--数据架构
狭义的数据仓库数据架构用来特指数据分布，广义的数据仓库数据架构还包括数据模型、数据标准和数据治理。即包含相对静态部分如元数据、业务对象数据模型、主数据、共享数据，也包含相对动态部分如数据流转、ETL、整合、访问应用和数据全生命周期管控治理。数据架构层面通过数据分类、分层部署等手段，从非功能性视角将数据合理布局。通过整体架构管控和设计，支持业务操作类和管理分析类应用（系统），满足业...
2019-06-08 20:38:20
6188
5
原创 银行数据仓库体系实践（2）--系统架构
银行数据仓库有哪些部门组成，又各有什么功能，这些功能如何组合并形成一个整体实现银行数据的存储、计算、分析呢？本文从系统架构和技术实现角度进行了介绍，详见正文
2019-05-26 11:43:03
6454
5
原创 银行数据仓库体系实践（1）--银行数据仓库简介
银行在日常生活中大家经常接触，但在柜台、ATM、手机银行等后面是一个庞大的系统在支持着银行的各项业务，那数据仓库作为银行的数据中心，具有什么样的作用和功能呢？
2019-05-19 21:53:14
13133
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人