自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(26)
  • 资源 (1)
  • 收藏
  • 关注

转载 MDA核心之MOF原理和实现

MOF原理和实现陈健翔2004-10-15关键字:MDA MOF AOP众所周知MOF是MDA的核心,下面我们来快速浏览一下什么是MOF。1、序曲一个应用系统可以被分为典型的3层结构。在《UML模式与应用》[1]一书中分别称为UI层、领域层、数据层。UI层和领域层的接口通过应用程序和应用框架来连接;领域层和数据层的接口通过持久化框架来连接。该书中关于持久化框架的实现是使用模板方法模式来实现的,基类定义了持久化基本接口,由每个子类来实现各自的持久化方法。子类的域(field)和关系..

2021-01-15 20:37:09 17

原创 effective sql 读书笔记

示例:https://github.com/TexanInParis/Effective-SQL第一章数据模型设计第一条确保所有表都有主键1、主键具有以下特征:唯一性、值非空、不可变、尽可能简单2、强制引用完整性:子表中具有非空外键的所有记录都必须在父表中找到相匹配的记录3、不建议使用复合主键,效率太低。复合主键比再添加一列作为主键要好。第二条避免存储冗余数据第三条消除重复数据组1、列昂贵,行便宜2、删除重复的数据组,可以使用唯一索引来防止出现意外的重复数据3...

2020-12-15 16:46:08 3

转载 电信运营商IT系统建设概况

.IT基础架构随着运营商业务的不bai断发展和3G业务的不断临近,以及从全面服务客户的角度出发,充分实现应用系统共享的需求越发明显,面向服务的架构(SOA)已成为使企业实现IT与业务紧密结合,提高业务流程灵活性,从而真正帮助企业快速响应外部变化,是企业发展、创新的重要IT工具。(1)应用集成阶段各运营商都在进行企业应用集成平台的建设,应用集成技术分为三个阶段:第一阶段的应用集成技术是在中间件基础之上,发展丰富的连接与转换技术及全面的元数据(META DATA)管理与应用能力,解决信息共享与信息交换

2020-12-07 11:39:38 43

转载 一文了解Gauss数据库:开发历程、OLTP&OLAP特点、行式&列式存储,及与Oracle和AWS对比

摘要:华为在IT的底层架构,逐步搭建起自己的基础架构,建立华为生态。我们这次详解华为数据库,并对目前主流的数据库进行对比。只有对比,才能发现不同。数据库的重要性&华为推出新一代Gauss数据库数据库是计算机行业的基础核心软件,所有应用软件的运行和数据处理都要与其进行数据交互。数据库的开发难度,不仅体现在与其他基础器件的适配,更在于如何实现对数据高效、稳定、持续的管理。Oracle、微软的数据库之所以能长久不衰,一方面在于其强大的技术开发和产品升级迭代能力,另一方面在于其对数据库的Kno..

2020-11-28 12:05:12 171

转载 大数据与AI相关的技术历程

掐指一算,从 OneAPM 离职也快一个月了,在 OneAPM 工作的种种,仿佛还像是在昨天。细数两年的工作经历,我很庆幸在恰当的时间点和这么一群有激情有活力的人共事。那么,是时候总结一下我在 OneAPM 做的牛(cai)逼(ji)事情了。大家好,今天由我来分享一下,我在上家公司做的 Ai 和 告警 相关的一些内容。首先,我先简单介绍一下,今天我要分享的两个项目: Ai 是 OneAPM 服务器端应用性能监控分析程序,它主要是能收集Java、CSharp、Python等偏后端语言的系统的一些

2020-11-02 18:00:12 177 1

转载 数据仓库、数据湖、流批一体

摘要数据仓库,数据湖,包括Flink社区提的流批一体,它们到底能解决什么问题?今天将由阿里云研究员从解决业务问题出发,将问题抽丝剥茧,从技术维度娓娓道来:为什么你需要数据湖或者数据仓库解决方案?它的核心难点与核心问题在哪?如果想稳定落地,系统设计该怎么做?业务背景1.1 典型实时业务场景首先我们来看一个典型的实时业务场景,这个场景也是绝大部分实时计算用户的业务场景,整个链路也是一个典型的流计算架构:把用户的行为数据或者数据库同步的Binlog,写入至kafka,再通过Fli...

2020-10-27 13:52:49 55

转载 Kafka设计解析

Kafka背景及架构介绍

2020-10-11 17:14:13 11

转载 2018年ETL工具比较

提取,转换和加载(ETL)工具使组织能够跨不同的数据系统使其数据可访问,有意义且可用。通常,公司在了解尝试编码和构建内部解决方案的成本和复杂性时,首先意识到对ETL工具的需求。在选择合适的ETL工具时,您有几种选择。您可以尝试组装开源ETL工具以提供解决方案。这种方法适用于某些情况,但公司经常发现自己需要更多 - 更多功能/特性,更多灵活性和更多支持。下一个选择是与现任提供商合作:一种能够很好地处理当今流行数据源和流的解决方案。现有供应商提供大型或知名品牌的稳定性和舒适性。第三类ETL工具是现代

2020-09-29 15:45:39 80

转载 Apache Nifi性能测试计划

1.概述1.1 目的本测试计划为Apache Nifi的性能测试计划,目的在于测试在应用Nifi做为数据接入工具时系统的数据完整性、异常状态下的数据恢复机制以及在不同负载状态下数据的响应时间。1.2 背景考虑到大数据管理平台有数据接入量大、数据源多样化、对数据的完整性和容错率要求高、延迟率低等特点,因此计划对Nifi的数据完整性、异常状态下的容错性以及服务器在高负载情况下的性能做一个全面的测试评估,以便于了解nifi的优点和缺陷,从而优化整个大数据管理平台架构。1.3 范围本次测试主要是基于现有

2020-09-13 11:26:17 43

转载 Apache nifi开发指南

1. Apache Nifi 概念1.1. NiFi简介Apache NiFi 是一个易于使用、功能强大而且可靠的数据拉取、数据处理和分发系统,用于自动化管理系统间的数据流。它支持高度可配置的指示图的数据路由、转换和系统中介逻辑,支持从多种数据源动态拉取数据。NiFi原来是NSA的一个项目,目前已经代码开源,是Apache基金会的顶级项目之一。NiFi是基于Java的,使用Maven支持包的构建管理。 NiFi基于Web方式工作,后台在服务器上进行调度。用户可以为数据处理定义为一个流程,然后进.

2020-09-12 23:28:36 135 1

转载 背压(Backpressure)机制

首先,从大的方面说,这篇文档的名字,虽然叫“Backpressure”(背压),但却是在讲述一个更大的话题,“Flow Control”(流控)。Backpressure只是解决Flow Control的其中一个方案。就像小学做的那道数学题:一个水池,有一个进水管和一个出水管。如果进水管水流更大,过一段时间水池就会满(溢出)。这就是没有Flow Control导致的结果。而解决Flow Control有几种思路呢?(1)Backpressure,就是消费者需要多少,生产者就生产多少。这有点类似于TCP

2020-09-12 19:51:11 18

转载 Kettle源码分析

Kettle 4.2源码分析第一讲--Kettle 简介1. PDI结构简介图 1‑1 PDI核心组件  Spoon是构建ETL Jobs和Transformations的工具。Spoon可以以拖拽的方式图形化设计,能够通过spoon调用专用的数据集成引擎或者集群。Data Integration Server是一个专用的ETL Server,它的主要功能有: 功能 描述 执行 通过Pentaho Data In.

2020-08-07 20:00:20 207

原创 大数据学习资料

1、https://360ai.org/kettle/2878

2020-08-06 17:23:07 47

转载 大数据分类探究

译者:李毅 中国惠普大学资深培训专家** 摘要 **在本文中,我们提出了一个大数据的六维度分类方法。这个分类方法的主要目的是帮助决策制定者在计算、存储架构、数据分析技术、安全与隐私框架等多种选择中确定正确的方向。这其中需要分析的数据是分类的核心。简介大数据指的是与我们每一个人以及周边事物有关而且被政府和企业所收集的大量数字信息。这些数据不仅仅是由传统的信息交换软件通过台式机、移动电话等设备产生,也来自于各种环境中所嵌入的无数类型各异的传感器;它即来源于城市街道(摄像头、麦克风)或喷气引擎(温度传

2020-08-03 16:21:31 136

转载 Spark源码解析:RDD

Spark源码解析:RDD0x00 前言本篇是Spark源码解析的第一篇,主要通过源码分析Spark设计中最重要的一个概念——RDD。本文会主要讲解RDD的主要概念和源码中的设计,并通过一个例子详细地讲解RDD是如何生成的和转换的。文章结构先回顾一下RDD的一些特征以及几个基本概念 RDD源码分析,整体的源码设计 举一个例子,通过这个例子来一步步地追踪源码。0x01 概念什么是RDDRDD(Resilient Distributed Dataset):弹性分布式数.

2020-05-22 00:23:04 49

转载 Docker入门实战

I. Docker简介Docker是一种新兴的虚拟化技术,能够一定程度上的代替传统虚拟机。不过,Docker 跟传统的虚拟化方式相比具有众多的优势。我也将Docker类比于Python虚拟环境,可以有效的配置各个版本的开发环境,比如深度学习与Java环境。其他的Docker简介也不需要过多介绍,可以参考很流行的《Docker — 从入门到实践》。关于博客,文末列出了最近在掘金上看到的一...

2019-01-20 21:04:35 94

转载 Docker全面介绍

Docker简介Docker是一种遵从Apache2.0协议开源的Linux容器管理解决方案,它通过进程和进程通信技术对操作系统的文件资源和网络的进行隔离,实现了包含文件资源、系统资源(shell环境等)以及网络资源的容器创建和管理。每一个容器都有一个唯一的进程,当该进程结束的时候,容器也会完全的停止。其他信息 Go语言编写 适用于Linux平台(仅适用) Docker 官网:htt...

2019-01-19 15:40:35 135 1

转载 业务架构

要注意业务架构是一个完整的概念,是有多个架构文档,形式化的图形建模共同完成的。只要是企业内涉及到业务的方方面面,人,事,物,时间,环境等都可以在业务架构描述中找到详细的内容或者其父内容。业务架构不等同于流程架构,流程架构是业务架构的一个部分;业务架构不等同于业务建模,业务建模仅仅是形成业务架构的一种方法;采用形式化的方法清晰的描述清楚企业业务即业务架构要完成的事情。业务架构的形式可以以价值链或...

2019-01-19 11:39:27 2052

转载 联邦企业架构之FEA实施指南

          下载LOFTER我的照片书  |通过前面的论述,我们可以了解到在接管了FEA的开发之后,OMB先后制定了诸如参考模型、联邦过渡框架以及企业架构评估框架等标准用于为FEA的开发提供帮助。但是FEA的开发并不是最终的目的,美国联邦政府创建的FEA的初衷是为了提高政府整体的信息资源的利用率和效能,并改善政府针对信息技术的投资水平,因而如何开发和应用FEA并...

2019-01-19 11:38:18 865

转载 联邦企业架构之FEA及参考模型

在CIO委员会提出了FEAF与联邦企业架构实施指南后,美国白宫的管理与预算办公室(OMB)接下了管理和协调联邦企业架构建设的责任,并于2002年成立了专门从事联邦企业架构开发的企业架构项目管理办公室(FEA-PMO)。与FEAF不一样,FEA(Federal Enterprise Architecture,即联邦企业架构)并不是一种理论化的企业架构开发方法论,而是联邦政府所要建立的企业架构本身,以...

2019-01-19 11:37:11 1928

转载 《企业IT架构转型之道》读书笔记

1 出发点:企业IT系统建设普遍面临的问题和处境 很多企业面临的问题和处境:『烟囱式』系统建设模式。当业务部门提出业务需求,信息中心部门进行系统集成商的招投标,再进入到需求收集、需求分析、开发、测试、上线的项目周期中。某种程度上,每个新系统的上线都预示着一座新的烟囱矗立而成。这种完全基于业务需求建设系统的方式,已经成为过去20多年企业建设IT系统的标准流程,导致IT系统建设早的企业内部...

2019-01-19 11:31:03 493

转载 软件设计之UML—UML类图中的六大关系

一、UML中的六大关系在UML类图中,常见的有以下几种关系: 泛化(Generalization), 实现(Realization),关联(Association),聚合(Aggregation),组合(Composition),依赖(Dependency)。1.1、 继承关系—泛化(Generalization)指的是一个类(称为子类、子接口)继承另外的一个类(称为父类、父...

2019-01-19 11:28:20 165

转载 TMF大数据分析指南 Unleashing Business Value in Big Data

 面对许多不断涌现的大数据分析技术,CSP需要一个清晰的参考模型,以方便理解不同的大数据分析技术和合理定义流程,从而为特定的业务用例选择正确的技术框架和路线。      为了满足以上需求,本指南提供了大数据分析的参考用例、可重用构件和参考实现的框架,帮助CSP通过大数据分析技术获得商业价值。       本指南包括以下内容(目前标灰的内容尚未介绍,后续逐步更新):1、  大数据和大...

2019-01-19 11:26:41 276

转载 网络制式

 l1G:模拟调制、频分多址(FDMA:Frequency Division Multiple Access),仅限语音的发送。当中其中一种标准,称作北欧移动电话系统 (NMT),曾在北欧国家、瑞士、荷兰、东欧及俄罗斯使用、其他制式包括应用在美国及澳洲的AMPS,[1] 英国的TACS,西德、葡萄牙及南非的C-450,法国的Radiocom 2000[2]和意大利的RTMI。而在日本方面,...

2019-01-19 11:24:19 155

转载 天馈系统

  馈线(Feeder)·        馈线:是在发射设备和天线之间传输信号的导线。均匀的特性阻抗和高回损是馈线最重要的传输特征。·        按特点:标准型馈线,低损耗型馈线,超柔型馈线·        跳线:(1)机顶跳线:NodeB与主馈之间,一般使用 2m的1/2 "超柔跳线;(2)天馈跳线:天线与主馈线,一般使用3m的1/2 "的超柔跳线; 合路...

2019-01-19 11:23:18 952

转载 PowerDesigner16 时序图

 时序图(Sequence Diagram)是显示对象之间交互的图,这些对象是按时间顺序排列的。顺序图中显示的是参与交互的对象及其对象之间消息交互的顺序。时序图中包括的建模元素主要有:角色(Actor)、对象(Object)、生命线(Lifeline)、控制焦点(Focus of control)/ 激活(Activation)、消息(Message)、组合片段(Combined Fragment...

2019-01-19 11:20:25 326

Com技术相关知识教学ppt

分章节详细介绍了COM技术的相关知识,用ppt的形式进行展示,适合于教学课件。

2009-02-07

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除