程序员杂谈

多核CPU 多核 CPU 环境下进程的调度算法一般有全局队列调度和局部队列调度两种。（18）属于全局队列调 度的特征。 (18)A.操作系统为每个 CPU 维护一个任务等待队列 B.操作系统维护一个任务等待队列C.任务基本上无需在多个 CPU 核心间切换，有利于提高 Cache 命中率 D.当系统中有一个 CPU 核心空闲时，操作系统便从该核心的任务等待队列中选取适当的任务执 行 参考答案：(18)B 试题解析： 对于多核 CPU，优化操作系统任务调度算法是保证效率的关

解决问题时，将问题分解成一个一个的步骤，将每个步骤进行封装(函数)，通过调用这些封装好的步骤，解决问题。例如：请求->用户名、密码->连接jdbc->读取数据库Scala语言是一个完全函数式编程语言。万物皆函数函数和方法的区别1）核心概念（1）为完成某一功能的程序指令（语句）的集合，称为函数。（2）类中的函数称之方法。案例实操（1）Scala语言的语法非常灵活，可以在任何的语法结构中声明任何的语法（2）函数没有重载和重写的概念；方法可以进行重载和重写（3）scala中

什么是Scalascala(Scalable Language)是一种多范式的编程语言，其设计的初衷是要集成面向对象编程和函数式编程的各种特性。Scala运行于Java平台(java虚拟机上)，并兼容现有的Java程序。面向对象(将对象当作参数传来传去) + 面向函数(方法，可以将函数当作参数传来传去)为什么要学Scala优雅：这是框架设计师第一要考虑的速度快Spark就是使用Scala编写的，因此为了更好的学习Spark，需要掌握Scala这门语言=Spark的兴起，带动Scala语言的

1.Kafka中的ISR、AR又代表什么？ISR：与leader保持同步的follower集合AR：分区的所有副本2.Kafka中的HW、LEO等分别代表什么？LEO：没个副本的最后条消息的offsetHW：一个分区中所有副本最小的offset3.Kafka中是怎么体现消息顺序性的？每个分区内，每条消息都有一个offset，故只能保证分区内有序。4.Kafka中的分区器、序列化器、拦截器是否了解？它们之间的处理顺序是什么？拦...

Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。Flume组成架构AgentAgent是一个JVM进程，它以事件的形式将数据从源头送至目的。Agent主要有3个部分组成，Source、Channel、Sink。1、SourceSource是负责接收数据到Flume Agent的组件。Source组件可以处理各种类型、各种格式的日志数据，包括avro、thrift、exec、jms、spooling direct

Key的过期策略Redis的Key有3种过期删除策略，具体如下：1. 定时删除原理：在设置键的过期时间的同时，创建一个定时器（timer），让定时器在键的过期时间来临时，立即执行对键的删除操作 优点：能够很及时的删除过期的Key，能够最大限度的节约内存 缺点：对CPU时间不友好，如果过期的Key比较多时，可能会占用相当一部分CPU时间，对服务器的响应时间和吞吐量造成影响2. 惰性删除原理：在取出键时才对键进行过期检查，如果发现过期了就会被删除 优点：对CPU友好，能够最大限度的节约C

想想为什么要使用MQ？1.解耦，系统A在代码中直接调用系统B和系统C的代码，如果将来D系统接入，系统A还需要修改代码，过于麻烦！2.异步，将消息写入消息队列，非必要的业务逻辑以异步的方式运行，加快响应速度3.削峰，并发量大的时候，所有的请求直接怼到数据库，造成数据库连接异常使用了消息队列会有什么缺点?1.系统可用性降低:你想啊，本来其他系统只要运行好好的，那你的系统就是正常的。现在你非要加个消息队列进去，那消息队列挂了，你的系统不是呵呵了。因此，系统可用性降低2.系统复杂性增加:要多

一：初识actuatoractuator是SpringBoot的一个组件，组件名称为：spring-boot-starter-actuator, 引入方式如下：application配置文件：#actuatormanagement.security.enabled= falseendpoints.health.sensitive= falsemaven引入：<dependency> <groupId>org.springframework.boot&l

一、JVM内存模型及垃圾收集算法1.根据Java虚拟机规范，JVM将内存划分为：New（年轻代） Tenured（年老代） 永久代（Perm） 其中New和Tenured属于堆内存，堆内存会从JVM启动参数（-Xmx:3G）指定的内存中分配，Perm不属于堆内存，有虚拟机直接分配，但可以通过-XX:PermSize -XX:MaxPermSize等参数调整其大小。年轻代（New）：年轻代用来存放JVM刚分配的Java对象 年老代（Tenured)：年轻代中经过垃圾回收没有回收...

学习和应用 Spring Boot 有一些时间了，你们对 Spring Boot 注解了解有多少呢？今天栈长我给大家整理了 Spring Boot 最核心的 25 个注解，都是干货！1、@SpringBootApplication这是 Spring Boot 最最最核心的注解，用在 Spring Boot 主类上，标识这是一个 Spring Boot 应用，用来开启 Spring Boot 的各项能力。其实这个注解就是@SpringBootConfiguration、@EnableAut...

理想情况下，我们应用对Yarn资源的请求应该立刻得到满足，但现实情况资源往往是有限的，特别是在一个很繁忙的集群，一个应用资源的请求经常需要等待一段时间才能的到相应的资源。在Yarn中，负责给应用分配资源的就是Scheduler。其实调度本身就是一个难题，很难找到一个完美的策略可以解决所有的应用场景。为此，Yarn提供了多种调度器和可配置的策略供我们选择。YARN架构如下:ResourceManager（RM）：负责对各NM上的资源进行统一管理和调度，将AM分配空闲的Container运行并监控...

重点：基于 Spring Boot云服务、分布式框架集合（众多）核心功能：分布式/版本化配置服务注册和发现路由服务和服务之间的调用负载均衡断路器分布式消息传递流程：请求统一通过 API 网关（Zuul）来访问内部服务。 网关接收到请求后，从注册中心（Eureka）获取可用服务。 由 Ribbon 进行均衡负载后，分发到后端具体实例。 微服务之间通过 Feign 进行通信处理业务。 Hystrix 负责处理服务超时熔断。 Turbine 监控服务间的调用和熔断...

一、概述RTMP协议是Real Time Message Protocol(实时信息传输协议)的缩写，它是由Adobe公司提出的一种应用层的协议，用来解决多媒体数据传输流的多路复用（Multiplexing）和分包（packetizing）的问题。RTMP协议从属于应用层，被设计用来在适合的传输协议（如TCP）上复用和打包多媒体传输流（如音频、视频和互动内容）。RTMP提供了一套全双工的可靠的多路复用消息服务，类似于TCP协议[RFC0793]，用来在一对结点之间并行传输带时间戳的音频流，视频流，数据

常用命令实操2.3.1 准备工作1）启动Hadoop集群[root@hadoop2 hadoop-3.1.3]$ sbin/start-dfs.sh[root@hadoop3 hadoop-3.1.3]$ sbin/start-yarn.sh2）-help：输出这个命令参数[root@hadoop2 hadoop-3.1.3]$ hadoop fs -help rm2.3.2 上传1）-moveFromLocal：从本地剪切粘贴到HDFS[root@hadoop2 hadoop-3.1.3

大数据技术的核心是什么？Hadoop生态体系！ Hadoop 是一个由 Apache 基金会所开发的分布式系统基础架构， 主要解决海量数据的存储和海量数据的分析计算问题。 广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop 生态圈。1. Sqoop：sqoop 是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle 等）中的数据导进到Hadoop 的 HDFS 中，也可以将 HDFS

HTTPS（全称：HyperText Transfer Protocol over Secure Socket Layer），其实 HTTPS 并不是一个新鲜协议，Google 很早就开始启用了，初衷是为了保证数据安全。 近两年，Google、Baidu、Facebook 等这样的互联网巨头，不谋而合地开始大力推行 HTTPS， 国内外的大型互联网公司很多也都已经启用了全站 HTTPS，这也是未来互联网发展的趋势。HTTP 协议（HyperText Transfer Protocol，超文本传输协议）：

什么是java字节码技术 Java之所以可以“一次编译，到处运行”，一是因为JVM针对各种操作系统、平台都进行了定制，二是因为无论在什么平台，都可以编译生成固定格式的字节码（.class文件）供JVM使用。因此，也可以看出字节码对于Java生态的重要性。之所以被称之为字节码，是因为字节码文件由十六进制值组成，而JVM以两个十六进制值为一组，即以字节为单位进行读取。在Java中一般是用javac命令编译源代码为字节码文件，一个.java文件从编译到运行的示例如图1所示。字节码技术应用场景AO...

一、Java有四种类型的垃圾回收器串行垃圾回收器（Serial Garbage Collector） 并行垃圾回收器（Parallel Garbage Collector） 并发标记扫描垃圾回收器（CMS Garbage Collector） G1垃圾回收器（G1 Garbage Collector）每种类型都有自己的优势与劣势。重要的是，我们编程的时候可以通过JVM选择垃圾回收器类型。我们通过向JVM传递参数进行选择。每种类型在很大程度上有 所不同并且可以为我们提供完全不同的应用程序性能.

Disruptor它是一个开源的并发框架，并获得2011 Duke’s 程序框架创新奖，能够在无锁的情况下实现网络的Queue并发操作；它是一个高性能的异步处理框架，或者可以认为是最快的消息框架（轻量的JMS），也可以认为是一个观察者模式的实现，或者事件监听模式的实现；它是基于使用CAS机制实现的。CAS:Compare And Swap/Set 顾名思义比较和交换CPU级别的指令，cpu去更新一个值，但如果跟新过程中值发生了变化，操作就失败，然后重试，直到更新成功！Disruptor的seque

CPU密集型（CPU-bound）CPU密集型线程的作用是进行无阻塞的逻辑运算的线程。比如：RPG游戏中的游戏逻辑服务器(也叫地图服务器)里面的主逻辑线程，这个主逻辑线程需要进行大量的无阻塞的逻辑处理。当被操作系统内核调度的时候，这个线程就在给定的CPU执行时间内进行无阻塞的操作。如果这个游戏逻辑服务器还创建更多的线程来进行逻辑操作的话，这样的行为是得不尝失的。因为，本进程的线程越多，而本进程获取的CPU执行时间又是固定的，导致了进程内每个线程的执行时间很短。所以，像游戏逻辑服务器中的线程应该属于CPU密

一、单一职责原则　　Single Responsibility Principle，应该有且仅有一个原因引起类的变更，实际中比较不好把握，因为职责的划分没有一个统一的标准。　　二、里氏替换原则　　Liskov Substitution Principle，通俗点讲，只要父类能出现的地方子类就可以出现，而且替换为子类也不会产生任何错误或异常，使用者可能根本就不需要知道是父类还是子类。但是，反过来就不行了，有子类出现的地方，父类未必就能适应。　　三、依赖倒置原则　　Dependence I.

线程池的概念： 线程池就是首先创建一些线程，它们的集合称为线程池。使用线程池可以很好地提高性能，线程池在系统启动时即创建大量空闲的线程，程序将一个任务传给线程池，线程池就会启动一条线程来执行这个任务，执行结束以后，该线程并不会死亡，而是再次返回线程池中成为空闲状态，等待执行下一个任务。 线程池的工作机制： 在线程池的编程模式下，任务是提交给整个线程池，而不是直接提交给某个线程，线程池在拿到任务后，就在内部寻找是否有空闲的线程，如果有，则将任务交给某个空闲的...

当多个线程同时共享，同一个全局变量或静态变量，做写的操作时，可能会发生数据冲突问题，也就是线程安全问题。但是做读操作是不会发生数据冲突问题。先了解一下java内存模型上图描述了一个多线程执行场景。 线程 A 和线程 B 分别对主内存的变量进行读写操作。其中主内存中的变量为共享变量,也就是说此变量只此一份，多个线程间共享。但是线程不能直接读写主内存的共享变量，每个线程都有自己的工作内存，线程需要读写主内存的共享变量时需要先将该变量拷贝一份副本到自己的工作内存，然后在自己的工作内存中对该变量进行所有

线程运行状态包括新建状态、就绪状态、运行状态、阻塞状态及死亡状态。New (新创建)　　当用new操作符创建一个线程时，如new Thread(r)，该线程还没有开始运行。这意味它的状态是new。此时程序还没有开始运行线程中的代码，在线程运行之前还有一些基础工作要做。Runnable (可运行/就绪)　　一个新创建的线程并不自动开始运行，要执行线程，必须调用线程的start()方法。当线程对象调用start()方法（如图中1所示）即启动了线程，start()方法创建线程运行的系统资源，并调度

进程　 进程是一个具有一定独立功能的程序在一个数据集上的一次动态执行的过程，是操作系统进行资源分配和调度的一个独立单位，是应用程序运行的载体。进程具有的特征：动态性：进程是程序的一次执行过程，是临时的，有生命期的，是动态产生，动态消亡的；并发性：任何进程都可以同其他进行一起并发执行；独立性：进程是系统进行资源分配和调度的一个独立单位；结构性：进程由程序，数据和进程控制块三部分组成线程 随着计算机的发展，对CPU的要求越来越高，进程之间的切换开销较大，已经无法满足越来越复杂的程序...

媒体的概念范围相当广泛，按照国际电话电报咨询委员会(Consultative Committee on International Telephone and Telegraph,CCITT)的定义，媒体可以分为如下5类。(1)感觉媒体（Perception Medium):指直接作用于人的感觉器官，使人产生直接感觉的媒体。如引起听觉反应的声音，引起视觉反应的图像等。(2)表示媒体（r...

什么是DHCP DHCP，动态主机配置协议，前身是BOOTP协议，是一个局域网的网络协议，使用UDP协议工作，常用的2个端口：67(DHCP server),68(DHCP client)。DHCP通常被用于局域网环境，主要作用是集中的管理、分配IP地址，使client动态的获得IP地址、Gateway地址、DNS服务器地址等信息，并能够提升地址的使用率。简单来说，DHC...

什么是NettyNetty 是一个基于 JAVA NIO 类库的异步通信框架，它的架构特点是：异步非阻塞、基于事件驱动、高性能、高可靠性和高可定制性。Netty是基于Java NIO client-server的网络应用框架，使用Netty可以快速开发网络应用，例如服务器和客户端协议。Netty提供了一种新的方式来开发网络应用程序，这种新的方式使它很容易使用和具有很强的扩展性。Netty的内...

结构化布线分为6个子系统：工作区子系统（Work Location):是由终端设备到信息插座的整个区域。一个独立的需要安装终端设备的区域划分为一个工作区。工作区应支持电话、数据终端、计算机、 电视机、监视器以及传感器等多种终端设备。水平子系统（Horizontal):各个楼层接线间的配线架到工作区f息插座之间所安装的线缆属于水平子系统。水平子系统的作用是将干线子系统线路延伸到用户工作区。...

线性规划的可行解域是由一组线性约束条件形成的，从几何意义来说，就是由一些线性解面围割形成的区域。由于线性规划的目标函数也是线性的，因此，目标函数的等值域是线性区域。如果在可行解域中的某内点处目标函数达到最优值，则通过该内点的目标函数等值域与可行解域边界的交点也能达到最优解。所以，第一步的结论是：最优解必然会在可行解域的边界处达到。由于目标函数的各个等值域是平行的，而且目标函数的值将随着该等值域向某...

介绍Scrum 是一个增量的、迭代的敏捷软件开发过程。某软件公司计划开发一个基于Web的 Scrum项目管理系统，用于支持项目团队采用Scrum敏捷开发方法进行软件开发，辅助主管智能决策。此项目管理系统提供的主要服务包括项目团队的管理、敏捷开发过程管理和工件的管理。 Scrum敏捷开发中，项目团队由Scrum主管、产品负责人和开发团队人员三种不同的角色组成，其开发过程由若干个Sp...

广义的政务包括各类行政管理活动，狭义的政务指政府部门的管理和服务活动。电子政务是政务的一种形式，是指国家机关在政务活动中全面应用现代信息技术进行管理和办公，以及为社会提供服务。电子政务作为电子信息技术和政务的结合，其重心在“政务”而不是电子，电子信息技术只是政务活动的实现手段。电子政务不仅能够将原来的政务流程电子化，而且为了实现资源的最优化配置，提高政府部门的效率、降低运行成本，在进行电子政务...

为了完成控制集成和业务流程集成，必须首先解决数据和数据库的集成问题。在集成之前，必须首先对数据进行标识并编成目录，另外还要确定元数据模型，保证数据在数据库系统中分布和共享。通常在以下情况下，将会使用数据集成：（1）需要对多种信息源产生的数据进行综合分析和决策。（2）要处理一些多个应用程序需要访问的公用信息库。（3）当需要从某数据源获得数据来更新另一个数据源时，特别是它们之间的数据格式不相同...

在GBT8566—2007(信息技术软件生存周期过程）标准中，软件生存周期的基本过程包括五个，分别是获取过程、供应过程、开发过程、运作过程、维护过程。其中获取过程是为获取系统、软件产品或软件服务的组织即需方而定义的活动；供应过程是为向需方提供系统、软件产品或软件服务的组织即供方定义的活动；开发过程是为定义并开发软件产品的组织即开发方而定义的活动；运作过程是为在规定的环境中为其用...

可行性是指在企业当前的条件下，是否有必要建设新系统，以及建设新系统的工作是否具备必要的条件。也就是说，可行性包括必要性和可能性。参考国家标准《计算机软件文档编制规范》（GB/T 8567-2006），在信息系统建设项目中，可行性研究通常从经济可行性、技术可行性、法律可行性和用户使用可行性四个方面来进行分析，其中经济可行性通常被认为是项目的底线。1．经济可行性经济可行性也称为投资收益分析或成...

用户访谈：用户访谈是最基本的一种需求获取手段，其形式包括结构化和非结构化两种。用户访谈是通过1对1（或1对2，1对3）的形式与用户面对面进行沟通，以获取用户需求。用户访谈具有良好的灵活性，有较宽广的应用范围。但是，也存在着许多困难，例如，用户经常较忙，难以安排时间；面谈时信息量大，记录较为困难；沟通需要很多技巧，同时需要系统分析师具有足够的领域知识等。另外，在访谈时，还可能会遇到一些对于企业来说比...

多核是多微处理器核的简称，是将两个或更多的独立处理器封装在一起，集成在一个电路中。多核处理器是单枚芯片（也称为硅核），能够直接插入单一的处理器插槽中，但操作系统会利用所有相关的资源，将它的每个执行内核作为分立的逻辑处理器。通过在多个执行内核之间划分任务，多核处理器可在特定的时钟周期内执行更多任务。多线程是指从软件或者硬件上实现多个线程并发执行的技术。具有多线程能力的计算机因有硬件支持而能够在同...

JAVA传统项目交付流程的问题开发和运维间环境有明显差异 代码缺乏统一质量度量 客户要求上线时间紧，人工测试慢，导致测试不充分，时常做线上BUG修复打造工具链源码管理Gitlab 持续集成Jenkins 代码扫描SonarQube 接口测试PostMan+NewMan 制品管理ArtifactoryOSS版本（仅支持Maven） 自动部署AnsibleGi...

根据用户需求选择网络技术时应考虑如下因素：①通信带宽。所选择的网络技术必须保证足够的带宽，能够保证用户快速地访问应用系统。在进行选择时，不仅局限于现有的应用需求，还要适当考虑将来的带宽增长需求。②技术成熟性。所选择的网络技术必须是成熟稳定的技术，有些新的网络技术在尚没有大规模投入使用时，还存在着较多不确定因素，这将会给网络建设带来很多无法估量的损失。对于大型网络工程来说，项目本身不能成为新...

作为消息队列来说，企业中选择mq的还是多数，因为像Rabbit，Rocket等mq中间件都属于很成熟的产品，性能一般但可靠性较强，而kafka原本设计的初衷是日志统计分析，现在基于大数据的背景下也可以做运营数据的分析统计，而redis的主要场景是内存数据库，作为消息队列来说可靠性太差，而且速度太依赖网络IO，在服务器本机上的速度较快，且容易出现数据堆积的问题，在比较轻量的场合下能够适用。Ra...

三层模型主要将网络划分为核心层、汇聚层和接入层，每一层都有着特定的作用。核心层提供不同区域或者下层的髙速连接和最优传送路径；汇聚层将网络业务连接到接入层，并且实施与安全、流量负载和路由相关的策略，为了保证核心层连接运行不同协议的区域，各种协议的转换都应在汇聚层完成；接入层为局域网接入广域网或者终端用 户访问网络提供接入，接入层负责一些用户管理功能，包括地址认证、用户认证和计费管理等内容...

数据库的三级模式结构中，视图对应外模式、基本表对应模式、存储文件对应内模式。数据库系统在三级模式之间提供了两级映像：模式/内模式映像、外模式/模式映像。正因为这两级映像保证了数据库中的数据具有较髙的逻辑独立性和物理独立性。①外模式/模式的映像：存在于外部级和概念级之间，实现了外模式到概念模式之间的相互转换。数据的逻辑独立性是指用户的应用程序与数据库的逻辑结构是相互独立的。数据的逻辑结构发生...

1988年，Barry Boehm正式发表了软件系统开发的“螺旋模型”，它将瀑布模型和快速原型模型结合起来，强调了其他模型所忽视的风险分析，特别适合于大型复杂的系统。螺旋模型由风险驱动，强调可选方案和约束条件从而支持软件的重用，有助于将软件质量作为特殊目标融入产品开发之中。但是，螺旋模型也有一定的限制条件，具体如下：①螺旋模型强调风险分析，但要求许多客户接受和相信这种分析，并做出相关反应是...

敏捷开发是一种以人为核心、迭代、循序渐进的开发方法。在敏捷开发中，软件项目的构建被切分成多个子项目，各个子项目的成果都经过测试，具备集成和可运行的特征。换言之，就是把一个大项目分为多个相互联系，但也可独立运行的小项目，并分别完成，在此过程中软件一直处于可使用状态。敏捷开发的原则包括：①最优先要做的是通过尽早的、持续的交付有价值的软件来使客户满意。②即使到了开发的后期，也欢迎改变需求。敏捷过...

对于软件开发项目而言，控制是十分重要的管理活动。软件质量保证 (Software Quality Insurance, SQA)是在软件过程中的每一步都进行的“保护性活动”。SQA主要由基于非执行的测试（也称为评审)、基于执行的测试（即通常所说的测试） 和程序正确性证明。软件评审是最为重要的SQA活动之一。它的作用是，在发现及改正错误的成本相对较小时就及时发现并排除错误。审查和走查是进...

常用的I/O设备和CPU之间数据传送控制方式有4种，分别为程序直接控制方式、中断控制方式、DMA方式和通道方式。程序直接控制方式和中断控制方式都只适用于简单的、外设很少的计算机系统，因为程序直接控制方式耗费大量的CPU时间，而且无法检测发现设备或其他硬件产生的错误，设备与CPU、设备与设备只能串行工作。中断控制方式虽然在某种程度上解决了上述问题，但由于中断次数多，因而CPU仍需要花费较多的...

RISC(精简指令集计算机)和CISC（复杂指令集计算机）是目前设计制造微处理器的两种典型技术，虽然它们都试图在体系结构、操作运行、软件硬件、编译时间和运行时间等诸多因素中做出某种平衡，以求达到高效的目的，但采用的方法不同，主要区别有：①指令系统：RISC设计者把主要精力放在那些经常使用的指令上，尽量使它们具有简单高效的特色。对不常用的功能，常通过组合指令来完成。因此，在RISC机器上实现特殊...

服务降级：在高并发的情况下，防止用户一直等待，使用服务降级方式进行处理(返回友好的提示给客户端，fallback回调方法)。当服务不可用的时候(正在等待的时候、网络延迟、响应时间过长),客户端会处于一直等待的状态。显然一直等待是不合理的，所以我们应该给客户端返回一个友好的提示，使用fallback(回调方法)进行服务降级处理。服务降级目的：为了提高用户体验(自定义消息返回给客户端)，防止服务雪...

面向对象设计原则可以有效地提高系统的复用性和可维护性。1、单一职责原则定义：一个对象应该只包含单一的职责，并且该职责被完整地封装在一个类中。单一职责原则是实现高内聚、低耦合的指导方针，是最简单却最难运用的原则，需要设计人员发现类的不同职责并将其分离2、开闭原则定义：软件实体应当对扩展开放，对修改关闭。指软件实体应尽量在不修改原有代码的情况下进行扩展。3、里氏替换原则定义：...

如何选择一个合适的开发方法，以保证在多变的市场环境下，在既定的预算和时间要求范围内，开发出让用户满意的信息系统，是系统分析师必须要面对的问题。面向对象方法使系统的描述及信息模型的表示与客观实体相对应，符合人们的思维习惯，有利于系统开发过程中用户与开发人员的交流与沟通，缩短开发周期，提供系统开发的正确性和效率。模型驱动开发(MDD Model-Driven Development):一种新型...

随着软件开发工作的开展，会得到许多工作产品或阶段产品，还会用到许多工具软件。所有这些独立的信息项都要得到妥善的管理，决不能出现混乱，以便于在提出某些特定的要求时，将它们进行约定的组合来满足使用的目的。这些信息项目是配針管理的对象，称为软件配置项。软件配置项目可以分为以下几类：（1）环境类，指软件开发环境或软件维护环境，例如编译器、操作系统、编辑器、数据库管理系统、开发工具、项目管理工具、文...

敏捷方法是一种以人为核心、迭代、循序渐进的开发方法。在敏捷方法中，软件项目的构建被切分成多个子项目，各个子项目成果都经过测试，具备集成和可运行的特征。 在敏捷方法中，从开发者的角度来看，主要的关注点有短平快的会议、小版本发布、较少的文档、合作为重、客户直接参与、自动化测试适应性计划调整和结队编程；从管理者角度来看，主要的关注点有测试驱动开发、持续集成和重构。敏捷方法在几周或几个月的时间内完成...

简介 模型驱动架构是指一种用于应用系统开发的软件设计方法（信息系统开发的重点是应用软件的设计），它提供了一套软件设计的指导规范，这套指导规范是用模型来表示的。模型驱动架构是由一个名叫OMG(Object Management Group，即对象管理组织)的国际联盟于2001年颁布的。建模方法 MDA基于三种建模方法。 第一种建模方法就是著名的统一建模语言(Unified M...

GB/T 28181协议：GB/T 28181协议是由公安部科技信息化局提出，由全国安全防范报警系统标准化技术委员会（SAC/TC100)归口，公安部一所等多家单位共同起草的一部国家标准。ONVIF协议：摄像机中较常用的一种协议，它是是一种兼容协议。由安讯士联合博世及索尼三方共同成立的一个国际开放型网络视频产品标准网络接口开发论坛，取名为ONVIF（Open Network Video I...

简介 Elasticsearch是当前主流的分布式大数据存储和搜索引擎，可以为用户提供强大的全文本检索能力，广泛应用于日志检索，全站搜索等领域。Logstash作为Elasicsearch常用的实时数据采集引擎，可以采集来自不同数据源的数据，并对数据进行处理后输出到多种输出源，是Elastic Stack 的重要组成部分。本文从Logstash的工作原理，使用示例，部署方式及性能调优等方面...

ES为什么要实现集群在单台ES服务器节点上，随着业务量的发展索引文件慢慢增多，会影响到效率和内存存储问题等。如果使用ES集群，会将单台服务器节点的索引文件使用分片技术，分布式的存放在多个不同的物理机器上，从而可以实现高可用、容错性等。es核心存放的是索引。什么是分片技术将数据拆分成多台节点进行存放。ElasticSearch集群中索引可能由多个分片构成，并且每个分片可以拥有多个...

文档(Document)：一般搜索引擎的处理对象是互联网网页，而文档这个概念要更宽泛些，代表以文本形式存在的存储对象，相比网页来说，涵盖更多种形式，比如Word，PDF，html，XML等不同格式的文件都可以称之为文档。再比如一封邮件，一条短信，一条微博也可以称之为文档。 文档集合(Document Collection)：由若干文档构成的集合称之为文档集合。比如海量的...

Lucene是一种高性能、可伸缩的信息搜索（IR）库，在2000年开源，最初由鼎鼎大名的Doug Cutting开发，是基于Java实现的高性能的开源项目。Lucene采用了基于倒排表的设计原理，可以非常高效地实现文本查找，在底层采用了分段的存储模式，使它在读写时几乎完全避免了锁的出现，大大提升了读写性能。 Elasticsearch (ES)是一个基于Lucene构建的开源、分布...

简介 Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。 这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop一样的日志数据和离线分析系统，...

RabbitMQ是实现了高级消息队列协议（AMQP）的开源消息代理软件（亦称面向消息的中间件）。RabbitMQ服务器是用Erlang语言编写的，而群集和故障转移是构建在开放电信平台框架上的。所有主要的编程语言均有与代理接口通讯的客户端库。ConnectionFactory、Connection、ChannelConnectionFactory、Connection、Channel都是Rab...

嵌入式系统具有以下特点：（1）系统专用性强。嵌入式系统是针对具体应用的专门系统。它的个性化很强，软件和硬件结合紧密。一般要针对硬件进行软件的开发和移植，根据硬件的变化和增减对软件进行修改。由于嵌入式系统总是用来完成某一特定任务的，整个系统与具体应用有机地结合在一起，升级换代也以更换整个产品的方式进行，因此，嵌入式产品一旦进入市场，一般具有较长的生命周期。（2）系统实时性强。很多嵌入式系统对外...

结构化方法假定待开发的系统是一个结构化的系统，其基本思想是将系统的生命周期划分为系统规划、系统分析、系统设计、系统实施、系统维护等阶段。这种方法遵循系统工程原理，按照事先设计好的程序和步骤，使用一定的开发工具，完成规定的文档，在结构化和模块化的基础上进行信息系统的开发工作。结构化方法的开发过程一般是先把系统功能视为一个大的模块，再根据系统分析与设计的要求对其进行进一步的模块分解或组合。OM...

事物概念事物特性(ACID)原子性（A）所谓的原子性就是说，在整个事务中的所有操作，要么全部完成，要么全部不做，没有中间状态。对于事务在执行中发生错误，所有的操作都会被回滚，整个事务就像从没被执行过一样。一致性（C）事务的执行必须保证系统的一致性，就拿转账为例，A有500元，B有300元，如果在一个事务里A成功转给B50元，那么不管并发多少，不管发生什么，只要事务执行成功了，那...

分布式一致性协议XA接口XA是由X/Open组织提出的分布式事务的规范。XA规范主要定义了(全局)事务管理器(Transaction Manager)和(局部)资源管理器(Resource Manager)之间的接口。XA接口是双向的系统接口，在事务管理器（Transaction Manager）以及一个或多个资源管理器（Resource Manager）之间形成通信桥梁。XA之所以需要引入事...

CAP原理由于对系统或者数据进行了拆分，我们的系统不再是单机系统，而是分布式系统，针对分布式系统的CAP原理包含如下三个元素。C:Consistency,一致性。在分布式系统中的所有数据备份，在同一时刻具有同样的值，所有节点在同一时刻读取的数据都是最新的数据副本。A:Availability,可用性，好的响应性能。完全的可用性指的是在任何故障模型下，服务都会在有限的时间内处理完成...

在系统设计过程中，类可以分为三种类型，分别是实体类、边界类和控制类。1. 实体类实体类映射需求中的每个实体，实体类保存需要存储在永久存储体中的信息，例如，在线教育平台系统可以提取出学员类和课程类，它们都属于实体类。实体类通常都是永久性的，它们所具有的属性和关系是长期需要的，有时甚至在系统的整个生存期都需要。实体类是对用户来说最有意义的类，通常采用业务领域术语命名，一般来说是一个名词，在...

客户关系管理（Customer Relationship Management，CRM）将客户看作是企业的一项重要资产，客户关怀是CRM的中心，其目的是与客户建立长期和有效的业务关系，在与客户的每一个“接触点”上都更加接近客户、了解客户，最大限度地增加利润。CRM的核心是客户价值管理，它将客户价值分为既成价值、潜在价值和模型价值，通过“一对一”营销原则，满足不同价值客户的个性化需求，提高客户忠诚度...

UML的结构包括构造块、规则和公共机制三个部分。（1）构造块。UML有三种基本的构造块，分别是事物（thing）、关系（relationship）和图（diagram）。事物是UML的重要组成部分，关系把事物紧密联系在一起，图是多个相互关联的事物的集合。（2）公共机制。公共机制是指达到特定目标的公共UML方法，主要包括规格说明（详细说明）、修饰、公共分类（通用划分）和扩展机制四种。规格说明...

UML 2.0包括14种图，分别列举如下：（1）类图（class diagram）。类图描述一组类、接口、协作和它们之间的关系。在OO系统的建模中，最常见的图就是类图。类图给出了系统的静态设计视图，活动类的类图给出了系统的静态进程视图。（2）对象图（object diagram）。对象图描述一组对象及它们之间的关系。对象图描述了在类图中所建立的事物实例的静态快照。和类图一样，这些图给出系统...

RabbitMQ是使用Erlang编写的一个开源的消息队列，本身支持很多的协议：AMQP，XMPP, SMTP, STOMP，也正是如此，使的它变的非常重量级，更适合于企业级的开发。同时实现了一个经纪人(Broker)构架，这意味着消息在发送给客户端时先在中心队列排队。对路由(Routing)，负载均衡(Load balance)或者数据持久化都有很好的支持。Redis是一个Key-V...

SpringCloud和Dubbo都是当下流行的RPC框架，各自都集成了服务发现和治理组件。SpringCloud用Eureka做注册中心，Dubbo用Zookeeper注册中心。注册服务Dubbo是基于java接口及Hession2序列化的来实现传输的，Provider对外暴露接口，Consumer根据接口的规则调用。也就是Provider向Zookeeper注册的是接口信息，Consu...

一款分布式服务框架，高性能和透明化的RPC远程服务调用方案。主要提供服务治理的解决方案。注册中心主要作用：1、动态加入，服务提供者通过注册中心动态的把自己暴露给消费者，无需消费者逐个更新配置文件。2、动态发现服务，消费者可以动态发现新的服务，无需重启生效。3、统一配置，避免本地配置导致每个服务配置不一致。4、动态调整，注册中心支持参数动态调整，新参数自动更新到所有相关的服务节点。5...

简单介绍当要将配置中心部署到生产环境中时，与服务注册中心一样，我们也希望它是一个高可用的应用。Spring Cloud Config实现服务端的高可用非常简单，主要有以下两种方式。传统模式：不需要为这些服务端做任何额外的配置，只需要遵守一个配置规则，将所有的Config Server都指向同一个Git仓库，这样所有的配置内容就通过统一的共享文件系统来维护。而客户端在指定Config Ser...

简介 OAuth2.0（开放授权）是一个关于授权的开放的网络协议。 允许用户让第三方应用访问该用户在某一网站上存储的的资源（如：照片，视频，联系人列表），而无需将用户名和密码提供给第三方应用。 OAuth是一个关于授权（Authorization）的开放网络标准，目前的版本是2.0版。注意是Authorization(授权)，而不是Authentication(认证)。...

Feign是一个声明式的伪Http客户端，它使得写Http客户端变得更简单。使用Feign，只需要创建一个接口并注解。它具有可插拔的注解特性，可使用Feign 注解和JAX-RS注解。Feign支持可插拔的编码器和解码器。Feign默认集成了Ribbon，并和Eureka结合，默认实现了负载均衡的效果。feign是声明式的web service客户端，它让微服务之间的调用变得更简单了，类似cont...

Ribbon是Netflix发布的开源项目，主要功能是提供客户端的软件负载均衡算法，将Netflix的中间层服务连接在一起。Ribbon客户端组件提供一系列完善的配置项如连接超时，重试等。简单的说，就是在配置文件中列出Load Balancer（简称LB）后面所有的机器，Ribbon会自动的帮助你基于某种规则（如简单轮询，随即连接等）去连接这些机器。我们也很容易使用Ribbon实现自定义的负载均衡...

网关分类 开放网关 开放api(openApi) 企业需要将自身数据、能力等作为开发平台向外开放，通常会以rest的方式向外提供，最好的例子就是淘宝开放平台、腾讯公司的微信开放平台、蚂蚁金服开放平台。 Open API开放平台必然涉及到客户应用的接入、API权限的管理、调用次数管理等，必然会有一个统一的入口进行管理，这正是API网关可以发挥作用的时候。 微服务...

Eureka注册中心是入门Spring Cloud微服务架构的必学组件，是学习所有其他组件的基础和基石。Eureka介绍Eureka，这里是 Spring Cloud Eureka 的简称，是 Spring Cloud Netflix 组件之一。 包含服务治理（Eureka）包括服务注册、服务发现和服务检测监控等。Eureka基本规则服务启动时会生成服务的基本信息对象Instance...

分布式： 分布式计算是计算机科学中一个研究方向，它研究如何把一个需要非常巨大的计算能力才能解决的问题分成许多小的部分，然后把这些部分分配给多个计算机进行处理，最后把这些计算结果综合起来得到最终的结果。分布式网络存储技术是将数据分散地存储于多台独立的机器设备上。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，不但解决了传统集中式存储系统中单...

java内存模型(Java Memory Model，JMM)是java虚拟机规范定义的，用来屏蔽掉java程序在各种不同的硬件和操作系统对内存的访问的差异，这样就可以实现java程序在各种不同的平台上都能达到内存访问的一致性。可以避免像c++等直接使用物理硬件和操作系统的内存模型在不同操作系统和硬件平台下表现不同，比如有些c/c++程序可能在windows平台运行正常，而在linux平台却运行有...

虚拟机是一种抽象化的计算机，通过在实际的计算机上仿真模拟各种计算机功能来实现的。Java虚拟机有自己完善的硬体架构，如处理器、堆栈、寄存器等，还具有相应的指令系统。Java虚拟机屏蔽了与具体操作系统平台相关的信息，使得Java程序只需生成在Java虚拟机上运行的目标代码（字节码），就可以在多种平台上不加修改地运行。它是一款软件，用来执行一系列虚拟计算指令，大体上虚拟机可以分为系统虚拟...

代理模式代理（Proxy）是一种设计模式，提供了对目标对象另外的访问方式；即通过代理访问目标对象。 这样好处： 可以在目标对象实现的基础上，增强额外的功能操作。(扩展目标对象的功能)。代理模式的关键点： 代理对象与目标对象。静态代理 1） 代理对象，要实现与目标对象一样的接口； 2） 举例: 保存用户(模拟) D...

什么是Springspring就是把每个bean(实体类)与bean的关系全部交给第三方容器进行管理。那么这个容器就是spring，整个对象的生命周期管理的。spring的核心 ioc（控制）、di(依赖)、aop（面向切面编程）di与ioc区别是什么？di做注入、ioc是创建对象。。spring 与其他框架整合Spring框架，可以解决对象创建以及对象之间依赖关系的一种框架。...

什么是反向代理?反向代理（Reverse Proxy）方式是指以代理服务器来接受internet上的连接请求，然后将请求转发给内部网络上的服务器，并将从服务器上得到的结果返回给internet上请求连接的客户端，此时代理服务器对外就表现为一个反向代理服务器。启动一个Tomcat 127.0.0.1:8080使用nginx反向代理 8080.itmayiedu.com 直接跳转到127....

什么是Nginxnginx是一款高性能的http 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器。由俄罗斯的程序设计师Igor Sysoev所开发，官方测试nginx能够支支撑5万并发链接，并且cpu、内存等资源消耗却非常低，运行非常稳定，所以现在很多知名的公司都在使用nginx。nginx应用场景1、http服务器。Nginx是一个http服务可以独立提供http服务。...

01 什么是数据湖如果需要给数据湖下一个定义，可以定义为这样：数据湖是一个存储企业的各种各样原始数据的大型仓库，其中的数据可供存取、处理、分析及传输。数据湖从企业的多个数据源获取原始数据，并且针对不同的目的，同一份原始数据还可能有多种满足特定内部模型格式的数据副本。因此，数据湖中被处理的数据可能是任意类型的信息，从结构化数据到完全非结构化数据。企业对数据湖寄予厚望，希望它能帮助用户快速...

作为缓存系统都要定期清理无效数据，就需要一个主键失效和淘汰策略. 在Redis当中，有生存期的key被称为volatile。在创建缓存时，要为给定的key设置生存期，当key过期的时候（生存期为0），它可能会被删除。1、影响生存时间的一些操作 生存时间可以通过使用 DEL 命令来删除整个 key 来移除，或者被 SET 和 GETSET 命令覆盖原来的数据，也就是说，修改ke...

3台虚拟机均进行以下操作：// 解压下载好的kafka压缩包并重命名cd /usr/localwget http://mirror.bit.edu.cn/apache/kafka/1.0.0/kafka_2.11-1.0.0.tgztar -zxvf kafka_2.11-1.0.0.tgzmv kafka_2.12-0.11.0.0 kafka// 修改配置文件vi ./kaf...

1.每台服务器节点上安装jdk1.8环境使用java-v命令测试2.每台服务器节点上安装Zookeeper1.下载并且安装zookeeper安装包wget https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.310/zookeeper-3.310.tar.gz2. 解压安装包tar -zxvf zoo...

著作权法客体著作权法及实施条件的客体是指受保护的作品。这里的作品，是指文学、艺术和自然科学、社会科学、工程技术领域内具有独创性并能以某种有形形式复制的智力成果。作品类型其中包括以下 9 种类型。 文字作品：包括小说、诗词、散文、论文等以文字形式表现的作品。 口述作品：是指即兴的演说、授课、法庭辩论等以口头语言形式表现的作品。 音乐、戏剧、曲艺、舞蹈、杂技作品。 美术、摄影作品。 电影、电视...

Kafka作为消息系统Kafka streams的概念与传统的企业消息系统相比如何？传统的消息系统有两个模块: 队列 和 发布-订阅。 在队列中，消费者池从server读取数据，每条记录被池子中的一个消费者消费; 在发布订阅中，记录被广播到所有的消费者。两者均有优缺点。 队列的优点在于它允许你将处理数据的过程分给多个消费者实例，使你可以扩展处理过程。 不好的是，队列不是多订阅者模式的—一旦一...

centos 安装使用redis下载redis安装包wget http://download.redis.io/releases/redis-4.0.6.tar.gzs第二步：解压压缩包tar -zxvf redis-4.0.6.tar.gz第三步：yum安装gcc依赖yum install gcc[root@iZwz991stxdwj560bfmadtZ ...

故障模型下面介绍几种常用的故障模型。1．逻辑级的故障模型固定型故障指电路中元器件的输入或输出等线的逻辑固定为 0 或固定为 1，如某线接地、电源短路或元件失效等都可能造成固定型故障。短路故障是指一个元件的输出线的逻辑值恒等于输入线的逻辑值；元件的开路故障是元件的输出线悬空，逻辑值可根据具体电路来决定。桥接故障指两条不应相连的线连接在一起而发生的故障。2．数据结构级的故障故障在数...

目前，最基本的网络分隔手段就是防火墙，它也是目前用来实现网络安全的一种主要措施。1．防火墙的基本原理防火墙通常使用的采用包过滤、状态检测、应用网关等几种方式控制网络连接。包过滤防火墙是一种简单而有效的安全控制技术，它根据在防火墙中预先定义的规则（允许或禁止与哪些源地址、目的地址、端口号有关的网络连接），对网络层和传输层的数据包进行检查，进而控制数据包的进出。状态检测防火墙改进了包过滤防...

OSI 安全架构是一个面向对象的、多层次的结构，它认为安全的网络应用是由安全的服务实现的，而安全服务又是由安全机制来实现的。1． OSI 安全服务针对网络系统的技术和环境， OSI 安全架构中对网络安全提出了 5 类安全服务，即对象认证服务、访问控制服务、数据保密性服务、数据完整性服务、禁止否认服务。（1）对象认证服务。对象认证服务又可分为对等实体认证和信源认证，用于识别对等实体...

知识管理知识管理流程的目标是将运维生产过程中产生的各类信息所包含的知识最大限度的提取、保留，通过评审后加以应用，包括：实现知识共享，实现知识转化，避免知识流失，提高运维响应速度和质量，挖掘、分析IT应用信息。知识管理包括IT服务经理对知识的获取、共享、保留和评审。知识获取和提取的方法及途径IT服务经理首先要考虑本项目需要的知识，能够从哪些方面获取。将项目相关知识进行分类，可能...

计算机病毒的检测与清除1．特征码检测所谓特征码查毒法，就是在获取病毒样本后，提取出其特征码，（例如，杨基病毒的特征码是 16 进制的“F4 7A 2C 00”，快乐时光病毒中的“Fun Time”字符串等），然后通过该特征码对目标文件或内存等进行扫描。如果发现这种特征码，就说明感染了这种病毒，然后针对性地清除病毒。2．校验和检测先计算正常文件的内容和正常的系统扇区数据的校验和，将该...

计算机病毒的特征计算机病毒多种多样，但是它们都具有共同的特征，即传染性、非授权性、潜伏性和破坏性。计算机病毒的传染性是指病毒具有把自身复制到其他系统或文件等宿主中去的能力，这是病毒的基本特征。非授权性是指病毒程序的执行不需要得到用户的同意，对用户来说是未知的。潜伏性是病毒生存的必要条件，即病毒潜伏在系统中而不被人们所发觉。破坏性是指病毒在一定条件下可以自动触发，并对计算机实施破...

IPSec 协议简述在 TCP/IP 协议中，对 IP 数据包没有提供任何安全保护，攻击者可以通过网络嗅探、 IP欺骗、连接截获等方法来攻击正常的 TCP/IP 通信。因此，通信过程中会存在以下危险：数据并非来自合法的发送者、数据在传输过程中被非法篡改、信息内容已被人窃取等。IPSec（IP Security）协议把密码技术应用在网络层，以向信息的发送方和接收方提供源地址验证、数据传...