weixin_46579297的博客

查看当前服务起的gcc 版本：因为redis需要c++编译器编译。centos 7 系统自带的gcc 版本为：4.8.5。进入解压后的redis目录（这里采用tar包安装）这时查看一下/etc/yum.repo.d/下面的文件，会发现多了。这时候我们就需要升级一下gcc 版本，在网上搜到的解决方案会提示。多了两个yum源，但是连接不到这个源，所以解析不到。当我执行了这个命令时，会遇到下面如此情况。当执行make命令时。然后进入到redis目录下，执行。需要更改一下这两个文件中的源。redis 安装成功。

核心概念：Client：发起读写请求的角色，面向hbase client 编程 首先hbase查询Meta表，找到读或写的数据的region区域位置信息 然后向region对应的HRegionServer上发送读写请求 zookeeper：存储Hbase源数据放置的位置 负责HMaster的选择和主备切换 负责对HRS进行监控 对Roo

基本使用 sql语言show databases; 查看数据库 ; 不能省略优点：缺点：HIve架构设计特别说明：hive2.2以后版本变化较大，去掉了HWI模块，HiveCLI模式也直接采用了beeline链接从上图可以看出，Hive的体系结构分为以下几部分:Hive 基础应用1。Hive基础概念1.hive 数据模型2。HiveSqlDDL建表说明1 元数据：描述数据的数据2.表分类：主要分内表和外表 1.内表：元数据和数据本身均被Hive管理。删除表则全部删除 2.外表：元数据被hive管理，数据本身

Flink

1.Spark架构设计1.1架构设计图1.2 相关术语名词解释1、RDD（Resillient Distributed DataSet）弹性分布式数据集，是对数据集在Spark存储和计算过程中的一种抽象是一组制度，可分区的分布式数据集和一个RDD包含多个分区Partition（相当于MapReduce中的INputSplit），分区是依照一定的规则的，将具有相同规则的属性的数据记录放在一起横向上课切分并行计算，以分区Partition为切分后的最小存储和计算单元。纵向上可

1 是什么：Apache Hadoop YARN (Yet Another Resource Negotiator,另一种资源协调者)一种新的Hadoop资源管理器，一个通用资源管理系统为上层提供统一的资源管理与任务调度即监控，提高了集群管理效率，资源使用率，数据共享效率2 MRv1：包括三个部分：运行是环境（JobTracker和TaskTracker）编程模型（MapReduce）和数据处理引擎（Map，Reduce任务）JobTracker主要功能： 资源管理，协调平衡集群中

1HDFS数据格式详解：1.1文件格式分为面向行和面向列的两大类文件格式面向行 ： 文本文件格式（.TXT） 可切分 优点：查看方便编辑简单 缺点：无压缩占空间打，传输业利达，数据解析开销大 适用场景：学习练习使用面向行： 序列文件格式（.seq） 可切分 优点：衍生支持，二进制kv存储，支持行和块压缩 缺点：本地查看不方便，小文件合并成KV结构后不易查看内部数据 适用场景：生产环境使用。map输出的默认文件格式面向列：（.rc）可切分 优点：数据加载快，查询快，空间利用率高，高负载

是什么： 一种编程模型，基于集群的高性能并行计算平台，可以使用普通服务器构成一个包 数十数百甚至数千个节点的分布式和并行计算集群2：基本特点：分布可靠，对数据集的操作分发给集群中的多个节点实现可靠性，每个节点周期性返回他完成的任务和最新的状态封装了实现细节，基于框架API变成，面向业务展开分布式编码提供了跨语言编程的能力3：主要功能3.1 数据划分和计算任务调度：系统自动将一个作业(Job)待处理的大数据划分为很多个数据块，每个数据块对应于一个计算任务(Tas...

1Hadoop核心组件与应用HDFS：分布式海量数据存储功能Yarn：提供资源调度与任务管理功能资源调度：根据申请的计算任务，合理分配集群中的计算节点任务管理：任务在执行过程中，负责过程监控，状态反馈，任务在调度等工作MapReduce:分布式并行编程模型和计算框架Hive：提供数据摘要和查询的数据仓Streaming:解决非Java开发人员使用Hadoop平台语言的问题Hbase:基于列式存储模型的分布式数据库Zookeeper:分布式协同服务2Hadoo.

1关闭linux服务器方法一：halt方法二：shutdown -h now方法三：poweroff2如何重启linux服务器方法一：reboot方法二：shutdown -r now3查看当前用户whoami切换用户： su [用户名]添加用户： useradd4修改密码： passwd5切换目录：cd6创建目录：mkdir7查看目录文件或者子目录ls8查看当前路径：pwd9创建文件touch10 编辑 ：vi : 进入.

一、介绍1.优势①创建独⽴的 Spring 应⽤程序②嵌⼊的 Tomcat，⽆需部署 WAR ⽂件③ 简化 Maven 配置④⾃动配置 Spring⑤提供⽣产就绪型功能，如指标，健康检查和外部配置2.特性①为基于 Spring 的开发提供更快的⼊⻔体验②开箱即⽤，没有代码⽣成，也⽆需 XML 配置。同时也可以修改默认值来满⾜特定的需求③提供了⼀些⼤型项⽬中常⻅的⾮功能特性，如嵌⼊式服务器、安全、指标，健康检测、外部配置等④Spring Boot 并不是对 Spring 功能上的增强，⽽

1 三层架构介绍咱们开发服务器端程序，一般都基于两种形式，一种C/S架构程序，一种B/S架构程序 使用Java语言基本上都是开发B/S架构的程序，B/S架构又分成了三层架构 三层架构 表现层：WEB层，用来和客户端进行数据交互的。 业务层：处理公司具体的业务逻辑的。 持久层：用来操作数据库的。 2 MVC设计模式介绍MVC全名是Model View Controller 模型视图控制器，每个部分各司其职。 Model：数据模型，JavaBean的类，用来进行数据封装。 Vie

AOPSpring 是解决实际开发中的一些问题，而 AOP 解决 OOP 中遇到的一些问题.是 OOP 的延续和扩展. 使用面向对象编程 （ OOP ）有一些弊端，当需要为多个不具有继承关系的对象引人同一个公共行为时，例如日志、安全检测等，我们只有在每个对象里引用公共行为，这样程序中就产生了大量的重复代码，程序就不便于维护了，所以就有了一个对面向对象编程的补充，即面向方面编程 （ AOP ), AOP 所关注的方向是横向的，区别于 OOP 的纵向。2.1 为什么学习 AOP 在不修改源...

IOC注解:XMl方式:优点:1.XML配置方式进一步降低了耦合,使得应用更加容易扩展,及时对配置文件进一步修改也不需要工程进行修改和重新编译2.在处理大的业务量的时候，用XML配置应该更加好一些。因为XML更加清晰的表明了各个对象之间的关系，各个业务类之间的调用。同时spring的相关配置也能一目了然。缺点: 配置文件读取和解析需要花费一定的时间,配置文件过多的时候难以管理,无法对配置的正确性进行校验,增加了测试难度Annotation配置优点:1.在class文件中, 可

Spring是什么 Spring是分层的 Java SE/EE应用 full-stack 轻量级开源框架，以 IoC（Inverse Of Control：反转控制）和 AOP（Aspect Oriented Programming：面向切面编程）为内核。 提供了展现层 SpringMVC 和持久层 Spring JDBCTemplate 以及业务层事务管理等众多的企业级应用技术 ，还能整合开源世界众多著名的第三方框架和类库，逐渐成为使用最多的Java EE 企业应用开源框架。优点:1:方便解耦

1mybatis中的连接池1.1什么是连接池数据库连接是一项有限的昂贵资源，一个数据库连接对象均对应一个物理数据库连接，每次操作都打开一个物理连接，使用完都关闭连接，这样造成系统的性能低下。数据库连接池的解决方案是在应用程序启动时建立足够的数据库连接，并将这些连接组成一个连接池，由应用程序动态地对池中的连接进行申请、使用和释放。对于多于连接池中连接数的并发请求，应该在请求队列中排队等待。并且应用程序可以根据池中连接的使用率，动态增加或减少池中的连接数。总结： 连接池是面向数据库..

1 #和$的区别#{}表示一个占位符号通过#{}可以实现 preparedStatement 向占位符中设置值，自动进行 java 类型和 jdbc 类型转换， #{}可以有效防止 sql 注入。 #{}可以接收简单类型值或 pojo 属性值。 可以自动对值添加 ’ ’ 单引号${}表示拼接 sql 串通过${}可以将 parameterType 传入的内容拼接在 sql 中且不进行 jdbc 类型转换， ${}可以接收简单类型值或 pojo 属性值，如果 parameterTyp.

1什么是框架1.1什么是框架框架（Framework）是整个或部分系统的可重用设计，表现为一组抽象构件及构件实例间交互的方法;另一种定义认为，框架是可被应用开发者定制的应用骨架。前者是从应用方面而后者是从目的方面给出的定义。简而言之，框架其实就是某种应用的半成品，就是一组组件，供你选用完成你自己的系统。简单说就是使用别人搭好的舞台，你来做表演。而且，框架一般是成熟的，不断升级的软件。1.2框架解决什么问题框架要解决的最重要的一个问题是技术整合的问题，在J2EE的框架中，有...

## 会话技术1 会话: 一次会话中包含多次请求和响应 * 一次会话: 浏览器第一次给服务器资源发送请求,会话建立,直到有一方断开为止2 功能: 在一次会话的范围内的多次请求间,共享数据3 方式: 1 客户端会话技术 :cookie 2 服务器端绘画技术 : session## cookie 概念: 客户端会话技术,将数据保存到客户端 2 快速入门 : * 使用...

1 jQuery 介绍1) 与JS比较js: 1 入口函数只有一个 window.onload2 浏览器兼容性: 非常让人头疼 比如textContent 虽然作为标准方法但是只支持IE8+以上的浏览器3 DOM错综复杂,实现简单的效果很麻烦4 代码容错性差 出错后导致后面的代码不执行JQuery 1 市场占有率稳步上升 代码比较少,功能强大2 DOM 比较强大 事件处理, 万全解决了浏览起的兼容性问题3 Ajax 操作比较好2 什么是jQuery1、jQue...