java
Daw3on
崇拜是距离了解最遥远的感情
展开
-
Hadoop高可用HA搭建
hadoop2.0已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。最新的hadoop-2.6.4又增加了YARN HA注意:apache提供的hadoop-2.6.4的安装包是在32位操作系统编译的,因为hadoop依赖一些C++的本地库,所以如果在64位的操作上安装hadoop-2.6.4就需要重新在64操作系统上重新编译1.修改Linux主机名2.修改IP3.修改主机名和IP的映射关系 /etc/hosts######注意######如果你们公司是租用的服务器或是使用的原创 2020-12-21 10:03:18 · 233 阅读 · 0 评论 -
nginx 负载均衡
一 准备条件三台虚拟机nginx 192.168.137.5Tomcat 192.168.137.6Tomcat 192.168.137.7配置 IP hostname 关闭防火墙其中两台启动tomcat 部署项目第三台安装nginx安装nginx:1: 安装:缺少GCC编辑器:yum -y install pcre*yum -y install openssl*yum -y install gccyum -y install gcc-c++yum -原创 2020-12-21 09:53:30 · 194 阅读 · 0 评论 -
Hadoop 集群搭建(3)
hadoop基本配置。1三台主机。192.168.137.44 master MAC地址不同192.168.137.45 server01 MAC地址不同192.168.137.46 server02 MAC地址不同1.1主机配置:1.1.1IP地址#vi /etc/sysconfig/network-scripts/ifcfg-eth0重启网卡:#service network restart查看网卡#ifconfig原创 2020-12-03 17:52:55 · 161 阅读 · 0 评论 -
Hadoop核心模块——HDFS详解(2)
1.HDFS前言2.HDFS( Hadoop distributed File System )设计思想分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析;在大数据系统中作用:为各类分布式运算框架(如:mapreduce,spark,hive , tez,……)提供数据存储服务重点概念:文件切块,副本存放,元数据HDFS的概念和特性首先,它是一个文件系统,用于存储文件,通过统一的命名空间——目录树来定位文件其次,它是原创 2020-12-03 17:47:18 · 481 阅读 · 0 评论 -
Hadoop 入门 基础概念及讲解(1)
1.1 什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台2.HADOOP提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理3.HADOOP的核心组件有A.HDFS(分布式文件系统)B.YARN(运算资源调度系统)C.MAPREDUCE(分布式运算编程框架)4.广义上来说,HADOOP通常是指一个更广泛的概念——HADOOP生态圈1.2 HADOOP产生背景1.HADOOP最早起源于Nutch。Nutch的设计目标是构建一个大型的全网搜索引擎原创 2020-12-03 17:42:17 · 342 阅读 · 0 评论 -
Spring概述(2)———IOC和DI
IOC和DI2.1.1 IOC(Inversion of Control):反转控制在应用程序中的组件需要获取资源时,传统的方式是组件主动的从容器中获取所需要的资源,在这样的模式下开发人员往往需要知道在具体容器中特定资源的获取方式,增加了学习成本,同时降低了开发效率。反转控制的思想完全颠覆了应用程序组件获取资源的传统方式:反转了资源的获取方向——改由容器主动的将资源推送给需要的组件,开发人员不需要知道容器是如何创建资源对象的,只需要提供接收资源的方式即可,极大的降低了学习成本,提高了开发的效率。这种行原创 2020-11-02 09:08:39 · 260 阅读 · 2 评论 -
Spring框架———概述(1)
1 Spring概述1)Spring是一个开源框架2)Spring为简化企业级开发而生,使用Spring,JavaBean就可以实现很多以前要靠EJB(Enterprise JavaBean)才能实现的功能。同样的功能,在EJB中要通过繁琐的配置和复杂的代码才能够实现,而在Spring中却非常的优雅和简洁。3)Spring是一个IOC(控制反转)(DI)和AOP(面向切面编程)容器框架。4)Spring的优良特性① 非侵入式:基于Spring开发的应用中的对象可以不依赖于Spring的API(实原创 2020-11-02 08:23:49 · 243 阅读 · 0 评论 -
关于MyBatis中——resultMap详解
resultMap1)自定义resultMap,实现高级结果集映射2)id :用于完成主键值的映射3)result :用于完成普通列的映射4)association :一个复杂的类型关联;许多结果将包成这种类型5)collection : 复杂类型的集使用方式1.select标签 定义resultMap 注意不是 resultType <select id="selectDE" resultMap="selectDE"> select d.deptid,d.原创 2020-10-26 08:25:18 · 1599 阅读 · 0 评论 -
关于MyBatis中——settings设置详解
settings是MyBatis中极为重要的调整设置 ,他们会改变MyBatis的运行时行为。包含如下的setting设置:<settings><setting name="cacheEnabled" value="true"/><setting name="lazyLoadingEnabled" value="true"/><setting name="multipleResultSetsEnabled" value="true"/><s原创 2020-10-19 20:28:00 · 1919 阅读 · 8 评论