暗黑世界

零：前言 gitlab在使用过程中，如果需要修改密码，需要同时修改网站与客户端两侧的密码。下面开始介绍具体操作过程。一：修改服务端密码 登录gitlab网站之后，点击右上角的头像图标，在弹出页中点击“Setting”，如下图所示 第一步，首先确认自己的账号的邮箱密码。备用，如下图所示 进入如下图所示页面，点击下图中的“password”链接，修改密码即可。至此，网页版的各人密码修改完...

ceshiceshi

一、规划工作 操作系统的安装参考我的这个帖子 机器规划如下ip 服务器名称 作用 其他 192.168.122.31 mysql1 安装mysql和PostgreSql 无 二、准备安装包 下载安装包 官网地址 如下图所示，点击页面最下方的“file brower”进入下载页 点击如下图所示的“source”，进入选择版本的页面（请自行选...

零：准备工作 0.1：下载keepalived源码包点击这里 0.2：安装工具软件yum install curl gcc openssl-devel libnl3-devel net-snmp-devel libnfnetlink-devel -y 0.3：服务器环ip 服务器名称 作用 备注 192.168.122.29 proxy1 nginx、keepalived keepalived 主 192.168...

零：说在前面 在portainer之前，我使用过几款docker的可视化软件。效果平平，功能一般 比如DockerUI，在我来看它更像一款统计型工具，并不支持从界面创建镜像或容器等操作 再比如shipyard，有人说这个很专业很不错，但是装上之后觉得功能还不如portainer多呢 所以，我最终选择了portainer。它既能从界面创建镜像和容器，同时还有不错的管理功能。一：安装1.1：搜索 执行明林“docker sear...

零：背景 众所周知，gitlab的数据存储于PostgreSql数据库。具体这种数据库的作用和彩虹屁不在本文体现 本文只讨论如何从本地连接到服务器端的PostgreSql数据库。进而获取一：准备二：配置...

一：备份与恢复:1.1：备份 在gitlab运行时，执行命令gitlab-rake gitlab:backup:create即可备份，效果如下[root@gitlab1 ~]# gitlab-rake gitlab:backup:create2020-08-17 10:26:27 +0800 -- Dumping database ... Dumping PostgreSQL database gitlabhq_production ... [DONE]2020-08-17 1...

一、准备工作 操作系统的安装参考我的这个帖子 机器规划如下 ip 名称 作用 其他 192.168.122.21 xxCentos7One redis（主） 192.168.122.22 xxCentos7Two redis（从） 192...

一：安装包来源 点击这里下载Jenkins二：安装与配置#下载rpm包wget http://mirrors.jenkins-ci.org/redhat-stable/jenkins-2.235.1-1.1.noarch.rpm#安装rpm -ivh jenkins-2.235-1.1.noarch.rpm 安装很快，只有两三行提示100%的信息。 修改配置，执行vim /etc/sysconfig/jenkins，主要修改如下几处内容...

centos7常用的软防火墙，主要是firewalld和iptables。这二者的底层实现都是使用了netfilter。 下面说说我对这二者的区别的理解。 第一：方式不同。 firewalld是通过zone的方式来过滤数据。而iptables是通过表和链的方式过滤数据 1.1：对于firewalld的zone，我理解就是把同一类的网络数据来源放到一个zone中，然后对不同的zone做不同的放行或阻止操作。...

零：插件安装 在正式配置之前，需要安装或升级“Email Extension Plugin”插件。 在“Manage Jenkins -- Manage Plugins”中安装即可。一：全局邮件设置 进入“Manage Jenkins -- Configure System ”，配置两个地方 2.1：系统管理员邮箱 如下图所示。主要配置“系统管理员邮件地址”即可 2.2：发信人邮箱 如下图所示，需要修改...

一：建SpringBoo工程 1.1：建springboot的样例工程有多重方式。我选用的是使用官方帮助生成样例工程的方式。 访问二：maven打包三：部署到本地虚拟机四：踩坑

一：类及类之间关系 本文一共出现了五个类。 1：自定义注解 EnumValidAnnotation 2：操作工具类 EnumValidtor 3：枚举类 OrganizationStatusEnum 4：VO类型实体类 OrganizationAbstractVO 5：controller层 Organizatio...

一：结论1：普通查詢沒有鎖。2：查詢可以加共享鎖，如select 。。。 lock in share mode。這樣就加上了共享鎖。3：查詢可以加排它鎖，如select 。。。 for update。4：增刪改默認加排它鎖。無需我們顯示指定。5：行記錄上有排他鎖的時候，也可以被普通查詢查到。但查到的是之前的老數據。6：若一個查詢中連續加了多個共享鎖，那麼也要等最後一個共享鎖...

二、静默安装 静默安装，指的是不借助操作界面，通过修改%ORACLE_HOME%/database/response 下配置文件的方式，安装数据库 涉及到的配置文件包括以下几个：#安装过程的引导配置[oracle@xxcentos7four oracle]$ db_install.rsp#创建数据库的引导配置[oracle@xxcentos7four ora...

一、准备环节1.1、系统与硬件环境 因为是实验环境，所以采用 2核4G，40G的配置 软件环境采用CentOS7。由于安装方式分为界面方式和静默方式，因此建议采用GNOM环境的CentOS系统 jdk是必要条件，切不要忘。如何配置就不在这里赘述了。 以下操作都用root用户进行1.2、下载 点击这里进入下载列表页...

一、安装运行1.1、下载MongoDB最新版 下载地址一 下载地址二1.2、解压改名#下载[root@localhost bin]# wget http://downloads.mongodb.org/linux/mongodb-linux-x86_64-rhel70-v4.2-latest.tgz#解压[root@loca...

一：安装maven1.1：下载maven 具体的版本可以到官网找到当时最优的那一版，然后复制其下载地址，使用wget下载即可 cd /usr/local/ wget http://mirrors.tuna.tsinghua.edu.cn/apache/maven/maven-3/3.6.3/binaries/apache-maven-3.6.3-bin...

零：铺垫 Kibana作为ELK中的K，起到管理ElasticSearch并提供可视化界面的功能。建议安装版本与ElasticSearch一致一、准备工作 ElasticSearch的安装及服务器的规划 请点击这里 为了方便起见，这次操作用户和安装目录与ElasticSearch一致，都是esuser。 老版本貌似还需要安装...

一、准备工作 操作系统的安装参考我的这个帖子 1.0：机器规划如下，这次是单机版IP 名称 作用 其他 192.168.122.21 xxCentos7One ElasticSearch、Kibana jdk1.8 1.1：因为ElasticSearch从5.0之后，不允许root用户使用，因此要先创建...

一、建用户与密码#建用户[root@xxCento7One config]# adduser esuser#为esuser用户赋予密码[root@xxCento7One home]# passwd esuserChanging password for user esuser.New password: Retype new password: passwd: all aut...

一、环境准备 先说几个前置工具的安装 1.1：gcc 安装 安装 nginx 需要先将官网下载的源码进行编译，编译依赖 gcc 环境，如果没有 gcc 环境，则需要安装：yum install gcc-c++ 1.2： PCRE pcre-devel 安装 PCRE(Perl Compatible Regular Expres...

书接前文，服务器的使用和安排请参考本主题的第一篇，点击这里 零：原理简介 redis的主从原理： 1：是由从发起的，定时从“主”redis去获取rdb快照的行为。主是被动接受方。 2：“主”可以通过设置密码和ip等方法，来限制连接到它上面的“从”redis。同时“主”可以感知有谁连接到子级上面。 演进思想： 1：...

汇总贴，记录了自己对redis的一些感想。当前redis版本4.0。一、关于主从复制1.1：主从的关联 关于“主”redis，不需要配置和记录哪些redis是它的从。我们只需要在“从”上配置它的“主”即可。 配置方式分为静态和动态配置。静态配置：在“从”redis的redis.conf文件中，显示指定主redis的ip和端口，如下所示slaveo...

关于RDB和AOF的优缺点和性能比较，会在后面单章说明，本文只说搭建方式一：简介RDB和AOF RDB：快照方式的持久化。快照只有一份，新的快照会覆写老的快照。 AOF：redolog方式的持久化。会将redis中的每一次增删改操作追加到redolog中，以便后续重做。二：RDB的说明与搭建2.1：说明 打开 redis.conf ...

redis的基本介绍就不在这里赘述了，直接上例子一、准备工作 操作系统的安装参考我的这个帖子 机器规划如下 ip 名称 作用 其他 192.168.122.21 xxCentos7One redis（主） ...

零、写在前面与规划 规划和预安装的软件都在这一篇中 kafka集群的安装（一） 我们这一篇直接使用上一篇的环境，安装RabbitMq相关的内容即可 RabbitMq是基于erLang开发的，因此RabbitMq的集群也一定依赖erLang的集群能力。我们只需要在erLang的cookie激活即可。一、RabbitMq安装 Rabbi...

零、无语的开始 最大的一个坑就是MySQL8的默认字符集，我采用的应该是默认的UTF8mb4而非UTF8，所以一直不成功 查了些资料，UTF8mb4专门用来兼容4字节的Unicode。同时这家伙与传统的UTF8有出入，所以以后尽量别用一、开始踩坑 1、jdk问题STATUS | wrapper | 2018/06/05 11:33:29 | --&g...

一、Java内存模型想要理解volatile为什么能确保可见性，就要先理解Java中的内存模型是什么样的。Java内存模型规定了所有的变量都存储在主内存中。每条线程中还有自己的工作内存，线程的工作内存中保存了被该线程所使用到的变量（这些变量是从主内存中拷贝而来）。线程对变量的所有操作（读取，赋值）都必须在工作内存中进行。不同线程之间也无法直接访问对方工作内存中的变量，线程间变量值的传递均需...

一、铺垫本文不说那些高端名词，我打算用一些问题引出一些接地气的东西问题一：一般我们对hash的理解，是不同对象的hash不同，甚至是同一个对象的不同命实例的hash不同那么问题是：“如果在一个循环中，对某个对象创建了多个同名的实例，那么它们的hash值会否相同”要回答这个问题，直接上个图大家就了解了javadoc上说的很明白了，对Object的获取hash值操作，不依赖...

原文地址點擊此處先說說Dark自己的理解吧。說白了，加鎖和解鎖的首要條件是確保操作的ACID，否則就會有可能引入諸如死鎖這類的問題前言分布式锁有多种实现方式。本篇博客将介绍基于Redis的分布式锁。可靠性首先，为了确保分布式锁可用，我们至少要确保锁的实现同时满足以下四个条件：互斥性。在任意时刻，只有一个客户端能持有锁。 不会发生死锁。即使有一个客户端在持有锁的期...

1、Spring理念剖析Spring总共有十几个组件，但真正核心的只有三个：Core、Context和Bean。我们将从这三个组件入手来分析Spring。Spring之中最重要的当属Bean了，Spring实际上就是面向Bean的编程，Bean对于Spring的意义就好比Object对于OOP的意义一样。那么，三个核心组件之间是如何协同工作的呢？如果把Bean比作一场演出中的演员，那么Co...

零：说在前面众所周知，Oracle中，对于大量增删改操作的表需要定时进行表分析，以便回收被标记废弃的磁盘空间，缩减表的实际大小。对于异常状态的索引，也需要定时对索引进行重构。MySQL中亦有类似需求。实现的命令有如下这些：ANALYZE、OPTIMIZE、CHECK、REPAIR。一：索引的重建第一步：SHOW INDEX通过命令，我们可以看到索引相关信息，同时可以通...

原文是一個思想性和邏輯性很強的文章，對我有很大啟發。先说dark对本文的理解吧。其实重点就是，在生产者与消费者线程/进程之间，引入了缓冲区的概念。这个缓冲区能解除生产者端与消费者端（后面统称为“两端”）之间的强耦合。也解除了两端间的阻塞。但是由于多了一个中间环节，那么就会在两端增加一定的额外开支。比如封包拆包等工作。这一设计模式既可以用于线程级的通信，也可用于进程级的通信前...

读了《Netty权威指南第二版》的1.1.1章中关于Unix编程对IO模型的分类，有了一点自己的感想。觉得虽然书上说的挺好但不够直观，所以dark就通过五种不同的吃饭经历来理解这五种模型，不废话，上干货UNIX支持的五種IO模型，分別為：1：阻塞IO相當於食客到野攤兒上吃飯。告訴完我要吃什麼之後，就只能全程圍觀廚師做飯雖然沒人加塞但也不能離開。直到自己的那份飯菜做好再拿走為止...

零：写在前面protobuf是netty中用于解决粘包问题的一种方案。这种方案使用的是netty的基于协议传输的思想。netty的基础与粘包问题的几种解决方法会在后续给出。进入正题。一：下载protobufprotobuf有几个渠道可以下载，比如这个源码版 再比如这个直接就能用的exe版 都是下了就能用系列还有maven版本。下面会针对后两种分别解释二：配置与...

原文地址點擊此處背景介绍近期在看《password学与网络安全》相关的书籍，这篇文章主要具体介绍一下著名的网络安全协议SSL。在開始SSl介绍之前，先给大家介绍几个password学的概念和相关的知识。1、password学的相关概念password学(cryptography)：目的是通过将信息编码使其不可读，从而达到安全性。明文(plain text)：发送人...

还是老规矩，转载的先说一下自己的感想。其实通篇主要表达的思想就是：加了包装类（BufferedInputStream）之后，程序是先把硬盘中的文件读取到内存的缓冲区。然后再由程序从内存中读取。否则不加这一层缓冲的话，程序会分块的从存储介质中分批读取文件，那样速度就慢了很多。原文链接点击此处因为和输入流与之对应的还有输出流（即OutputStream），在此只针对输入流InputS...

一、背景与思路其实标题中想要干的事，就是让你的工程同时支持多个版本的request请求不说怎么玩儿，先说说这么玩儿的必要性把。我感觉真的没啥卵用。因为这么做的一个大前提，一定是你的项目的持续时间会很长。同时在这个期间内，各种终端（比如手机）的硬件版本会同时存在多个版本的情况，我们既要让老用户开开心心的继续使用老版本，还要让新用户痛痛快快的获得最新体验，标题中的需求才有意义。否则，这个需...

原文地址點擊此處1.代理模式代理(Proxy)是一种设计模式,提供了对目标对象另外的访问方式;即通过代理对象访问目标对象.这样做的好处是:可以在目标对象实现的基础上,增强额外的功能操作,即扩展目标对象的功能.这里使用到编程中的一个思想:不要随意去修改别人已经写好的代码或者方法,如果需改修改,可以通过代理的方式来扩展该方法举个例子来说明代理的作用:假设我们想邀请一位明星,那么并不是直接...

分享个我自己的链接吧https://pan.baidu.com/s/12uIc7ZK2qVEP9Y2co30zrA 百度網盤，全免費

觉得说的啰嗦的，可以直接看“三、结论”那段一、static关键字的理解         被static修饰的变量或者方法，可以被当前工程的任意类在任意地方使用。         这是因为，它们被放入到了JVM堆中的永久代里面         因此，带static关键字的内容不会被回收，不会被重复分配内存，直至服务下次被重启。。。二、静态与非静态锁的区别         这里...

原文地址點擊此處 理解锁的基础知识如果想要透彻的理解java锁的来龙去脉，需要先了解以下基础知识。基础知识之一：锁的类型锁从宏观上分类，分为悲观锁与乐观锁。乐观锁乐观锁是一种乐观思想，即认为读多写少，遇到并发写的可能性低，每次去拿数据的时候都认为别人不会修改，所以不会上锁，但是在更新的时候会判断一下在此期间别人有没有去更新这个数据，采取在写时先读出当前版本号，然后加锁操...

原文地址点击此处 信号的传输总要符合一定的协议(protocol)。比如说长城上放狼烟，是因为人们已经预先设定好狼烟这个物理信号代表了“敌人入侵”这一抽象信号。这样一个“狼烟=敌人入侵”就是一个简单的协议。协议可以更复杂，比如摩尔斯码(Morse Code)，使用短信号和长信号的组合，来代表不同的英文字母。比如SOS(***---***,  *代表短信号，-代表长信号)。这样"***= S...

一、kafka集群 1.1：准备和部署 书接前文 kafka官网下载地址 还是老套路，下载kafka，上传，解压， 我的部署路径为/usr/local/kafka_1.1 这里不细说了 1.2：添加环境变量 直接上结果吧，当你按照前两篇配置完，外加这里的kafka的配置后，你的profile文...

一、kafka集群       书接前文       zookeeper下载地址 先将下载的zookeeper上传到服务器，解压。       1.1：首先在/etc/profile中配置你的zookeeper_home        1.2：修改zookeeper的配置文件               修改 ~/conf下的zoo_example.cfg模板的文件名为...

零、写在前面与规划 之前抄过一篇，搭建Kafka运行环境 这篇更侧重于如何运行一个简单的kafka，但却没涉及到kafka的集群相关内容 这篇会将全流程补全 包括zookeeper和ssh免密登录，以及戏肉--kafka集群 因为会涉及到集群，因此规划了三台服务器，如下所示 ip 名称...

原文地址点击此处【redis是什么】redis是一个开源的、使用C语言编写的、支持网络交互的、可基于内存也可持久化的Key-Value数据库。redis的官网地址，非常好记，是redis.io。（特意查了一下，域名后缀io属于国家域名，是british Indian Ocean territory，即英属印度洋领地）目前，Vmware在资助着redis项目的开发和维

一、问题描述       在本地物理机上的VMWare14上配了3台linux7.4的虚机，虚机之间互ping没问题，但是ping百度就over了。。。 二、解决过程       2.1：先通过ifconfig检查我的ip及网关的配置是否正确，貌似没问题       2.2：检查本地物理机的防火墙，有人说本地防火墙打开的话，也会影响虚拟机ping百度，但是我关了本地的防火墙...

总觉得人工智能有个伦理的大坑被有意无意的忽略了，那就是人工智能的性格和三观的问题！对于人类而言，每个人都有自己的世界观价值观，那么通过深度学习训练产生的智能一定会有对应的性格和三观在里面。那么，他们怎么控制人工智能的三观是否正确呢？也许ta是某一领域的专家和大牛，但那只是技术和实现方法层面的，ta的精神层面是否阴暗，又如何界定和校验呢？也许不久的将来，会有一套检验人工智能性格的题库产生吧...

零、说在前面    书接前文，首先祭出前文中出现的几个配置文件，然后分别说明    其实大部分的配置标签及其属性，在官方的Mycat的说明文档中都有说明，我只选一些我觉得比较重要的说一下一、开始配置    1、server.xml<?xml version="1.0" encoding="UTF-8"?><!-- - - Licensed under the Apache Li...

零、写在前面    为了尝试新技术和业务需要，因此打算搞一套这样的环境玩儿一下    操作系统及数据库的安装请见前两篇一、主从搭建    不再赘述我的硬件规划等细节    这次仅用到两台虚拟机，一主一从，后续会增加关于多主多从的内容    现在开始        1、先说思路        主从复制的核心思想，就是让从库获取主库的二进制日志，然后根据二进制日志在从库中redo主库的操作      ...

先吐个槽，这点东西折腾了我四五天，最后还是一条告警拯救了我，下面进入正文零、说在前面    看了几个MySQL的读写分离的中间件，貌似这个是比较流行的一个，虽然我不是BAT的粉丝，但是有好用的也可以拿过来用用    这东西的介绍我就不多说了，感兴趣的诸位可以去它的官网看看，而且它上面有简易文档提供下载，大家请自行阅读吧    mycat官网的任意门    一、下载安装二、修改配制三、启动与错误们四...

零、写在前面    为了尝试新技术和业务需要，因此打算搞一套这样的环境玩儿一下    服务器的安装请见上一篇   一、硬件规划    我用的是自己的本机（8核、16G），划分出三台虚拟机（一主两从）    主机名IPCPU内存用途备注centos7One192.168.122.2124主/写Mysql/Rediscentos7Two192.168.122.2212从/读Mysql/Rediscen...

零、写在前面    为了尝试新技术和业务需要，因此打算搞一套这样的环境玩儿一下    我的虚拟机环境是VMWare12    这是第一篇，Centos7系统的安装篇一、硬件规划    我用的是自己的本机（8核、16G），划分出三台虚拟机（一主两从）    主机名IPCPU内存用途备注centos7One192.168.122.2124主/写Mysql/Redis/Centos7centos7Two...

公司需要搭建直播环境，

一直以来，docker被万能化，VMWare和HyperV这些被妖魔化，大有docker将完全取代那些虚拟化技术的趋势。但是，你真的了解docker么？你真的知道docker的适用场景么？笔者无意冒犯，但恐怕不少人都走入了误区。误区一：docker和VMWare一样，都是虚拟化技术，所以docker可以替代VMWare们。dark回答：不是的，docker不是虚拟化技术。docker的介绍中已经说...

原文地址点击此处AVL树的介绍AVL树是根据它的发明者G.M. Adelson-Velsky和E.M. Landis命名的。 它是最先发明的自平衡二叉查找树，也被称为高度平衡树。相比于”二叉查找树”，它的特点是：AVL树中任何节点的两个子树的高度最大差别为1。AVL树是高度平衡的而二叉树。它的特点是：AVL树中任何节点的两个子树的高度最大差别为1。 上面的两张图片，左边的是AVL树，它的任何节点的...

原文地址点击此处MySql5.6新增了一些提升查询排序和关联查询的性能的内容一、先说结论1.1 ICP（Index Condition Pushdown）ICP是用索引去表里取数据的一种优化，减少了引擎层访问基表的次数和Server层访问存储引擎的次数，在引擎层就能够过滤掉大量的数据，减少io次数，提高查询语句性能1.2 MRR（Multi-Range Read）是基于辅助/第二索引的查询，减少随...

原文地址点击此处作为一位DBA长期以来一直受到一些关于SWAP使用的问题，比如如下问题：1、为了我 free 中buffer/cache明明还有空间为什么SWAP使用了？2、哪个(些)进程使用了最多的SWAP？3、如果在ORACLE或者MYSQL避免使用SWAP？4、为什么要使用直接路径绕过操作系统缓冲(O_DIRECT)？5、ORACLE 11G使用tmpfs虚拟文件系统，内存可能被SWAP出吗...

一、安装    1.1 检测是否已安装mysqlyum list installed |grep mysql    如果之前没有安装过mysql，但是系统仍然会为你添加一个默认的mysql包，名字一般为mysql-libs.x86_64，需删除    1.2 删除系统自带的mysql及其依赖（可以放心删除，因为当你安装5.7.21版之后，系统会为你再次添加你删除的东西）yum -y remove ...

原文地址点击此处

yum -y install wget搞定。

原文地址点击此处两者都可以做高可用HA，那么有什么区别呢？1.从主被动的角度考虑    我们知道，nginx server通常和keepalived进行结合，那么keepalived是怎么知道nginx是否存活呢?是nginx主动向keepalived汇报信息？不是的。keepalived是主动向nginx发送请求，如果有响应，那么则nginx可用。    对于

网上通用的方法一般是两种，yum和编译安装一、yum方式yum我没测试，所以不做评论，感兴趣可以参考以下两个帖子    centos6 ，7 使用yum 安装最新nginx版本    这里需要注意的是，新增的nginx.repo文件中必须要加上“[nginx]”这一段    CentOS 7 YUM 安装 Nginx     这篇帖子看的云山雾罩，所以不加评论二

原文来源于知乎的一个网友回复  原文地址点击此处  首先把全空间分割成若干个集合B如图1接着全空间里还有另外一个集合(事件) A见图2灰色区域现在全空间可以更加细致的分割为图3现在考察绿色方块，也就是P(A∩B2) =P(AB2)区域我们借用物理学中的参考系概念。以全空间为参考系，则事件A和B2发生的概率分别为 P(A |

原文地址点击此处JUnit4是JUnit框架有史以来的最大改进，其主要目标便是利用Java5的Annotation特性简化测试用例的编写。先简单解释一下什么是Annotation，这个单词一般是翻译成元数据。元数据是什么？元数据就是描述数据的数据。也就是说，这个东西在Java里面可以用来和public、static等关键字一样来修饰类名、方法名、变量名。修饰的作用描述这个数

原文地址点击此处本文就是个连接，具体内容点击过去看就好了，挺不错的帖子

原文地址点击此处0、故事开始假设某银行只有10个职员。该银行的业务流程分为以下4个步骤：1） 顾客填申请表（5分钟）；2） 职员审核（1分钟）；3） 职员叫保安去金库取钱（3分钟）；4） 职员打印票据，并将钱和票据返回给顾客（1分钟）。我们看看银行不同的工作方式对其工作效率到底有何影响。1、BIO方式每来一个顾客，马上由一位职员来接待

最近想玩儿一下maven，本以为这东西和svn或者cvs是差不多的存在，结果颠覆了。。。所以，还是自己上手搭建一套基础环境体验一下吧基本环境：                   编号工具版本1eclipseneon32tomcat8.53jdk8

原文地址点击此处当前eclipse版本为 neon3 、jdk为1.8.25 、tomcat为8.5需求表均同spring案例此处只是使用maven注意,以下所有需要建立在你的eclipse等已经集成配置好了maven了,说白了就是新建项目的时候已经可以找到maven了没有的话需要安装maven1.新建maven项目,由于当前版本的eclipse自带ma

原文地址点击此处刚接触Maven工具， Maven是一个项目管理工具，相关了解Maven可以在下面的网站了解：Maven入门指南（一）中文：http://ifeve.com/maven-1Maven入门指南（二）中文：http://ifeve.com/maven-2Maven入门指南英文：http://tutorials.jenkov.com/maven/maven

原文地址点击此处MySql存储过程异常处理示例:在网上查了好多资料,发现关于mysql的异常处理资料都是一些错误号列表,对于平时运行中,我们可能更多的希望能够记录准确的错误消息到日志中.下面是示例代码,在发生异常的时候会将异常信息存入日志表中,并继续运行后面的语句.如果您有更好的建议,望不吝赐教.示例：存储过程异常处理示例-- ---------

第一步，说需求和逻辑统计手机用户的上行和下行以及汇总的手机流量，示例数据见sample文件实现思路：map：    输入：key为行的偏移量(其实就是拆分每一行数据得到的数组的第一个元素)。value为剩余的数组元素    输出：key为手机号，value是一个整体，包括上行、下行、汇总            其中手机号是text类型，value是一个自定义的类型，注意要实

一、预备知识熟练使用windows的同仁应该知道，windows的磁盘与文件系统的划分是这样的最底层的物理设备是一块或n块物理磁盘。在物理磁盘的基础上，我们划分了主分区和扩展分区。然后扩展分区又会划分一块到几块的逻辑分区然后我们的c盘、d盘等每一个盘符一般会与一个分区对应。比如c盘一般是主分区，d、e这些是逻辑分区然后在每个盘符中会有n个不等的文件夹。我们的一个个文件、游戏、应用程

踏入hadoop生态，就踏入了一个大坑书接上回今天在hbase下执行了hbase shell后，随手执行了scan TABLE，就想看着玩儿然后在hbase的shell界面半天没有动静（插入一句，对于hbase的shell界面想要使用退格键，需要先把secureCRT的仿真设为linux，然后使用ctrl+backspace才行options--sessio

书接上回http://write.blog.csdn.net/postedithttp://write.blog.csdn.net/postedit在上次我们搭建了hadoop2.8的高可用NameNode的HA环境，并引入了zookeeper这次我们要在这个环境的基础上搭建hbase先说规划编号主机名用途0xxC

原文地址点击此处Hbase.hregion.max.filesize默认值：256M说明：在当前ReigonServer上单个Reigon的最大存储空间，单个Region超过该值时，这个Region会被自动split成更小的region。调优：小region对split和compaction友好，因为拆分region或compact小region里的storef

原文地址点击此处ZKFC设计文档（ZK Failover Controller Design）设计组件化设计，ZK-based的automatic Failover主要由三个组件组成：HealthMonitor：用于监控NN是否unavailable或者处于unhealth状态ActiveStandbyElector：用于监控NN在zk中

原文地址点击此处NameNode 高可用整体架构概述在 Hadoop 1.0 时代，Hadoop 的两大核心组件 HDFS NameNode 和 JobTracker 都存在着单点问题，这其中以 NameNode 的单点问题尤为严重。因为 NameNode 保存了整个 HDFS 的元数据信息，一旦 NameNode 挂掉，整个 HDFS 就无法访问，同时 Hadoop

原文地址1     原文地址2本文只说理论，不设计如何配置和部署这些实例0、引子zkfc是什么？ ZKFailOverController主要作用：作为一个ZK集群的客户端，用来监控NN的状态信息。谁会用它？  每个运行NN的节点必须要运行一个zkfc有啥功能？Health monitoringzkfc定期对本地的NN发起health-che

配置双namenode的目的就是为了防错，防止一个namenode挂掉数据丢失，具体原理本文不详细讲解，这里只说明具体的安装过程。Hadoop HA的搭建是基于Zookeeper的，关于Zookeeper的搭建可以查看这里 hadoop、zookeeper、hbase、spark集群环境搭建 ，本文可以看做是这篇文章的补充。这里讲一下Hadoop配置安装

一、环境与软件首先，要安装centos操作系统，为系统安装配置ip、配置/etc/hosts文件下的相关主机信息。配置namenode和datanode之间的无ssh验证的登录方式。以及后面的必要软件(java\glibc、解压安装hadoop)这些东西都是参照《细细品味hadoop hadoop集群第五集》操作的。然后，重点在于hadoop的一系列的配置文件的配制方法也基本可以参照这

一、结论先说结论。最后问题解决了。终于能在windows的eclipse上通过执行wordcount类，然后将某个文档内容处理后，将结果传到远程服务器的hadoop的某个文件夹下了。二、当时的环境我已经在linux服务器上安装了分布式的hadoop环境，一namenode两datanode。而且已经在linux服务器上测试过hadoop2.8自带的wordcount的jar

原文地址点击此处一、单系统登录机制1、http无状态协议　　web应用采用browser/server架构，http作为通信协议。http是无状态协议，浏览器的每一次请求，服务器会独立处理，不与之前或之后的请求产生关联，这个过程用下图说明，三次请求/响应对之间没有任何联系但这也同时意味着，任何用户都能通过浏览器访问服务器资源，如果想保护服务器的某些资

1、真可谓步步该灾处处有难啊。。。    2、代码如下package com.xx.hadoop.test.wordcount;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hado

一、安装jdk，安装hadoop以及配置ssh无密码登录的过程就跳过了，这部分可以参考《细细品味hadoop》来进行            区别在于，细细品味是以1.x为标杆编写的。    二、2.x的最大进步在于，引入了yarn，在这个系统中，mapreduce成为了它的一个组件而存在，并且是可替换的组件。比如使用spark。所以配置的过程中，需要注意yarn的相关配置文件的使用

一，先检查CentOS7.0是否已经安装以下两个安装包:telnet-server、xinetd。命令如下：    rpm -qa telnet-server    rpm -qa xinetd。如果没有进行第二步二、yum list |grep telnet，查看可安装的版本都有啥    telnet-server.x86_64                    1:

原文地址点击此处以下操作供参考:完全卸载oracle11g步骤：1、 开始－＞设置－＞控制面板－＞管理工具－＞服务 停止所有Oracle服务。2、 开始－＞程序－＞Oracle - OraHome81－＞Oracle Installation Products－＞ Universal Installer，单击“卸载产品”-“全部展开”，选中除“OraDb11g_home1”

原文地址点击此处CDN的降价潮和撕逼季已过，终于轮到小黑羊来做个科普啦。这事儿，要从西游记取经开始……1300年前，唐僧师徒取经要跋涉十万八千里，历经九九八十一难，一路打怪升级，最终才能修成正果，悟空加冕“斗战胜佛”。1300年后，西游互联网已经开通，雷音寺官网上线，取经只需打开网站，点击下载，凡夫俗子也可以轻易取得真经。初时，唐僧师徒觉

原文地址点击此处1. 解压mysql-5.7.11-winx64.zip 到某文件夹， 如C:\DevelopCommon\mysql-5.7.11-winx64。2. 配置环境变量 变量名 ： MYSQL_HOME变量值 ： C:\DevelopCommon\mysql-5.7.11-winx64变量名 ： Path变量值 ： %MYSQL

如大家所知道的，MySQL目前主要有以下几种索引类型：FULLTEXT，HASH，BTREE，RTREE。那么，这几种索引有什么功能和性能上的不同呢？FULLTEXT即为全文索引，目前只有MyISAM引擎支持。其可以在CREATE TABLE ，ALTER TABLE ，CREATE INDEX 使用，不过目前只有 CHAR、VARCHAR ，TEXT 列上可以创建全文索引。值得一提的

原文地址点击此处反射APIjava是一种具有反射功能的语言。允许开发人员在运行时检查类型、方法、字段、注解等，并在程序运行时决定是否使用。 为此，Java的反射API提供类，类，字段，构造函数，方法，注释和其他。 使用它们可以与编译时未知的类型进行交互，例如创建未知类的实例并对它们调用方法。这个快速提示旨在让您深度了解什么是反射，它在Java中的使用，以及它可以用于什么。

原文地址点击此处Part I没啥好说的，直接开始Part II吧。 Part II谈到了对象的克隆，就不得不说为什么要对对象进行克隆。Java中所有的对象都是保存在堆中，而堆是供全局共享的。也就是说，如果同一个Java程序的不同方法，只要能拿到某个对象的引用，引用者就可以随意的修改对象的内部数据（前提是这个对象的内部数据通过get/set方法曝露出来）。有的时候

先说查看linux 内核方法一：cat /proc/version# cat /proc/versionLinux version 2.6.32-358.el6.x86_64 (mockbuild@c6b8.bsys.dev.centos.org) (gcc version 4.4.7 20120313 (Red Hat 4.4.7-3) (GCC) ) #1 SMP Fri Feb 2

原文地址点击此处话说，我越来越喜欢红黑联盟了。好多安装到使用的教程都是从人家这里来的。膜拜啊(HBase是一种数据库：Hadoop数据库，它是一种NoSQL存储系统，专门设计用来快速随机读写大规模数据。本文介绍HBase的下载与安装的整个过程。)一、HBase的下载1.登录HBase官网http://hbase.apache.org/，可看到如图1所示的页面：

原文地址点击此处在已知的几种大数据处理软件中，Hadoop的Hbase采用列存储，MongoDB是文档型的行存储，Lexst是二进制型的行存储。在这里，我不讨论这些软件的技术和优缺点，只围绕机械磁盘的物理特质，分析行存储和列存储的存储特点，以及由此产生的一些问题和解决办法。　　一.结构布局　　行存储数据排列　　列存储数据排列　　表格的灰色背景部分表示行列

原文地址点击此处Comparable 简介Comparable 是排序接口。若一个类实现了Comparable接口，就意味着“该类支持排序”。  即然实现Comparable接口的类支持排序，假设现在存在“实现Comparable接口的类的对象的List列表(或数组)”，则该List列表(或数组)可以通过 Collections.sort（或 Arrays.sort）进