2017年01月_didiaoqianjinshen007

原创 Hadoop面试

1：Hadoop VS Spark 2.Hadoop实时应用有哪些?Hadoop，众所周知的Apache Hadoop，是一个开放源代码软件平台，用于大容量数据的可扩展和分布式计算。它提供对数字平台和企业内部生成的结构化和非结构化数据的快速，高性能和成本效益的分析。它如今几乎应用在所有部门。比如：•交通管理•流处理•内容管理和电子邮件存档•使用Hadoop计算集群

2017-01-22 17:49:24 574

原创 [精华]Hadoop,HBase分布式集群和solr环境搭建

1. 机器准备(这里做测试用,目的准备5台CentOS的linux系统)1.1 准备了2台机器,安装win7系统(64位) 两台windows物理主机: 192.168.131.44 administrator/(密码是一个空格) 192.168.131.67 administrator/(密码是一个空格) 1.2. 每台机器上安装VMwareWorkstation8.0.

2017-01-22 15:58:09 1209 1

原创 Zookeeper + HBase 安装(详细图文)

说明：在之前我们都已经将hadoop集群(三个节点)构建好了，接下来我们来安装一下zookeeper-3.4.8 + hbase-1.2.3。相信在有了之前那么多次经验，这次的安装肯定也不会难到大家。* ZooKeeper 安装及配置 *– 在主节点上解压zookeeper-3.4.8.tar.gz –同样的，这次我们使用 “rz” 命令将在windows上下载好的安装包上

2017-01-22 15:55:03 2156

原创 Memcache,Redis,MongoDB（数据缓存系统）方案对比与分析

一、问题：数据库表数据量极大（千万条），要求让服务器更加快速地响应用户的需求。二、解决方案： 1.通过高速服务器Cache缓存数据库数据 2.内存数据库（这里仅从数据缓存方面考虑，当然，后期可以采用Hadoop+HBase+Hive等分布式存储分析平台）三、主流解Cache和数据库对比：

2017-01-22 09:47:58 314

原创 Dubbo入门：一个分布式服务框架

问题导读1. Dubbo是什么？2. Dubbo能做什么？3.dubbo的架构包含哪些内容？4.dubbo如何使用？1. Dubbo是什么？Dubbo是一个分布式服务框架，致力于提供高性能和透明化的RPC远程服务调用方案，以及SOA服务治理方案。简单的说，dubbo就是个服务框架，如果没有分布式的需求，其实是不需要用的，只有在分布式的时候

2017-01-12 14:37:23 569

原创 Kafka安装及部署

一、环境配置二、操作过程Kafka介绍安装及部署回到顶部一、环境配置操作系统：Cent OS 7Kafka版本：0.9.0.0Kafka官网下载：请点击JDK版本：1.7.0_51SSH Secure Shell版本：XShell 5回到顶部二、操作过程1、下载Kafka并解压下载:

2017-01-11 15:20:52 344

原创 springboot+dubbo之多端口注入服务

前面介绍了，springboot+dubbo基础整合，这篇介绍多端口注入服务。　　springboot使用@Bean注入dubbo服务，当你是单一的ProviderConfig实例，dubbo的@Service会自动索引到你注入的实例。但实际使用情况下，dubbo服务提供者不可能统统只用一个端口提供服务。　　这是你就需要注入多个ProviderConfig，ProtocolConf

2017-01-11 11:22:44 2936

原创 springboot+dubbo

使用springboot搭建dubbo服务，首先封装出springboot-dubbo的项目，引入在服务上加直接@Service直接使用，方便于拆封统一管理。package hello.dubbo.configuration;import org.springframework.beans.factory.annotation.Value;import org.springfra

2017-01-11 11:19:02 640

原创 Java虚拟机之垃圾收集器

一、关于Java垃圾回收的简介（1）Java 内存运行时区域的各个部分，其中程序计数器、虚拟机栈、本地方法栈三个区域随线程而生，随线程而灭；栈中的栈帧随着方法的进入和退出而有条不紊地执行着出栈和入栈操作。（2）每一个栈帧中分配多少内存基本上是在类结构确定下来时就已知的（尽管在运行期会由 JIT 编译器进行一些优化）,因此这几个区域的内存分配和回收都具备确定性.在这几个区域内不需要过

2017-01-03 17:42:23 315

原创使用Spring AOP实现MySQL数据库读写分离案例分析

一、前言分布式环境下数据库的读写分离策略是解决数据库读写性能瓶颈的一个关键解决方案，更是最大限度了提高了应用中读取（Read）数据的速度和并发量。在进行数据库读写分离的时候，我们首先要进行数据库的主从配置，最简单的是一台Master和一台Slave（大型网站系统的话，当然会很复杂，这里只是分析了最简单的情况）。通过主从配置主从数据库保持了相同的数据，我们在进行读操作的时候访问从数据库Sl

2017-01-03 17:11:37 353

yulijianzhangminmin的专栏