- 博客(21)
- 资源 (2)
- 收藏
- 关注
原创 Shell脚本一键启动/关闭 zookeeper集群(版本1.1)
看过我1.0版本的应该会感觉我的脚本写的比较麻烦,那么我就让麻烦来的更多一些吧。这次1.1版本的多了一个”control.sh”的主控脚本,用这个脚本来控制启动、关闭和检查状态
2016-11-11 17:43:00 3404
原创 Shell脚本一键启动/关闭 zookeeper集群(版本1.0)
每次启动zookeeper的时候你是不是得一台主机一台主机的去启动,如果你用上快捷键切换窗口,然后是不是觉得已经启动的够快了。 but...今天一个同事跟我提了一下要是能用脚本一下子全启动咯,于是我就在自己电脑上试验着写了一下脚本,那就来看看我是怎么用脚本来启动/关闭的吧!
2016-11-09 20:52:23 2494
原创 Hadoop 2.X 动态添加 datanode(详细图文)
准备工作: 我们的三个节点的集群(master,slave1,slave2)已经安装成功并且启动,具体安装方法可以参照之前的一篇教程Hadoop-2.6.4集群安装(详细图文)。 由于我们之前已经克隆出来一台,这次我们可以拿这一台来练习,先备份,搞崩了拿新的再搞! 当然,大家也可以自己重新安装一台,然后要安装配置好 jdk,最好是跟之前安装的版本一致,免得出什么幺蛾子。
2016-12-03 18:18:50 4039 1
原创 Spark-2.0.1 安装 及 WordCount (详细图文)
centos 6.5 安装 spark-2.0.1-bin-hadoop-2.6.tgz
2016-11-24 19:10:53 4101 2
原创 flume-1.7.0 简单使用
在上一篇中,我们安装了 flume-ng,这一篇我们就来简单使用一下。官网上是这么介绍的,我们需要指定一个配置文件,需要定义一个 agent 的名称,然后我们就可以使用 flume-ng 命令来启动了。
2016-11-18 19:30:46 3910 6
原创 Sqoop-1.99.7 简单使用
经过上一篇,我们已经安装并且配置好了 sqoop2,这一篇我们通过两个实例来简单使用一下。from hdfs to mysql & from mysql to hdfs
2016-11-16 19:56:56 6221 4
原创 phoenix-4.8.1-HBase-1.2安装(详细图文)
这次安装 Phoenix,前提是我们的 hadoop 集群,zookeeper,hbase 都安装成功。
2016-11-08 19:56:55 11791
原创 JAVA-IO 文件拷贝功能的实现
如果要想实现文件的拷贝操作,有以下两种方法: 方法1、将所有文件的内容一次性读取到程序之中,然后一次性输出;这样的话就需要开启一个跟文件一样大小的数据用于临时保存这些数据,但是当文件过大的时候呢?程序是不是会崩掉呢?欢迎大家踊跃尝试^@^。 方法2、采用边读边写的操作,这样一来效率也提高了,也不会占用过多的内存空间。所以,我们采用第二种方法,边读边写。
2016-11-02 20:15:12 625
原创 Zookeeper + HBase 安装(详细图文)
说明:在之前我们都已经将hadoop集群(三个节点)构建好了,接下来我们来安装一下zookeeper-3.4.8 + hbase-1.2.3。相信在有了之前那么多次经验,这次的安装肯定也不会难到大家。
2016-10-27 19:27:34 5625 2
原创 Centos 6.5 安装 mysql-5.6.34 (详细图文)
说明:这次是用官方编译好的二进制文件来安装,需要在mysql官网上下载好二进制包。这里需要注意的是,这里选择好平台版本之后,下面出来的是最新版的mysql,不过可以在左侧找到”looking for the latest GA version?”,然后就可以找到一些以前的旧版本。
2016-10-20 11:31:28 1127 1
原创 Hadoop-2.6.4集群(三个节点)安装(详细图文)
环境:win7安装虚拟机之后,安装centos6.5,并安装好jdk与mysql,然后克隆三台出来。这样我们安装hadoop的一个基本环境就有了,这次我们是一共三个节点,为什么不把这四台都用了呢?是因为可以留一台做备份,因为我们练习的基本环境已经有了,以后可以使用配置这一台来替换崩溃掉的某一台。然后使用SecureCRT来作为终端,远程控制Linux。这篇博客适合有一定Linux基础的同学,在这里用到的一些命令都
2016-10-19 20:34:31 2370 3
原创 CentOS 6.5 用shell脚本安装jdk
使用shell 脚本自动化安装 jdk #! /bin/bash# shell script tp install jdk(version:jdk1.8.0_91)# version 1.0# created by signalfeng@gmail.com # Sat Oct 15 11:46:08 CST 2016# Step1
2016-10-15 14:44:42 2037 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人