自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

M_SIGNALs的博客

show me the money!

  • 博客(21)
  • 资源 (2)
  • 收藏
  • 关注

原创 Shell脚本一键启动/关闭 zookeeper集群(版本1.1)

看过我1.0版本的应该会感觉我的脚本写的比较麻烦,那么我就让麻烦来的更多一些吧。这次1.1版本的多了一个”control.sh”的主控脚本,用这个脚本来控制启动、关闭和检查状态

2016-11-11 17:43:00 3377

原创 Shell脚本一键启动/关闭 zookeeper集群(版本1.0)

每次启动zookeeper的时候你是不是得一台主机一台主机的去启动,如果你用上快捷键切换窗口,然后是不是觉得已经启动的够快了。 but...今天一个同事跟我提了一下要是能用脚本一下子全启动咯,于是我就在自己电脑上试验着写了一下脚本,那就来看看我是怎么用脚本来启动/关闭的吧!

2016-11-09 20:52:23 2449

原创 几个shell脚本的面试题(一)

几个shell脚本的面试题

2016-12-07 20:39:48 13128 2

原创 Hadoop 2.X 动态添加 datanode(详细图文)

准备工作: 我们的三个节点的集群(master,slave1,slave2)已经安装成功并且启动,具体安装方法可以参照之前的一篇教程Hadoop-2.6.4集群安装(详细图文)。 由于我们之前已经克隆出来一台,这次我们可以拿这一台来练习,先备份,搞崩了拿新的再搞! 当然,大家也可以自己重新安装一台,然后要安装配置好 jdk,最好是跟之前安装的版本一致,免得出什么幺蛾子。

2016-12-03 18:18:50 3987 1

原创 Spark SQL 简单使用

环境:scala 版本2.11.8,spark 版本2.0.1,使用 Intellij IDEA 来开发。

2016-11-28 20:25:29 6780

原创 Spark-2.0.1 安装 及 WordCount (详细图文)

centos 6.5 安装 spark-2.0.1-bin-hadoop-2.6.tgz

2016-11-24 19:10:53 4090 2

原创 flume-1.7.0 简单使用

在上一篇中,我们安装了 flume-ng,这一篇我们就来简单使用一下。官网上是这么介绍的,我们需要指定一个配置文件,需要定义一个 agent 的名称,然后我们就可以使用 flume-ng 命令来启动了。

2016-11-18 19:30:46 3880 6

原创 flume-1.7.0 安装配置 (详细图文)

准备工作: 从官网下载安装包,一直以来我们安装的都是已经编译好的,记住,在你心里默念三遍。

2016-11-18 17:29:08 4689

原创 kafka_2.11 简单使用

进过上一篇的引导,相信大家应该都已经安装好了。这次我们就来简单使用一下。

2016-11-17 20:18:15 6859 1

原创 kafka_2.11 安装配置 (详细图文)

准备工作先从官网上下载好该版本的安装包,并上传到集群中任意一台主机(我上传到了master上)

2016-11-17 16:07:11 5317

原创 Sqoop-1.99.7 简单使用

经过上一篇,我们已经安装并且配置好了 sqoop2,这一篇我们通过两个实例来简单使用一下。from hdfs to mysql & from mysql to hdfs

2016-11-16 19:56:56 6144 4

原创 Sqoop-1.99.7安装配置(详细图文)

环境:centos 6.5,hadoop2.6.4集群

2016-11-16 18:03:08 5134 2

原创 phoenix-4.8.1-HBase-1.2安装(详细图文)

这次安装 Phoenix,前提是我们的 hadoop 集群,zookeeper,hbase 都安装成功。

2016-11-08 19:56:55 11731

原创 JAVA 单例模式(一)

单例设计模式简要介绍

2016-11-05 09:31:12 413

原创 JAVA-IO 文件拷贝功能的实现

如果要想实现文件的拷贝操作,有以下两种方法: 方法1、将所有文件的内容一次性读取到程序之中,然后一次性输出;这样的话就需要开启一个跟文件一样大小的数据用于临时保存这些数据,但是当文件过大的时候呢?程序是不是会崩掉呢?欢迎大家踊跃尝试^@^。 方法2、采用边读边写的操作,这样一来效率也提高了,也不会占用过多的内存空间。所以,我们采用第二种方法,边读边写。

2016-11-02 20:15:12 615

原创 Zookeeper + HBase 安装(详细图文)

说明:在之前我们都已经将hadoop集群(三个节点)构建好了,接下来我们来安装一下zookeeper-3.4.8 + hbase-1.2.3。相信在有了之前那么多次经验,这次的安装肯定也不会难到大家。

2016-10-27 19:27:34 5573 2

原创 Hive-2.1.0 安装(详细图文)

说明:在CentOS 6.5上安装 hive-2.1.0,前提是hadoop集群已经配置成功。

2016-10-24 20:51:09 1065

原创 hive中UDF、UDTF、UDAF快速上手

hive中UDF的小实例

2016-10-24 17:48:55 1229 1

原创 Centos 6.5 安装 mysql-5.6.34 (详细图文)

说明:这次是用官方编译好的二进制文件来安装,需要在mysql官网上下载好二进制包。这里需要注意的是,这里选择好平台版本之后,下面出来的是最新版的mysql,不过可以在左侧找到”looking for the latest GA version?”,然后就可以找到一些以前的旧版本。

2016-10-20 11:31:28 1112 1

原创 Hadoop-2.6.4集群(三个节点)安装(详细图文)

环境:win7安装虚拟机之后,安装centos6.5,并安装好jdk与mysql,然后克隆三台出来。这样我们安装hadoop的一个基本环境就有了,这次我们是一共三个节点,为什么不把这四台都用了呢?是因为可以留一台做备份,因为我们练习的基本环境已经有了,以后可以使用配置这一台来替换崩溃掉的某一台。然后使用SecureCRT来作为终端,远程控制Linux。这篇博客适合有一定Linux基础的同学,在这里用到的一些命令都

2016-10-19 20:34:31 2274 3

原创 CentOS 6.5 用shell脚本安装jdk

使用shell 脚本自动化安装 jdk #! /bin/bash# shell script tp install jdk(version:jdk1.8.0_91)# version 1.0# created by signalfeng@gmail.com # Sat Oct 15 11:46:08 CST 2016# Step1

2016-10-15 14:44:42 2022 1

Hello World · GitHub Guides.pdf

GitHub里的 hello world

2016-11-15

putty_V0.63.0.0.43510830.exe

轻量级远程控制Linux的客户端putty,即下即用。最关键的是,它连1M都不到

2016-10-28

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除