自定义博客皮肤

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

kafka高性能解密 pagecache sendfile

转载自http://blog.csdn.net/stark_summer/article/details/50144591kafka作为时下最流行的开源消息系统,被广泛地应用在数据缓冲、异步通信、汇集日志、系统解耦等方面。相比较于RocketMQ等其他常见消息系统,Kafka在保障了大部分功能特性...

2018-03-04 15:09:44

阅读数 1843

评论数 0

hbase安装

1上传2解压tar –zxvf hbase-0.99.2-bin.tar.gz 3重命名修改环境变量mv hbase-0.99.2 hbase vi /etc/profile export $HBASE_HOME= export $PATH=$PATH:$HBASE_HOME/bin4修...

2018-02-28 01:37:25

阅读数 53

评论数 0

sqoop安装

安装sqoop的前提是已经具备java和hadoop的环境1、下载并解压最新版下载地址http://ftp.wayne.edu/apache/sqoop/1.4.6/  2、修改配置文件$ cd $SQOOP_HOME/conf$ mv sqoop-env-template.sh sqoop-en...

2018-02-20 22:58:13

阅读数 57

评论数 0

azkaban安装与使用

1.安装新建目录azkaban,上传安装包tar –zxvf azkaban-web-server-2.5.0.tar.gz tar –zxvf azkaban-executor-server-2.5.0.tar.gz tar –zxvf azkaban-sql-script-2.5.0.ta...

2018-02-20 20:23:53

阅读数 82

评论数 0

flume学习

安装上传安装包apache-flume-1.6.0-bin.tar.gz到数据源所在节点上然后解压  tar -zxvf apache-flume-1.6.0-bin.tar.gz然后进入flume的目录,修改conf下的flume-env.sh,在里面配置JAVA_HOME 配置采集方案监听本地...

2018-02-20 00:06:56

阅读数 97

评论数 0

hive安装

在安装过hadoop的节点上安装hive1.上传tar包apache-hive-1.2.1-bin.tar.gz2.解压tar -zxvf hive-0.9.0.tar.gz -C /home/hadoop/apps/3安装mysql4配置hive(a)配置HIVE_HOME环境变量  vi co...

2018-02-19 14:58:40

阅读数 74

评论数 0

Zookeeper搭建

1.下载进入要下载的版本的目录,选择.tar.gz文件下载下载链接:http://archive.apache.org/dist/zookeeper/ 2.安装使用tar解压要安装的目录即可,以3.4.5版本为例tar -zxf zookeeper-3.4.5.tar.gz -C /usr/mya...

2018-02-17 23:25:15

阅读数 80

评论数 0

RPC框架学习

1 什么是RPCRPC(Remote Procedure Call Protocol)——远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越...

2018-02-17 23:07:08

阅读数 62

评论数 0

hadoop运行及基本命令

1格式化namenode(是对namenode进行初始化)        hdfs namenode -format (hadoop namenode -format)2启动hadoop(需要配置免密登录)        先启动HDFS        sbin/start-dfs.sh      ...

2018-02-05 20:58:23

阅读数 62

评论数 0

hadoop环境配置(hadoop搭建1)

1关闭防火墙 2安装jdk

2018-02-05 20:54:25

阅读数 39

评论数 0

hadoop安装(hadoop搭建2)

1下载 下载binary hadoop-2.6.5.tar.gz 官网:hadoop.apache.org 2配置 在一台服务器上解压,配置安装目录下的etc 第一个:hadoop-env.sh         vim hadoop-env.sh         #第27行  ...

2018-02-05 20:53:01

阅读数 35

评论数 0

hadoop集群环境

hadoop集群环境  hdfs集群(负责文件读写,数据存储系统)  一台name node,若干台data node yarn集群(负责为mapreduce程序分配运算所需硬件程序) 一台resource manager 若干台node manager ps:node manag...

2018-02-04 12:21:56

阅读数 38

评论数 0

linux 自动部署

如果有一个服务器集群,要保证每台服务器上的环境一样,要自动部署相同的软件 用脚本来实现: 1 设置免密登录 ssh-copy-id server 把本地主机的公钥复制到远程主机的authorized_keys文件上 2发送软件安装脚本到远程服务器 3运行脚本 boot.sh #!/bi...

2018-01-26 01:53:25

阅读数 95

评论数 0

linux机器之间免密登录

假如 A  要登陆  B 在A上操作: 首先生成密钥对 ssh-keygen   (提示时,直接回车即可) %%再将A自己的公钥拷贝并追加到B的授权列表文件authorized_keys中 ssh-copy-id   B

2018-01-25 18:08:18

阅读数 179

评论数 0

linux服务(service)管理

service someservice start 开始服务 service someservice stop 停止服务 service someservice restart 重启服务 service someservice status 查看服务状态 chlconfig  ...

2018-01-25 17:59:10

阅读数 77

评论数 0

linux 配置网络

linux安装好之后,不能上网 ifconfig检查网络状态 没有可用的网卡 第一步:网卡的配置文件:/etc/sysconfig/network-scripts/ifcfg-ethX DEVICE=eth0 #设备名字 ONBOOT=yes #是否随系...

2018-01-25 17:30:45

阅读数 28

评论数 0

提示
确定要删除当前文章?
取消 删除