hadoop搭建
文章平均质量分 74
WJWFighting
AR测试
展开
-
kafka- 单节点 - 单代理配置
在此配置中,您有一个ZooKeeper和代理id实例。 以下是配置它的步骤 - 创建Kafka主题 - Kafka提供了一个名为 kafka-topics.sh 的命令行实用程序,用于在服务器上创建主题。 打开新终端并键入以下示例。 语法 bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 -...原创 2018-07-23 19:15:46 · 1323 阅读 · 1 评论 -
Hadoop伪分布式搭建——虚拟机Centos(一个大学生的踩坑之路)
• 下载JDK,使用xftp将下载好的JDK发送到Hadoop服务器中。• 解压jdk,配置JDK的环境变量• 在/etc/profile中添加如下代码:(这里放你们jdk的位置,你们的不一定是/home/a/jdk/jdk1.8....,后面的hadoop位置也是一个道理) 4. 重启配置文件,使其生效。source /etc/profile5. 到Hadoop的官...原创 2018-07-15 09:38:14 · 1395 阅读 · 1 评论 -
SSH免密登录(精简版)
1. 创建ssh-key这里我们采用rsa方式,使用如下命令:ssh-keygen -t rsa -f ~/.ssh/id_rsa注:这里会提示输入passphrase,一定不要输入任何字符,回车即可,回车即可,回车即可(重要的事说三遍!!!)2. 生成authorized_keys文件cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys注:记...原创 2018-07-15 10:52:49 · 332 阅读 · 1 评论 -
zookeeper安装教程(zookeeper3.4.5为例)
zookeeper有单机、伪集群、集群三种部署方式,可根据自己对可靠性的需求选择合适的部署方式。下边对这三种部署方式逐一进行讲解。 一、单机安装 1.1 下载 进入要下载的版本的目录,选择.tar.gz文件下载 下载链接:http://archive.apache.org/dist/zookeeper/ 1.2 安装 使用tar解压要安装的目录即可,以3.4.5版本为...转载 2018-07-28 10:35:31 · 245 阅读 · 0 评论 -
虚拟机(Ubuntu)安装hive 2.2.0版本
安装2.2.0 1. 下载apache-hive-2.2.0-bin.tar.gz 2. 解压:tar –zxvf apache-hive-2.2.0-bin.tar.gz 3. 移动:mv apache-hive-2.2.0-bin.tar.gz /home/hadoop/hive2.2.0 4. 配置:sudo gedit /etc/profile export ...原创 2018-08-09 20:24:42 · 807 阅读 · 0 评论 -
HBase单节点和伪分布式配置
单节点安装: 解压文件并移动到当前用户的hbase-2.0.0目录下 tar –zxvf hbase-2.0.0-beta-1-bin.tar.gz mkdir ~/hbase-2.0.0 mv hbase-2.0.0-beta-1/* ~/hbase-2.0.0 环境配置: Sudo vim /etc/profile export HBASE_HOME=/home/na...原创 2018-08-25 14:03:21 · 373 阅读 · 0 评论