- 博客(11)
- 资源 (4)
- 收藏
- 关注
原创 训练九:hive安装
1、到下载地址http://apache.fayea.com/hive/,下载apache-hive-2.3.3-bin.tar.gz,解压tar -xzvf apache-hive-2.3.3-bin.tar.gz 2、配置环境变量sudo vim /etc/profile # hiveexport HIVE_HOME=/home/hadoop/tools/hiveexport PATH...
2018-05-10 11:01:29 211
原创 训练八:sqoop+pyspark实战
1. 下载安装下载地址: http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.6-cdh5.9.3.tar.gz 下载 sqoop-1.4.6-cdh5.9.3.tar.gz解压后安装在/home/hadoop/tools/文件夹下2. 修改环境变量sudo vim /etc/profile# SQOOPexport SQOOP_HOME=/home...
2018-05-10 10:47:15 531
原创 训练七:集群启动
1. 各组件启动顺序zookeeper--hadoop--hbase--kafka--storm--spark2. 集群启动shell命令#!/bin/bash# nimbus节点nimbusServers='master'# supervisor节点supervisorServers='master slave01 slave02'# all节点BROKERS="master sla...
2018-05-10 10:22:56 270
转载 训练六:spark安装配置
1. 配置scala# scala# 在最后添加下面内容export SCALA_HOME=/home/hadoop/tools/scalaexport PATH=$PATH:${SCALA_HOME}/bin2. 配置spark2.1 环境变量# sparkexport SPARK_HOME=/home/hadoop/tools/spark2export PATH=$PATH:${SP...
2018-05-10 10:19:27 186
转载 训练五:storm安装部署
1 . 下载解压安装stormtar -zxvf apache-storm-1.2.1.tar.gz解压安装包到“/home/hadoop/tools/storm"文件夹中2. 修改conf下"storm.yaml"配置文件# 注意:严格遵守ymal格式,相同层级关系必须左对齐storm.zookeeper.servers: - "master" - "slave01" ...
2018-05-10 10:15:26 155
转载 训练四:kafka安装部署
1. 下载好的Kafka安装包解压tar -zxvf kafka_2.9.1-0.8.2.1.tgz2. 配置环境变量sudo vim /etc/profileexport KAFKA_HOME=/home/hadoop/kafka_2.11-0.8.2.1export PATH=$PATH:$KAFKA_HOME/bin3. 配置Kafka的zookeeper.properties # Lic...
2018-05-10 10:01:09 422
转载 训练三:hbase安装部署
3.1 安装过程3.1.1 下载HBase安装包hbase-2.0.0-bin.tar.gztar -zxf hbase-2.0.0-bin.tar.gz然后将其移动到/home/hadoop/tools/文件夹下3.1.2 设置环境变量1. 修改系统环境变量sudo vim /etc/profileexport HBASE_HOME=/app/hbase-0.96.2export PATH=$...
2018-05-10 09:37:57 352
转载 训练二:hadoop安装配置
配置JDK1.8Hadoop3.1.0要求最低JDK8.0,到官网下载压缩版本解压至任意目录,然后添加环境变量export JAVA_HOME=/home/hadoop/tools/jdk8export JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/libexport PATH=${JAVA_...
2018-05-10 09:22:22 151
转载 训练一:zookeeper安装配置
Zookeeper安装配置ZooKeeper服务器是用Java编写创建,它运行在JVM。所以需要使用JDK 6或更高版本。 第1步:验证安装Java 假设你已经在系统上安装Java环境。只需使用下面的命令验证它。 $ java -version如果您的计算机上已经安装了Java,那么可以查看已安装的Java版本。否则,请执行以下的简单步骤来安装Java最新版本。 步骤1.1:下载JDK jdk-...
2018-05-10 09:15:58 155
转载 ubuntu18.04环境下hadoop3.1,spark虚拟机分布式安装笔记
环境:Ubuntu18.04 LTS系统虚拟机:选择的是Virtul Box,占用资源比较少 安装三个虚拟机,主机名分别是:master、slave01、slave02,用户名都设置为hadoop设置网络,桥接模式,可以实现局域网访问系统安装完毕后,更新系统,sudo apt updatesudo apt upgrade同时安装vimsudo apt install vim修改hosts修改ho...
2018-04-27 12:48:34 1172
原创 ubuntu 16.04 mysql安装及远程配置
1、命令安装mysqlsudo apt install mysql-serversudo apt isntall mysql-clientsudo apt install libmysqlclient-dev2. 以上3个软件包安装完成后,使用如下命令查询是否安装成功:jiahe@jiahe-nlp:~$ sudo netstat -tap | grep mysqltcp 0 ...
2018-04-10 10:54:42 167
jclasslib_win64_5_3_1-64位,最新版
2019-05-07
主成分分析
2012-08-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人