大数据
iccool-cc
小白一枚 新手上路 请多指教
展开
-
CentOS 7.0安装spark2.2
环境CentOS 7.0hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群scala 2.12.4spark 2.2.0下载并安装scala下载地址:http://www.scala-lang.org/download/ 百度云地址:https://pan.baidu.com/s/1kVFyb3p 密码:nffb下载完上传的到集群,目录/data/software ,安装:原创 2017-12-11 15:42:14 · 598 阅读 · 0 评论 -
CentOS 7.0安装kafka
环境CentOS 7.0 hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群zookeeper 3.4.11 CentOS 7.0安装zookeeper3.4.11kafka 1.0.0 下载安装下载官网:http://kafka.apache.org 可选择左侧的download 或者 quickstart ,下载kafka百度云地址:https://p原创 2017-12-07 11:22:50 · 1904 阅读 · 2 评论 -
CentOS 7.0+flume类似日志输出到HDFS
环境CentOS 7.0hadoop 2.7.3flume 1.8.0下载并安装见上一篇博客: CentOS 7.0安装flume配置添加hadoop目录hadoop fs -mkdir -p /test/flume/output添加本地日志文件cd /tmptouch flume_test.logecho 'hello world' >> flume_test.log修改flume-confc原创 2017-12-05 17:13:40 · 392 阅读 · 0 评论 -
CentOS 7.0安装hive2.1.1
环境CentOS 7hadoop 2.7.3hive 2.1.1准备下载hivehive官方下载地址: http://www.apache.org/dyn/closer.cgi/hive/然后上传到namenode机器上说明: 由于我用不了wget,能用wget的可以选择以下方法下载hive-2.1.1wget http://mirrors.ustc.edu.cn/apache/hive/hive-原创 2017-12-01 16:25:03 · 385 阅读 · 0 评论 -
CentOS 7.0安装zookeeper3.4.11
环境CentOS 7hadoop 2.7.3zookeeper 3.4.11下载zookeeper下载链接:https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/百度云下载链接:https://pan.baidu.com/s/1nuDb1R7 密码:ekj2配置上传的到集群机器上本例中我放在了 /data/software 目录下新建目录 解压m原创 2017-12-04 10:49:17 · 740 阅读 · 0 评论 -
CentOS 7.0安装HBase1.3.1
环境CentOS 7hadoop 2.7.3hbase 1.3.1zookeeper 3.4.11下载HBase并上传解压下载链接:https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/百度云链接:https://pan.baidu.com/s/1i4HTwVz 密码:p7k3上传已下载的hbase压缩包到/data/software 目录mkdir -原创 2017-12-04 14:57:33 · 895 阅读 · 0 评论 -
CentOS 7.0安装flume
环境CentOS 7.0hadoop 2.7.3flume 1.8.0下载并安装下载下载地址:http://flume.apache.org/download.html百度网盘:https://pan.baidu.com/s/1dFCSh3N 密码:wnko也可以通过wget直接下载:wget http://mirrors.hust.edu.cn/apache/flume/1.8.0/apache-原创 2017-12-05 16:49:54 · 1891 阅读 · 0 评论 -
为wget添加代理
前言脑袋抽了,前两天说wget用不了,所以软件包都是直接从本地下载,然后传到集群机器上的。今天才想起来,忘记给wget设置代理了, ̄□ ̄||方法这只是添加代理的其中一种方法vi /etc/wgetrc观察到# You can set the default proxies for Wget to use for http, https, and ftp.# They will override t原创 2017-12-05 10:20:12 · 1841 阅读 · 0 评论 -
linux安装Tomcat(CentOS 7)
下载tomcat下载地址:http://tomcat.apache.org/百度网盘:https://pan.baidu.com/s/1pLmPtiz 密码:lqnm解压安装本人是通过CentOS的Firefox浏览器直接下载的,文件保存在/home/iccool/下载 目录下,将文件移动到/data/software目录下cd /home/iccool/下载mv apache-tomcat-8.原创 2017-12-04 16:11:35 · 201 阅读 · 0 评论 -
linux安装idea(CentOS 7)
下载idea(linux 社区版)下载地址:https://www.jetbrains.com/idea百度网盘: https://pan.baidu.com/s/1qXNeNec 密码:xpzh解压安装找到idea的文件目录本人是通过CentOS的Firefox浏览器直接下载的,文件保存在/home/iccool/下载 目录下,将文件移动到/data/software目录下cd /home/icc原创 2017-12-04 15:54:30 · 7695 阅读 · 0 评论 -
CentOS 7.0安装mysql5.7.20
环境CentOS 7mysql 5.7.20卸载自带的mariadb检查rpm -qa|grep mariadb如果有mariadb,卸载rpm -e mariadb-libs-5.5.44-2.el7.centos.x86_64 --nodepsrpm -qa|grep mariadb下载安装mysql1. 获取mysql的yum源在mysql官网获取rpm:https://dev.mysq原创 2017-11-30 17:06:58 · 276 阅读 · 0 评论 -
CentOS 7.0+hadoop 2.7搭建集群
准备工作准备环境下载链接:VM12 : https://pan.baidu.com/s/1hsvkHe8 密码:ycanCentOS 7.0:https://pan.baidu.com/s/1nvUmu05 密码:ktqhjdk1.8: https://pan.baidu.com/s/1bo69W67 密码:3volhadoop2.7.3: https://pan.baidu.com/s原创 2017-11-29 16:25:14 · 778 阅读 · 0 评论 -
CentOS 7.0+flume+kafka类似日志输出存储
环境CentOS 7.0 hadoop 2.7.3 CentOS 7.0+hadoop 2.7搭建集群zookeeper 3.4.11 CentOS 7.0安装zookeeper3.4.11flume 1.8.0 CentOS 7.0安装flumekafka 1.0.0 CentOS 7.0安装kafka下载安装见前几篇文章配置修改配置文件cp flume-conf.prop原创 2017-12-08 10:58:09 · 438 阅读 · 0 评论