- 博客(10)
- 收藏
- 关注
原创 Hadoop日志文件收集系统flume的搭建
Hadoop日志文件收集系统flumeflume tar包下载解压并修改其解压文件夹名称(修改为flume)配置/etc/profile,并source生效配置flume-env.sh的JAVA_HOME进入flume安装路径,启动查看flume版本信息两个flume运用的实例flume tar包下载http://www.apache.org/dyn/closer.lua/flume/1.9....
2019-07-15 19:45:56
376
原创 阿里云服务器的搭建教程
环境需求:服务器系统:centos 7(Linux系统)本地电脑系统:window10一、服务器万变不离其宗,既然是服务器就离不开操作系统,云服务器也是如此,当你购买l阿里云的服务器,你会有此服务器(电脑)的控制权、使用权(可以选择给服务器安装任何操作系统,可以对服务器进行任何操作,购买的服务器中只有一个之前购买时选择的预装系统——这就像你购买电脑,里面也有一个系统一样)。注:购买服务...
2019-07-05 12:56:00
712
原创 centos7下载安装redis并利用RedisDesktopManager工具进行远程连接教程
我安装的是redis-5.0.4版本,其他版本修改版本号即可。我实在root目录下,所以执行wget命令下载,默认下载在root目录下wget http://download.redis.io/releases/redis-5.0.4.tar.gztar -zxvf redis-5.0.4.tar.gzcd src安装gccyum install -y gcccd srcmake...
2019-05-08 14:34:46
677
原创 centos7 spark平台搭建+sbt打包实现词频统计!
实验内容包含以下几点: 安装Scala 安装spark 使用spark shell 读取本地文件 读取hdfs文件 编写wordcount程序1.安装Scala下载地址:https://www.scala-lang.org/download/上传linux系统(略)解压:tar zxvf scala-2.12.8.tgz重命名:mv scala-2.11.8 scala...
2019-05-08 14:32:14
836
原创 配置三台虚拟机之间的免密钥登录(ssh)
三台虚拟机之间使用ssh登录的时候不需要用户名密码对bigdata128执行$ ssh-keygen一直回车,生产当前主机的公钥和私钥//分发密钥(要向3台都发送) $ ssh-copy-id node-47 $ ssh-copy-id node-101 $ ssh-copy-id node-106然后就可以测试一下,bigdata128 ssh 其他机器是不是可以免密码登陆...
2019-03-27 16:48:11
4963
1
原创 Hadoop伪分布式模式搭建
首先必须保证单机模式能如上一篇文章一样运行起来!1:进入Hadoop安装目录/etc/hadoop/ [root@bigdata128 hadoop-2.7.3]# ls bin etc include lib libexec LICENSE.txt NOTICE.txt README.txt sbin share [root@bigdata128 h...
2019-03-26 02:25:54
189
翻译 单机模式Hadoop的搭建
准备工具:VMwareworkstation12 pro(提取码:iua8)、Hadoop2.7.3、centos7SecureCRT 以及jdk-8u121-linux-x64.tar.gz(jdk自行去官网找相应版本)VMware安装centos7,以及SecureCRT 连接虚拟机自行百度!!!一下操作皆是在SecureCRT 中进行1.关闭防火墙firewall-cmd ...
2019-03-26 00:42:53
290
原创 Webstorm安装、破解、汉化教程!!!
Webstorm最新版本安装包下载地址:下载地址安装教程和普通软件类似,固不做详解。该软件为收费软件,试用期为三十天,固我们增加破解教程,如下:1:获取注册码地址:点击获取注册码2:修改电脑本机hosts文件(复制该地址c:\windows\system32\drivers\etc到地址栏中,回车)找到hosts文件,以记事本的方式打开,在末尾添加:0.0.0.0 account.jet...
2019-03-05 17:12:22
1412
1
原创 记录学习大数据生涯点滴(1)
——————————————————————————————————————————————————2019 新学期,初衷不变,初心不改。一切充满信心,觉着问题不大。敢于尝试,敢于面对,集万山艰难于一身,自己选择的路跪着也要走完。2019 加油!—————————————————————————————————————————————————— 2019.3.4...
2019-03-04 17:30:39
342
原创 《云计算导论》阿里云ECS服务器hadoop安装教程(单机)
环境配置信息 :jdk 1.8.0_181 (必须安装openjdk,Hadoop的安装依赖于openjdk,相关安装教程自己百度。)系统:GentOs 7前期准备工作:修改系统hostname(修改主机名称)修改主机名称(hostname)[root@aliyunhost sysconfig]# cd /etc/sysconfig/[root@aliyunhost sy...
2018-12-06 20:26:09
422
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人