- 博客(8)
- 收藏
- 关注
原创 NoSQL数据库Redis在Linux系统下的安装和运维
一、安装1、下载redis-5.0.3.tar.gzhttps://redis.io/download2、上传到linux里面put E\大数据软件\redis-5.0.3.tar.gz3、解压(解压在module文件内)tur -zxvf redis-5.0.3.tar.gz -C/opt/module4、编译进入Redis的MakeFile脚本所在文件夹,执行make命令编译:...
2019-05-24 22:20:40 195
原创 spark的安装与wordcount
一、Scala作为spark的运行基础语言,首先需要下载的就是Scala1、官网下载安装Scala:scala-2.12.8.tgzhttps://www.scala-lang.org/download/2、上传解压上传SecureCRT 【File】→【Connect SFTP Session】开启sftp操作:put E:\大数据软件\9\scala-2.12.8.tgz解压:ta...
2019-05-21 22:34:53 164
原创 linux可视化界面下的mysql安装和hive的安装
linux可视化界面下的mysql安装和hive的安装一、mysql的安装1、启动虚拟机进入可视化界面下的终端下载安装wget:yum -y install wget直接输入wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm2、解压:rpm -ivh mysql-community-release-...
2019-05-21 21:19:00 365
原创 Hbase安装配置
Hbase安装配置一、下载1、下载hbase压缩包(选择与自己安装的Hadoop版本的兼容版本,见后面附录)官网下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/选择稳定版hbase-1.4.9-bin.tar.gz,在Windows里面下载。2、下载zookeeper-3.4.6.tar.gz二、将压缩包从Wi...
2019-05-21 13:14:51 229
原创 MapReduce,架包
MapReduce架包、调试WordCount程序一、在上一个发布的hdfs的基础上运行架包package hdfs.files;import java.io.IOException;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;import org.apache.log4j.BasicC...
2019-05-21 12:52:09 203
原创 安装配置JDK+Eclipse+Maven,搭建HDFS
大数据技术与应用 实验二报告 安装配置JDK+Eclipse+Maven,搭建HDFS一、安装配置JDK1、官网下载Java开发工具安装包jdk-8u201-windows-x64.exe:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html2、运行安装包,第一次选择JDK安装...
2019-05-21 12:43:08 315
原创 hadoop的安装及环境配置
Hadoop的安装及配置Hadoop的版本是Hadoop-2.7.3一、安装解压Java jdk1、下载Java jdk1.8.0-121,在opt内新建一个目录mkdir module2、将jkd解压到module里tar -zxvf ~/jdk****.jar -C/opt/module3、配置Java环境vi /etc/profile1.#在文件最后添加2.export ...
2019-05-20 10:05:18 151
转载 大数据分析的四个环节
什么是大数据?随着大数据时代的到来,AI 概念的火热,人们的认知有所提高。为什么说大数据有价值?这是不是只是一个虚的概念?大家怎么考虑数据驱动问题?为什么掌握更多的数据就会更有效?这些问题很难回答,但是,大数据绝不是大而空洞的。信息论之父香农曾表示,信息是用来消除不信任的东西,比如预测明天会不会下雨,如果知道了今天的天气、风速、云层、气压等信息,有助于得出更准确的结论。所以大数据是用来消除不...
2019-03-04 20:41:13 803
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人