- 博客(4)
- 收藏
- 关注
原创 安装配置Spark以及Scala语言环境,分别使用Spark语言和Scala语言编写WordCount程序
实验步骤: 一 .下载scalar 解压到路径/usr/local/scalar 在/etc/profile文件中加入安装路径 vim /etc/profile 添加以下内容 export SCALA_HOME=/usr/local/scala/scala-2.12.8 export PATH=PATH:PATH:PATH:SCALA_HOME/bin 执行文件source /etc/profil...
2019-05-27 13:10:58
84
原创 hive安装及mysql配置
一、Hive安装 1.解压hive,移动到指定目录下 tar -zxvf apache-hive-3.1.1-bin.tar.gz -C /opt/module 配置环境变量 export HIVE_HOME=/opt/module/apache-hive-3.1.1-bin export PATH=PATH:PATH:PATH:HIVE_HOME/bin12 2.在hive/conf目录下 cp...
2019-05-27 13:08:55
93
原创 安装配置 Hadoop实现伪分布式与分布式部署
实验一 一、下载安装Vmware Workstation Pro 12 二、安装CentOS 点击【创建新的虚拟机】→ 【自定义安装】→ 【下一步】→ 【稍后安装操作系统(S)】→【Linux(L)】→ 【输入虚拟机名称,选择安装位置】→ 【下一步】→ 【使用网络地址转换(NAT)(E)】→ 【LSI Logic(L)】点击【下一步】→ 【SCSI(S)】→ 【创建新虚拟磁盘】→ 【将虚拟磁盘拆...
2019-05-27 12:25:15
112
原创 云南农业大学大数据技术与应用学习日志(1)
学习内容: 对大数据应用有初步认知,展望未来科技和社会,了解到部分与大数据有关的软件及公司。 1. 大数据定义:大数据是在可接受的时间内,对相关信息或者数据进行捕获,存储,搜索,共享,传送,分析和可视化的大型数据集。 2. 大数据的优势:更好的了解目标客户,业务流程的变革。通过大数据技术的发展,会推进人工智能及虚拟现实技术方面的进展,比如虚拟人物,阿尔法狗等。 3. 研究或应用大数据需要非常多的硬...
2019-03-04 17:52:30
390
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人