云计算
z2bns
这个作者很懒,什么都没留下…
展开
-
云计算(一)——Linux CentOS 7虚拟机安装
一、内容1.安装CentOS7 虚拟机2.修改网络配置(让物理机与虚拟机互联)3.修改主机名4.修改hosts文件二、步骤首先到https://my.vmware.com/官网上下载VMware Workstation虚拟机——》双击运行安装——》下一步选择安装位置——》下一步下一步下一步安装完成在https://w...原创 2019-04-28 22:45:26 · 1217 阅读 · 0 评论 -
云计算(二)——虚拟机CentOS 7 安装JDK && SSL免秘钥登录
一、内容1. 安装JDK2.复制虚拟机 slave1、slave23.修改网络配置(让物理机与虚拟机之间互联)4.设置免密钥登录二、步骤安装JDK安装过程需要在slave节点上操作将下载好的jdk安装包上传到虚拟机中(直接拖到虚拟机桌面)(注:压缩包资源在文章尾)右键压缩包——》IconSettings——》查看Location(存储路径)然后用...原创 2019-05-10 00:06:33 · 240 阅读 · 0 评论 -
云计算(三)——Hadoop安装配置
一、内容安装Hadoop 配置Hadoop 格式化HDFS 验证MapReduce程序二、步骤把Hadoop安装压缩包复制到master虚拟机根目录下解压缩命令:tar –xvf hadoop-2.5.2.tar.gz配置环境变量hadoop-env.shcd /etc/Hadoop (保证在hadoop2.5.2目录中)vi hadoop-env.s...原创 2019-07-13 09:09:19 · 352 阅读 · 0 评论 -
云计算(四)——Centos系统eclipse安装及相关配置
一、内容1、安装eclipse2、安装eclipse-hadoop-plugin3、配置hadoop插件4、运行wordcount程序二、步骤将eclipse-standard-kepler-SR2-linux-gtk-x86_64.tar.gz放到/root/目录下,然后解压得到eclipse目录命令:tar -xvf eclipse-standard-keple...原创 2019-07-13 09:14:29 · 609 阅读 · 0 评论 -
云计算(五)——Mapreduce 的使用
一、Mapreduce 计算整数的最大值和最小值【实验目的】1)理解mapreduce执行原理2)理解map,reduce阶段3)函数的使用【实验原理】需求描述:对输入文件中数据进行计算找出这一组数据中的最大值和最小值。原始数据:1021039109200...原创 2019-07-13 09:18:43 · 1580 阅读 · 1 评论 -
云计算(六)——flume采集日志信息
一、flume采集日志信息到hdfs系统【实验目的】1)掌握flume的应用原理2)掌握flume对日志信息的采集过程【实验原理】Flume是Cloudera提供的日志收集系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种storage。Flume是一个分布式、高可靠、和高可用...原创 2019-07-13 09:23:37 · 786 阅读 · 0 评论 -
云计算(七)——HBase伪分布式环境搭建
【实验目的】1)学会Hbase伪分布式配置2)理解环境的配置文件【实验原理】Hbase伪分布式模式环境是在没有多台计算机的情况下,对Hbase的分布式存储和计算进行模拟安装和配置。通过在一台计算机节点上解压Hbase安装压缩包后,然后进行Hbase相关文件进行配置,让Hbase运行在一台机器上并实现对数据存储和计算的测试支持。Hbase伪分布式环境的数据需要...原创 2019-07-13 09:28:21 · 828 阅读 · 0 评论 -
云计算(八)——Hive Shell命令mysql
Hive DDL语句实例—数据库相关操作【实验目的】1)掌握Hive的数据类型2)掌握hive的DDL语句的使用3)掌握hive的常见DDL语句的用法【实验原理】Hive支持多种不同长度的整型和浮点型数据类型,支持布尔类型,也支持无长度限制的字符串类型。Hive中的列支持使用struct,map和array...原创 2019-07-13 09:34:06 · 336 阅读 · 0 评论