- 博客(5)
- 收藏
- 关注
RSS订阅原创 大数据技术原理与应用笔记（1）——大数据概述
大数据概述 《大数据技术与原理》课程笔记 目录 1.1大数据概念 1.2数据产生方式 1.3技术支撑 1.4大数据的影响 1.5大数据的关键技术 1.6大数据的计算模式 1.1大数据概念 （1）数据量大/“大量化” （2）数据类型繁多/“多样化” 10%结构化数据，90%非结构化数据 （3）处理速度快/“快速化” 1秒定律——秒级决策 （4）价值密度低，商业价值高/“...
2019-04-27 09:46:22
3131
原创 Docker安装及简单镜像制作
本文章为《云计算》课程实验总结，使用CentOS7安装Docker并进行简单镜像制作。 注意：Docker要求CentOS系统的内核版本高于 3.10，可使用uname -r查看系统内核。 1 Docker安装 （1）更新yum包 yum update （2）安装依赖包 yum-util提供yum-config-manager功能，另外两个是devicemapper驱动依赖...
2019-04-13 16:41:38
586
原创 Spark集群搭建
在已搭建好的Hadoop集群环境下，进行搭建Spark集群环境。 1 前言 1.1Spark集群搭建步骤 （1）Hadoop集群的搭建 （2）Scala软件安装 （3）Spark集群搭建 1.2环境说明 具体配置参考我的另一篇文章《CentOS7搭建Hadoop集群环境》： （1）三台CentOS7（最小化安装）虚拟机：master、slave1、slave2 （2）软件：jav...
2019-04-09 17:13:03
348
原创 LVS负载均衡服务器搭建
什么是LVS(Linux Virtual Server)？ LVS的组成 LVS/NAT、LVS/TUN、LVS/DR模式 什么是LVS？ 它是一种集群(Cluster)技术，采用IP负载均衡技术和基于内容请求分发技术。 调度器具有很好的吞吐率，将请求均衡地转移到不同的服务器上执行，且调度器自动屏蔽掉服务器的故障，从而将一组服务器构成一个高性能的、高可用的虚拟...
2019-04-06 14:48:07
1199
原创 CentOS7搭建Hadoop集群环境
本文章为云计算课程实验总结。 前言 CentOS7虚拟机搭建hadoop集群，共3个节点：master、slave1、slave2 软件：java1.8 hadoop2.6.0 3台虚拟机都装有CentOS7(最小化安装)系统，一台机命名为 master 作为 namenode，另两台为slave1和slave2，作为 datanode。 虚拟机配置 用户名 ...
2019-04-05 23:11:19
1449
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人