云计算
文章平均质量分 95
云计算是分布式计算、并行计算、网格计算、效用计算、 网络存储、虚拟化、负载均衡、热备份冗余等传统计算机和网络技术发展融合的产物,它将彻底改变整个IT产业结构和运行方式。云计算与人工智能、大数据、物联网甚至通信等技术也密不可分。
是我,Zack
就职于某公司大数据部,负责开发、实施、运维相关工作,喜欢边学习边笔记,热衷分享、开源,有大数据方向感兴趣的小伙伴欢迎多多交流~
展开
-
【虚拟化与云计算实验报告】Hadoop环境搭建:从系统下载、安装、命令使用,到MapReduce的简单编程实验
一、实验要求根据课本上的Hadoop的章节的内容,熟悉从系统下载、安装、命令使用,到MapReduce的简单编程实验。二、实验内容2.1 部署方式Hadoop主要有两种安装方式,即传统解压包方式和Linux标准方式。安装Hadoop的同时,还要明确工作环境的构建模式。Hadoop部署环境分为单机模式、伪分布模式和分布式模式三种。2.2 部署步骤(简述)步骤1:制定部署规划;步骤2:部署前工作;步骤3:部署Hadoop;步骤4:测试Hadoop。2.3 准备环境由于分布式计算需要用到很多原创 2021-05-30 23:35:15 · 8458 阅读 · 6 评论 -
云计算 第六章 Hadoop 2.0 大家族
6.1 Hadoop 2.0大家族概述6.1.1 分布式组件1.组件简介2.组件分类6.1.2 部署概述1.Apache社区版分布式组件部署步骤:2.商业版(Cloudera或Hortonworks)部署步骤:3.部署规划集群共五台机器,cMaster为主节点,cProxy为主节点代理,其他为Slave节点,注意iClient并不属于集群,用户还须确保集群中所有机器和iClient都可以连网。4商用版Hadoop部署6.2 ZooKeeper6...原创 2021-04-19 22:20:15 · 399 阅读 · 1 评论 -
云计算 第五章 Hadoop 2.0 主流开源云架构
文章目录5.1 引例5.1.1 问题概述5.1.2 常规解决方案5.1.3 分布式下的解决方案1.分布式存储冗余存储与冗余计算5.1.4 小结img5.2 Hadoop 2.0简述5.2.1 Hadoop 2.0由来5.2.2 Hadoop 2.0相关项目5.2.3 Hadoop应用img5.3 Hadoop 2.0部署5.3.1 部署综述1.部署步骤2.准备环境3.关于Hadoop依赖软件img5.3.2 传统解压包部署imgimgimgimg部署总结:5.4 Hadoop 2.0体系架原创 2021-04-19 17:48:50 · 1467 阅读 · 0 评论 -
云计算 第一章 大数据与云计算
文章目录1.1 大数据时代为什么全球数据量 增长如此之快?何谓大数据?1.2 云计算——大数据的计算1.2.1 大数据与云计算的关系1.2.2 云计算长定义1.2.3 云计算短定义1.2.4 云计算的7个特点1.2.5 云计算三类服务类型 (重点)1.3 云计算发展现状1.3.1 国外云计算的先行者1.亚马逊(amazon)2.谷歌(Google)3.微软(Microsoft)1.3.2 国内云计算崛起代表企业1.4 云计算实现机制1.4.1 SOA、管理中间件层结构1.4.2 云计算体系结构1.4.3 简原创 2021-04-12 18:04:03 · 1752 阅读 · 0 评论 -
云计算 第四章 微软云计算 Windows Azure
文章目录第四章 微软云计算 Windows Azure4.1 微软云计算平台1.传统的企业和用户在开发和部署自己的应用程序主要有两种方式2.微软的云计算技术3.Windows Azure平台的4个组成部分4.Windows Azure平台体系架构4.2 微软云操作系统Windows Azure4.2.1 Windows Azure概述4.2.2 Windows Azure计算服务image.png4.2.3 Windows Azure存储服务1.全局命名空间2.体系架构3.存储域的层次结构4.双复制引原创 2021-04-12 17:41:08 · 5030 阅读 · 0 评论 -
云计算 第三章 Amazon云计算AWS
3.1 基础存储架构Dynamo3.1.1 Dynamo概况为了保证其稳定性,Amazon的系统采用完全的分布式、去中心化的架构 。作为底层存储架构的Dynamo也同样采用了无中心的模式Dynamo只支持简单的键/值(key/value)方式的数据存储,不支持复杂的查询Dynamo中存储的是数据值的原始形式,即按位存储,并不解析数据的具体内容[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ljkwXA2w-1616407647004)(https://cdn.原创 2021-03-22 18:09:51 · 3677 阅读 · 0 评论 -
云计算 第二章 Google云计算原理机应用(待补充)
第二章 Google云计算原理机应用Google云计算技术Google文件系统2.1 Google文件系统GFS2.1.1 系统架构GFS将整个系统节点分为三类角色(系统节点)Client(客户端):Master(主服务器):Chunk Server(数据块服务器):实现机制GFS的特点:采用中心服务器模式可以方便第增加Chunk ServerMaster掌握系统内所有的Chunk Server的情况,方便进行负载均衡不存在元数据的一致性问题不缓存数据原创 2021-03-15 18:08:53 · 1250 阅读 · 2 评论