大数据
文章平均质量分 90
流辉fglow
这个作者很懒,什么都没留下…
展开
-
【HDFS主从集群】存在两个独立的问题和解决方案
【HDFS主从集群】存在两个独立的问题和解决方案!原创 2024-03-11 19:01:55 · 365 阅读 · 0 评论 -
【入门学习大数据】基础设施 三 :Linux CentOS 7 的配置
前提:连接好 Xshell 、Xftp ,使用它来操作Linux:以下面的命令只要是有缩进的,都不要弄命令行里,是给你写在配置文件中或输出一些很深的目录的路径的,不明白的可以看一下截图(用不规范的/简单的,体会一下这个过程)原创 2024-03-05 15:16:02 · 1717 阅读 · 0 评论 -
【入门学习大数据】安装基础设施 二 :远程工具 Xshell 和 Xftp
这就是连接登录成功了,可以正常的敲命令,会自动提交到你的CentOS的shell里。安装好后,自己用邮箱注册,会给邮箱发个链接点开就注册成功了,登录即可正常使用。软件下载好后,鼠标右键以管理员身份运行,正常安装即可(一般都是会的)Xftp 的协议是用SFTP,其他的过程是和Xshell的一模一样的。不提供网盘资源链接了,在安装时,要求是最新版的,在官网下就好了。如果出现乱码,在常规旁边的"选项"中,设置编码为UTF-8。软件使用,有图形界面,还是很简单的,用正常的逻辑即可。原创 2024-03-05 13:00:57 · 437 阅读 · 0 评论 -
【入门学习大数据】安装基础设施 一 :VMware & CentOS & 远程工具
boot容量给1G,swap容量给同之前选的内存大小相同(你设置过的自然记得起,没设置过的就是1G),剩下的都给根目录。有能上传:压缩包文件、软件及应用的安装文件,上传和下载速度还可以的网盘/快传,知道的话,可以告知一下我。看一下能否上网,顶栏有这个图标就行(图片是自动加水印的,我也不知道怎么去除,应该能知道是什么意思)在安装的过程中,发现卡了,建议不要多次点击,越点越卡,给点耐心就好了。想自定义的就自定义,嫌麻烦的就直接点完成(一般都是NAT模式的了)要设置的先点下面的减号删除所有默认的,再点加号新建。原创 2024-03-05 12:30:20 · 1871 阅读 · 0 评论 -
【入门学习大数据】“伪分布式”的Hadoop应用搭建
Hadoop 2.6.5 官网官方配置说明文档:以下面的命令只要是有缩进的,都不要弄命令行里,是给你写在配置文件中或输出一些很深的目录的路径的,不明白的可以看一下截图。原创 2024-03-05 16:08:39 · 663 阅读 · 0 评论 -
【大数据】简介:大数据生态 Hadoop
表示繁写/全称。原创 2024-03-06 20:00:00 · 698 阅读 · 0 评论 -
【大数据】思想启蒙
What?Why?How?启蒙很重要!:学习知识的时候要去搞明白它存在的意义,这样学习的成本才会低,才会高效!有讲单机、集群、以及处理大数据问题的辩证。原创 2024-03-06 12:17:07 · 683 阅读 · 0 评论 -
【HDFS】启蒙:世界上已有的分布式文件系统那么多了,为什么Hadoop项目中还要开发一个分布式文件系统?
Hadoop分布式文件HDFS的启蒙:角色及职责原创 2024-03-07 18:03:04 · 573 阅读 · 0 评论 -
【HDFS】角色的架构设计
HDFS的架构设计原创 2024-03-08 22:09:24 · 1792 阅读 · 0 评论 -
【HDFS】架构 二 :HDFS的启动流程、安全模式、服务器的分类、副本放置策略、读写流程
本文提供了Hadoop分布式文件系统(HDFS)的详细架构分析,包括启动流程、安全模式、服务器分类、副本放置策略、写流程和读流程。文章强调了HDFS在设计上对数据一致性和可靠性的重视,以及其在分布式计算环境中的高效读写能力。原创 2024-03-09 10:00:37 · 983 阅读 · 0 评论