- 博客(12)
- 收藏
- 关注
原创 【大数据】总结分享:Hadoop的搭建思路
本文是关于搭建Hadoop分布式文件系统(HDFS)的指南,作者分享了从单节点“伪分布式”到多节点“完全分布式”的搭建思路,并强调了这一思路在其他高级技术中的通用性作者计划在后续更新中详细介绍从“伪分布式”到“完全分布式”的搭建过程,并强调了在搭建过程中的代入感和实践的重要性。
2024-03-09 18:03:27
551
原创 【HDFS】架构 二 :HDFS的启动流程、安全模式、服务器的分类、副本放置策略、读写流程
本文提供了Hadoop分布式文件系统(HDFS)的详细架构分析,包括启动流程、安全模式、服务器分类、副本放置策略、写流程和读流程。文章强调了HDFS在设计上对数据一致性和可靠性的重视,以及其在分布式计算环境中的高效读写能力。
2024-03-09 10:00:37
927
原创 【HDFS】启蒙:世界上已有的分布式文件系统那么多了,为什么Hadoop项目中还要开发一个分布式文件系统?
Hadoop分布式文件HDFS的启蒙:角色及职责
2024-03-07 18:03:04
566
原创 【大数据】思想启蒙
What?Why?How?启蒙很重要!:学习知识的时候要去搞明白它存在的意义,这样学习的成本才会低,才会高效!有讲单机、集群、以及处理大数据问题的辩证。
2024-03-06 12:17:07
668
原创 【入门学习大数据】“伪分布式”的Hadoop应用搭建
Hadoop 2.6.5 官网官方配置说明文档:以下面的命令只要是有缩进的,都不要弄命令行里,是给你写在配置文件中或输出一些很深的目录的路径的,不明白的可以看一下截图。
2024-03-05 16:08:39
651
原创 【入门学习大数据】基础设施 三 :Linux CentOS 7 的配置
前提:连接好 Xshell 、Xftp ,使用它来操作Linux:以下面的命令只要是有缩进的,都不要弄命令行里,是给你写在配置文件中或输出一些很深的目录的路径的,不明白的可以看一下截图(用不规范的/简单的,体会一下这个过程)
2024-03-05 15:16:02
1705
原创 【入门学习大数据】安装基础设施 二 :远程工具 Xshell 和 Xftp
这就是连接登录成功了,可以正常的敲命令,会自动提交到你的CentOS的shell里。安装好后,自己用邮箱注册,会给邮箱发个链接点开就注册成功了,登录即可正常使用。软件下载好后,鼠标右键以管理员身份运行,正常安装即可(一般都是会的)Xftp 的协议是用SFTP,其他的过程是和Xshell的一模一样的。不提供网盘资源链接了,在安装时,要求是最新版的,在官网下就好了。如果出现乱码,在常规旁边的"选项"中,设置编码为UTF-8。软件使用,有图形界面,还是很简单的,用正常的逻辑即可。
2024-03-05 13:00:57
429
原创 【入门学习大数据】安装基础设施 一 :VMware & CentOS & 远程工具
boot容量给1G,swap容量给同之前选的内存大小相同(你设置过的自然记得起,没设置过的就是1G),剩下的都给根目录。有能上传:压缩包文件、软件及应用的安装文件,上传和下载速度还可以的网盘/快传,知道的话,可以告知一下我。看一下能否上网,顶栏有这个图标就行(图片是自动加水印的,我也不知道怎么去除,应该能知道是什么意思)在安装的过程中,发现卡了,建议不要多次点击,越点越卡,给点耐心就好了。想自定义的就自定义,嫌麻烦的就直接点完成(一般都是NAT模式的了)要设置的先点下面的减号删除所有默认的,再点加号新建。
2024-03-05 12:30:20
1859
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人