![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
北邮
文章平均质量分 81
卜卜贝
想起来就记一点
私信不咋看
展开
-
大数据技术基础复习5【数据存储】
DataNode保存数据块时会生成一个校验码,读取数据时若发现校验码不一致则认为数据块已损坏。由于每个Block都有3个副本,NameNode发现该DataNode故障后可从别的节点重构故障节点上的数据。Master:负责存储和管理元信息(整个文件系统的目录树、文件的块列表、每个块存储的节点列表等)将文件分成等大的数据块,以数据块为单位存储到不同的节点上,实现负载均衡和并行处理。每个文件都会被保存到三个不同的节点上(三个副本)以保证可靠性。允许分区故障,允许数据同步的滞后性,要求最终一致性。原创 2022-10-13 10:30:24 · 313 阅读 · 0 评论 -
M1下安装MongoDB 记录
官网上只能找到适配intel芯片x86-64的。找到了别人的笔记根据教程完成了安装。参考教程:Macbook M1和 Linux 的Homebrew安装教程---kalrry_kalrry的博客-CSDN博客_homebrew安装https://blog.csdn.net/weixin_45406712/article/details/121385987M1 MacOS 下使用Brew安装MongoDB、入门概念 、Datagrip可视化操作MongoDB_养猪去的博..原创 2022-05-02 07:46:21 · 152 阅读 · 0 评论 -
北邮-大数据技术基础复习2【数据收集】
大数据技术基础复习2【数据收集】原创 2021-12-29 17:20:12 · 1914 阅读 · 0 评论 -
北邮-大数据技术基础复习【概述】
大数据技术基础【概述】原创 2021-12-29 14:33:07 · 1083 阅读 · 0 评论 -
北邮-大数据技术基础复习3【分布式消息队列】
北邮-大数据技术基础复习3【分布式消息队列】原创 2021-12-29 20:49:02 · 1063 阅读 · 0 评论