传统数据与大数据的对比
传统Linux系统与大数据linux系统安装的区别
传统
系统硬盘(与数据硬盘100%隔离)
两块硬盘做一个RAID1
引导分区 200M
交换分区 内存的两倍
根分区 /(所有的空间)
数据硬盘
多个硬盘制作一个逻辑卷,即将多个物理硬盘制作成一个大的逻辑硬盘
大数据
系统硬盘
两块硬盘做一个RAID1
引导分区 200M
交换分区 可以不设置或设置的很小。因为在大数据中需要将其关闭
根分区 /(所有的空间)
数据硬盘
多个硬盘,每个硬盘独立挂载,有多少个硬盘,挂载多少个目录
数据硬盘优先不做RAID,必须做时,做RAID0
RAID的优缺点
优点:数据的读写效率稍高,
缺点:不支持热插拔。一个硬盘损坏,整个服务器需要全部关机再能处理该硬盘。
大数据块的原因
1、分布式存储
2、分布式并行计算
3、移动程序到数据端
4、更前卫、更先进的实现思路
5、更细分的业务场景
6、更先进的硬件技术+更先进的软件技术