weixin_44156917的博客

原创 大数据核心组件之HADOOP

1.大数据概述 大数据主要解决：海量数据的存储（TB、PB、EB）和海量数据的分析计算问题 特性：大数据量、多样化、低价值密度 如何快速对有价值数据“提纯”成为目前大数据背景下待解决的难题。 2.大数据技术生态体系 2.1 hadoop 2.1.1 hadoop完全分布式集群搭建 准备3台虚拟机 防火墙，静态ip及主机名设置 添加admin用户账号（也可不添加，直接给root用户添加免密） 在所有的主机下均建立一个账号admin用来运行hadoop ，并将其添加至sudoers中 [root@n