hadoop
开心农场208
人生,淡到极致的美丽是淡定而从容!
展开
-
基于hadoop1.0集群环境搭建
环境准备:关闭防火墙/selinux/iptables setup vi /etc/selinux/config SELINUX=disabled #禁用 setenforce 0 #临时生效 iptables -F #清理防火墙规则 1:创建使用的用户帐户 groupadd hadoop // 创建hado原创 2015-12-16 23:44:44 · 2511 阅读 · 0 评论 -
浅谈云计算和大数据技术
浅谈云计算和大数据技术 背景: 随着计算机技术的发展,数据量日益增长,现有技术也很难满足业务的发展需求,在代码的层层迭代和优化之后,还是很难满足数据的增长需求,迫切需要一项新的技术来从事数据计算,因为就产生了云计算和大数据这些技术,那么在此背景下,简单介绍一下我对云计算和大数据技术的理解。 1. 云计算 1.1云计算的概念 能通过网络访问可扩展的、灵活的、可共享的物理或虚拟资源池,并按需翻译 2016-09-01 11:21:47 · 30835 阅读 · 1 评论 -
Hadoop2.0分布式HA环境部署
Hadoop2.0分布式HA环境部署 Hadoop概述 由于Hadoop1.0集群节点中只存在一个元数据(NameNode)节点,负责元数据合并的节点为SecondaryNameNode,那么在这个场景下如果元数据节点服务宕机,就会出现集群环境不可用,需要人工操作才能够重新启动,因此Hadoop2.0在Hadoop1.0的配置环境基础之上增加了HA机制,同时通过Zookeeper做集群的健...原创 2019-01-31 16:32:56 · 362 阅读 · 0 评论