![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 78
IT-LeoChen
广告播放系统、实时计算、Java、Lua
展开
-
hadoop集群默认配置
获取默认配置配置hadoop,主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件,默认下来,这些配置文件都是空的,所以很难知道这些配置文件有哪些配置可以生效,上网找的配置可能因为各个hadoop版本不同,导致无法生效。浏览更多的配置,有两个方法:1.选择相应版本的hadoop,下载解压后,搜索*.xml,找到core-default转载 2013-01-08 21:18:33 · 608 阅读 · 0 评论 -
Hadoop伪分布式模式的安装和配置
① 配置ssh,生成密钥,使到ssh可以免密码连接localhost② 下载并解压jdk,并配置环境变量③ 下载并解压Hadoop安装包,本文选择版本hadoop-1.1.2.tar.gz④ 进入Hadoop的解压目录,编辑conf/hadoop-env.sh文件 ⑤ 编辑conf目录下core-site.xml、hdfs-site.xml和mapred-site.xml三个核心配置文件⑥ 格式化HDFS⑦ 使用bin/start-all.sh启动Hadoop⑧ 使用bin/stop-all.原创 2013-11-24 16:15:59 · 1534 阅读 · 0 评论 -
Hadoop完全分布式模式的安装和配置
Hadoop完全分布式模式的安装和配置一、建立hadoop运行账号二、配置hosts文件三、下载并解压jdk四、下载并解压hadoop安装包五、为hadoop账户配置ssh免密码连入六、配置hadoop-env.sh七、conf文件夹下修改site文件八、conf文件夹下配置masters和slaves文件九、向各节点复制/etc/hosts,/etc/profile,jdk及hadoop十、格式化hdfs十一、启动hadoop十二、用jps检验各后台进程是否成功启动原创 2013-11-25 01:52:29 · 2870 阅读 · 1 评论 -
HBASE完全分布式模式的安装
1集群环境下hadoop.1.1.2已经安装成功2配置hosts,及环境变量3编辑hbase-env.xml4编辑hbase-site.xml5编辑regionservers文件6把Hbase复制到其它节点7启动Hbase8验证启动原创 2013-12-10 22:44:09 · 2724 阅读 · 0 评论 -
Hive远程模式
1下载并安装MySQL并启动服务(我的MySQL安装在宿主机Windows下)2在MySQL中建立数据库用于存放Hive元数据,并为为数据库建立账号,并赋予需要的权限3下载并解压Hive4为Hive配置环境变量5配置hive-config.sh文件6配置hive-site.xml文件,并配置MySQL连接信息7把mysql-connector-java-x.x.x.jar 复制到Hive的lib目录下8启动Hive9验证Hive是否启动成功原创 2013-12-11 18:30:37 · 6221 阅读 · 0 评论