
hadoop
猎人在吃肉
这个作者很懒,什么都没留下…
展开
-
hadooop 常用命令
hadooop 启动Hadoop进入HADOOP_HOME目录。 执行sh bin/start-all.sh关闭Hadoop 进入HADOOP_HOME目录。 执行sh bin/stop-all.sh单个启动hadoop进程hadoop-daemon.sh start namenodehadoop-daemon.sh start datanodehadoop-daem转载 2014-11-25 10:04:57 · 1746 阅读 · 0 评论 -
在 Linux 上配置 hadoop 环境
操作环境说明在vmware workstation 12.0 上,使用的是centos6.4网络的配置1.0 vmnet配置点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.1.0 子网掩码:255.255.255.0 -> apply -> ok原创 2018-01-14 14:39:17 · 1755 阅读 · 0 评论 -
hadoop中的jps
jps判断hadoop启动是否成功;分别对master和slave进行了判断。jps不是hadoop的什么命令,是java的命令,所以直接执行就行了。转载 2015-02-24 21:55:24 · 6234 阅读 · 0 评论 -
hadoop slaves
slaves 文件一般在集群中你唯一地选择一台机器作为 NameNode ,一台机器作为 ResourceManager,这是master (主)。那么 ,集群中剩下的机器作为DataNode 和 NodeManager。这些是slaves (从)。在你的 etc/hadoop/slaves 文件上列出全部slave机器名或IP地址,一个一行。转载 2015-01-05 14:03:52 · 5150 阅读 · 0 评论 -
hadoop hdfs dfsadmin 介绍
一、hdfs dfsadmin -safemode 安全模式 NameNode在启动的时候 首先进入安全模式,如果datanode丢失的block达到一定的比例(由hdfs-site.xml文件中dfs.safemode.threshold.pct决定,默认0.999f),则系统会一直处于安全模式状态即只读状态 ; 否则没有其他情况影响,一般情况下,系统会自动离开安全模式。dfs.sa转载 2015-01-11 14:32:16 · 7905 阅读 · 0 评论 -
(转载)Cloudera manager free 的使用
转载自:http://caozs.blog.51cto.com/707029/1223346转载 2015-01-12 09:58:23 · 587 阅读 · 0 评论 -
(转载)你为什么学习Hadoop
转载自:http://chuansongme.com/n/1062752记得11年的时候在百度知道搜Hadoop相关的问题每天只有零星几个,那会我基本每天都要去看看有没我能回答的问题。现在去百度知道搜索Hadoop已经有800多万个问题。12年的时候我在百度空间发了一篇博文>可通过左下角阅读原文进行查看。两年来陆续收到一些同学的来信。因工作原因帮助了一些同学,也忽略了一些同学,转载 2015-01-12 09:53:36 · 1123 阅读 · 0 评论 -
hadoop2.4.0 ha 搭建
问题导读:1.hadoop ha是通过什么配置实现自动切换的?2.配置中mapred与mapreduce的区别是什么?3.hadoop ha两个namenode之间的关系是什么?-- hadoop 版本:2.4.0-- 安装包名: hadoop-2.4.0.tar.gz 或者源码版本 hadoop-2.4.0-src.tar.gz(我h转载 2015-01-11 15:07:11 · 2461 阅读 · 1 评论 -
hadoop Client: Retrying connect to server
在CentOS1机器上执行 hdfs namenode -format ,一直报错org.apache.hadoop.ipc.Client: Retrying connect to server: CentOS02/192.168.202.102:8485. Already tried 0 time(s).org.apache.hadoop.ipc.Client: Retrying con转载 2015-01-07 21:35:54 · 7446 阅读 · 0 评论 -
Win7 运行Hadoop WordCount 报错
在Win7下配置好hadoop集成eclipse开发环境后,运行WordCount程序的时候,有可能会报内存溢出异常:java.lang.OutOfMemoryError: Java heap space at org.apache.hadoop.mapred.MapTask$MapOutputBuffer.(MapTask.java:781) at o转载 2014-11-25 15:53:22 · 4199 阅读 · 0 评论 -
用eclips连hadoop报Unknown protocol to job tracker: org.apache.hadoop.hdfs.protocol.ClientProtoco
用eclips连hadoop报Unknown protocol to job tracker: org.apache.hadoop.hdfs.protocol.ClientProtocolorg.apache.hadoop.ipc.RemoteException: java.io.IOException: Unknown protocol to job tracker: org.apach转载 2014-11-25 16:06:09 · 5497 阅读 · 1 评论 -
hbase shell 脚本的入门使用
文章目录进入hbase shell 命令行中1、list 查看所有的表2、create 创建表3、disable、drop 删除表4、put 添加数据5、scan 查询所有数据6、delete 删除数据6.1、删除一个字段的数据6.2、删除一行的数据进入hbase shell 命令行中进入hbase shell 命令行中,执行 hbase shell 脚本:bash-4.4# hbas...原创 2019-09-27 13:53:41 · 1324 阅读 · 0 评论