hadoop
flyinf_guo
这个作者很懒,什么都没留下…
展开
-
Hadoop Hdfs Edit log 加载错误,重启无效问题解决过程
cdh 问题,启动显示正常,但是不能通过hdfs连接。版本 :5.13问题:hdfs 启动错误,提示下面日志2021-12-20 00:14:56,817 WARN org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Only one image storage directory (dfs.namenode.name.dir) configured. Beware of data loss due to lack of redundant sto原创 2021-12-20 14:04:32 · 2587 阅读 · 0 评论 -
hadoop datanode 重新启动和hbase regionserver重新启动
我自己有了个集群,现在datanode 宕机了. datanode通过 ssh ccc "/home/hadoop/bin/hadoop-daemon.sh start datanode"ssh ccc "/home/hadoop/bin/hadoop-daemon.sh start tasktracker" 重起后, 那么在datanode上的hbase如何重起?我自己有了个集群,现转载 2012-03-21 16:37:14 · 5155 阅读 · 0 评论 -
究Mahout平台第三天
研究Mahout平台第三天 今天目标: 研究k-means算法的调用方式和代码: 1.首先建一个map/reduce工程。 2.建一个包mahoutTest,在包下建一个类:kMeans.java。现在什么也没有。 3.看看mahout的例子程序,找到源代码。 3.1在工程下建一个包,将mahout-core-0.5-c原创 2013-05-06 17:54:12 · 2372 阅读 · 0 评论 -
mahout学习第四天
mahout学习第四天,今日目标,完成mahout的推荐部分的学习: 3.2.4 Update files FileDataModel supports update files. These are just more data files that are read after the main data file, and that overwrite any pre原创 2013-05-09 10:22:01 · 1042 阅读 · 0 评论 -
ubuntu 12.04 安装 ganglia
最近需要安装 ganglia ,从网上搜索了一篇安装文档,结果按照其步骤完成后发现从浏览器端打开是404,从网上找到其他的安装文档,组合后目前打开正常。安装环境:ubuntu 12.041. 准备安装依赖:apt-get install rrdtool apache2 php52. 安装安装ganglia:apt-get install ganglia*转载 2014-01-25 16:23:23 · 1832 阅读 · 0 评论 -
hadoop job运行问题解决
问题现象: job提交后总是在本地机器运行,不能提交到hadoop job tracker,在http://192.168.1.130:50030/jobtracker.jsp,不能看到运行中的job。在控制台输出中出现: 14/02/15 00:04:20 INFO mapred.LocalJobRunner: reduce > sort原因分析: 第一原创 2014-02-14 15:22:11 · 3651 阅读 · 0 评论 -
ganglia监控hbase部分指标的权威解释
hbase.regionserver.blockCacheCount :内存中缓存块(block cache)数。缓存中StoreFiles(HFiles)的块(block)数量。hbase.regionserver.blockCacheEvictedCount :因超出堆大小限制,从缓存中释放的块数量。hbase.regionserver.blockCacheFree: 可用的缓存块转载 2014-02-17 16:55:06 · 4150 阅读 · 1 评论