博客专栏  >  云计算/大数据   >  EasyHadoop

EasyHadoop

EasyHadoop开源社区(www.easyhadoop.com)致力于在中国推广和普及Hadoop相关技术,是国内最早专注于Hadoop开发、应用、推广的机构组织,推出的EasyHadoop版本更易于开发,功能更强大。

关注
3 已关注
10篇博文
  • Hadoop2 MR-JobHistory服务介绍

    1)MR-JobHistory服务目标 主要是向用户提供历史的mapred Job 查询 2)MR-JobHistory服务架构 详细解释: a)在运行MR Job时,MR 的 Applica...

    2015-05-15 11:09
    9107
  • Hadoop 2:Capacity Scheduler配置项说明

    yarn.scheduler.capacity.A.capacity 队列A的最低保障容量(百分比)(所有队列总和相加为100) yarn.scheduler.capacity.A.max...

    2015-05-14 14:57
    4716
  • hive 0.10.0 杂记

    1. conf/hive-site.xml支持 Allow SELECT  without a mapreduce job   hive.fetch.task.conversion   mor...

    2013-01-29 18:11
    907
  • 使用java开发mapred时遇上的奇怪问题

    1)错误代码:输入文件的key class 为LongWritable ,和Text 不匹配       错误原因:最初设定程序的输入文件为sequence file ,生成的测试数据 为 text...

    2012-11-29 16:59
    3575
  • hive UDF开发注意事项

    在开发的hive UDF中,有时候需要使用到第三方jar包,一般的做法是把第三方jar包和udf一起打包,结果在测试udf时,hive报错:java.lang.ClassNotFoundExcepti...

    2012-11-14 12:04
    5880
  • hadoop运维记录之二:tasktracker启动后”假死“

    由于hadoop集群中某台服务器磁盘损坏,导致该服务器tasktracker 任务失败率大增(失败原因:分配到该服务器的任务的临时目录选择了损坏的磁盘,导致job初始化是失败),所以决定将坏的磁盘从t...

    2012-05-30 15:09
    3455
  • mapred streaming 脚本输出运行状态导致的奇怪问题

    今天在调试mapred streaming脚本时,发生了非常奇怪的问题:mapred脚本在被tasktracker调用后总是会随机的失败,错误信息如下: java.lang.RuntimeExcep...

    2012-06-13 15:46
    2161
  • hadoop运维之jobtracker无故停止服务

    今天下午同事在使用hive提交查询时,抛出执行错误:       于是打开jobtracker的管理页面,发现正在运行的job数目为零,tasktracker心跳正常,这一异常现象让我觉得j...

    2012-07-03 18:48
    5201
  • hadoop运维之三datanode被迫的升级

    由于最近集群xcievers错误频频发生,已经到了影响集群正常运营的地步,于是决定修改集群所有的datanode节点的配置,并重启datanode,欲添加的配置项如下: ...

    2012-07-11 11:04
    3511
  • hadoop集群balance工具详解

    在线上的hadoop集群运维过程中,hadoop 的balance工具通常用于平衡hadoop集群中各datanode中的文件块分布,以避免出现部分datanode磁盘占用率高的问题(这问题也很有可能...

    2012-07-12 19:04
    18569
img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部