- 博客(4)
- 资源 (27)
- 问答 (1)
- 收藏
- 关注
转载 How does YARN compare to Mesos?
转自; http://www.quora.com/How-does-YARN-compare-to-MesosBoth systems have the same goal: allowing you to share a large cluster of machines between different frameworks. For those who don't know,
2014-04-22 11:36:51 846
原创 Hadoop的作业提交过程
1.JobClient调用FileInputFormat.getSplits(),如果数据文件是isSplitable()的话,会将大的文件分解成小的FileSplit,记录文件在HDFS里的路径及偏移量和Split大小。这些信息会统一打包到jobFile的jar中。2.JobClient然后使用submitJob(job)方法向master提交作业。submitJob(job)内部是通过
2014-04-11 20:01:09 1401
转载 操作系统级别对Hadoop性能优化
转载自过往记忆(http://www.iteblog.com/)本文链接地址: 《操作系统级别对Hadoop性能优化》(http://www.iteblog.com/archives/1004)由于Hadoop自身的一些特点,它只适合用于将Linux作为操作系统的生产环境。在实际应用场景中,管理员适当对Linux内核参数进行调优,可在一定程度上提高作业的运行效率,比较有
2014-04-08 20:04:22 973
转载 hadoop hbase metric名全解释
load_one 每分钟的系统平均负载load_fifteen 每15分钟的系统平均负载load_five 每5分钟的系统平均负载boottime 系统启动时间,精确到秒bytes_in 网络接收速度,单位bytes/secbytes_out 网络发送速度,单位bytes/seccpu_aidle 启动的空闲CPU百分比cpu_idle 空闲CPU百分比
2014-04-01 16:47:44 923
数据恢复工具(MiniTool_U盘数据丢失)
2015-08-13
关于Jstat的内存回收数量查看
2015-02-12
TA创建的收藏夹 TA关注的收藏夹
TA关注的人