Hadoop平台调优
文章平均质量分 79
dp452667730
这个作者很懒,什么都没留下…
展开
-
hadoop作业执行之TaskTracker
转自:http://hi.baidu.com/fengvsjinglove/item/7e78060ff64f5c1a3b53ee7c hadoop作业执行流程及代码简略解读之四TaskTracker 6. TaskTracker TaskTracker是在网络环境中开始和跟踪任务的核心位置。与Jobtracker连接请求执行任务而后报告任务状态 6.0 TaskTracker的启动转载 2012-08-03 16:50:44 · 2980 阅读 · 0 评论 -
hadoop基准测试
一、测试条件 集群完全安装配置后,应立即开始基准测试。基准测试时集群里不应该运行其他一切任务。 二、测试目标 1. 硬盘故障:新系统最常见的故障。可以通过运行高强度的IO基准测试程序集中测试。例如TestDFSIO 2. MapReduce的性能 三、测试方法 1、TestDFSIO基准测试HDFS 测试顺序应该是先写测试后读测试 写测试: 使用10个map任务写10个文件转载 2012-10-12 15:34:17 · 1475 阅读 · 0 评论