测试hadoop集群的读写与计算能力

1、测试HDFS写性能

向HDFS集群写10个128M的文件

cd /data/hadoop/hadoop/
bin/hadoop jar /data/hadoop/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.2-tests.jar TestDFSIO -write -nrFiles 10 -fileSize 128MB

参数代表含义：

• Number of files: 10：文件数量为10
• Total MBytes processed: 1280 ：总写入数据量为1280MB
• Throughput mb/sec: 3.59 ： 【总共需要写入的数据量】 /【每个map任务实际写入数据的执行时间之和】(这个时间会远小于Test exec time sec) 。这里也就是 【1280】/【(map1写时间+map2写时间+