Benchmark
ZhaoYingChao88
学而不思则罔,思而不学则殆!
展开
-
常用Benchmark
一、Benchmark简介Benchmark是一个评价方式,在整个计算机领域有着长期的应用。正如维基百科上的解释“As computer architecture advanced, it became more difficult to compare the performance of various computer systems simply by looking at t原创 2017-11-23 09:00:16 · 5439 阅读 · 1 评论 -
Spark性能测试工具
Spark 性能优化方案Spark性能测试工具•Spark性能测试基准程序Benchmark–https://github.com/intel-hadoop/HiBench•Spark性能测试与分析可视化工具–https://github.com/zhihuili/Dew性能调优的步骤1.性能测试,观察系统性能特性2.资源(CPU、Memory、Disk、Net)利用分析,寻找资源瓶颈,提高原创 2017-11-23 09:20:22 · 4623 阅读 · 0 评论 -
HiBench算法简介
1.HiBench算法简介Hibench 包含9个典型的hadoop负载(micro benchmarks,hdfs benchmarks,web search bench marks,machine learning benchmarks和data analytics benchmarks)具体参考CDH集群安装&测试总结:第三节内容micro benchmark转载 2017-11-23 09:25:41 · 2727 阅读 · 0 评论 -
Linux文件系统性能优化
由于各种的I/O负载情形各异,Linux系统中文件系统的缺省配置一般来说都比较中庸,强调普遍适用性。然而在特定应用下,这种配置往往在I/O性能方面不能达到最优。因此,如果应用对I/O性能要求较高,除了采用性能更高的硬件(如磁盘、HBA卡、CPU、MEM等)外,我们还可以通过对文件系统进行性能调优,来获得更高的I/O性能提升。总的来说,主要可以从三个方面来做工作:1、Disk相关参数调优原创 2017-12-28 17:41:37 · 1015 阅读 · 0 评论