- 博客(14)
- 收藏
- 关注
RSS订阅转载 核心流程 - 【Dr.Elephant源码分析系列文章-2】
关于如何开始代码部分的分析，我思考了许久。原因如下：Dr.Elephant的核心代码不多，截止到我读代码时，一共1万行左右。核心代码部分比较集中，可以通过一篇文章来分析完。Dr.Elephant的扩展性非常好，在介绍源码时，扩展性也是非常值得介绍的。Dr.Elephant启动入口app/Global.java类继承了play框架的 GlobalSettings 类，并覆盖了其中的o
2016-07-06 09:32:43
704
转载 [EverString收录]综述 - 【Dr.Elephant源码分析系列文章-1】
转自：http://blog.csdn.net/qsc0624/article/details/51462403-----------Dr.Elephant是LinkedIn于2016年4月开源的一个Hadoop平台性能调优工具。我们可以从这个链接获取源码：https://github.com/linkedin/dr-elephant。Dr.Elephant的问世将改变Ha
2016-05-26 10:11:10
850
转载 [EverString收录]Dr.Elephant FAQ 常见问题
这篇文章列举了一些Dr.Elephant常见的问题，以及一些建议来帮助我们解决实际遇到的问题。
2016-05-12 15:36:17
694
转载 [EverString收录]Dr.Elephant Rest API
有的情况下，用户可能不能访问Dr.Elephant的UI界面，但是需要和Dr.Elephant进行交互来获得Dr.Elephant的一些分析结果。Dr.Elephant提供了Rest API来满足用户的这个需求。 根据ID获得应用信息 根据任务的ID，可以获得任务的详细信息以及启发式算法的分析结果
2016-05-09 02:28:59
599
转载 [EverString收录]Dr.Elephant对于Hadoop任务的优化建议
使用Dr.Elephant来分析我们的任务，可以知道有哪些地方可以进行优化。 加速你的任务流程 对于特定的任务，最好有特定的参数配置。对于很多的应用场景来说，默认的任务配置并不能保证每个任务都有最好的性能。尽管对这些任务进行调优会花费一些时间，但是这些调优带来的性能提升是非常可观的。
2016-05-09 02:20:23
466
转载 [EverString收录]Dr.Elephant启动过程问题汇总
转载自：http://blog.csdn.net/qsc0624/article/details/51335607---------------------------在首次启动Dr.Elephant时，因为配置不当或者环境因素可能会导致启动失败。当启动失败后，我们可以从Dr.Elephant的日志文件（默认的启动日志是dr.log）中查看启动过程日志，找到Error和Except
2016-05-07 01:48:23
568
转载 [EverString收录]Dr.Elephant 部署启动详细流程
最近尝试在测试环境安装部署了Dr.Elephant，花了不少时间，碰到一些问题。借助于官方文档和LinedIn akshayrai大神的帮助，最终成功启动Dr.Elephant。鉴于国内还没有类似的文章详细介绍Dr.Elephant的部署启动的实践，现将自己的一些经验分享给大家，欢迎一起讨论。我的首次安装是在分布式Hadoop集群上完成的，没有尝试本地安装Dr.Elephant，所以下面的
2016-05-07 01:42:01
685
转载 [EverString收录]Dr.Elephant启发式算法指南
这篇文章介绍了Dr.Elephant中默认提供的对于MapReduce任务和Spark任务的启发式算法。分别介绍了每个启发式算法的一些概念以及计算方法。
2016-05-06 06:22:33
1755
转载 [EverString收录]Dr.Elephant部署指南
本文介绍了如何在集群上安装部署Dr.Elephant以及如何启动/停止Dr.Elephant。
2016-05-04 11:00:13
818
转载 [EverString收录] Dr.Elephant开发者指南
本文介绍了Dr.Elephant开发者如何获取源代码，以及如何在本地部署运行Dr.Elephant。详细内容包括Dr.Elephant的环境依赖以及代码结构以及Dr.Elephant中最重要的部分：启发式算法。
2016-05-04 10:57:33
1263
转载 [EverString收录] Dr.Elephant用户指南
这篇文章介绍怎么样使用Dr.Elephant来进行任务分析。 UI首页 Dr.Elephant启动后，首页如下： 集群统计信息 首页的灰色部分包含了最新的集群信息。这部分列出了最近24小时分析过的任务数量、可以进行优化的任务数量以及亟待优化的任务数量。 最新任务统计 这一部分列出了最近一段时间分析的任务。
2016-05-04 10:50:01
888
转载 [EverString收录]Dr.Elephant简介
Dr.Elephant被定位成一个对Hadoop和Spark任务进行性能监控和调优的工具，它能够自动收集Hadoop平台所有的度量标准，并对收集的数据进行分析，并将分析结果以一种简单且易于理解的形式展示出来。Dr.Elephant的设计目的是通过它对任务的分析结果指导Hadoop/Spark开发者对其任务进行便捷的优化，从而提高开发者的效率以及Hadoop集群的使用效率。在Dr.Elephant中定义了一系列的启发式算法(Heuristics)，这些算法提供了对Hadoop/Spark任务进行性能分析的功能
2016-05-04 10:27:30
1192
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人