Spark Graphx
文章平均质量分 80
myta0424
上海西南某高校
展开
-
毕设第三周(Pregel in GraphX以及Shortest Path)
Pregel in GraphX上周看到GraphX lib里面自带的ShortestPaths.scala用的框架为Pregel,于是这周我首先看了Pregel在GraphX上的实现。在读代码的过程中,我顺便过了一下部分GraphX的API。 def apply[VD: ClassTag, ED: ClassTag, A: ClassTag] (graph: Graph[VD, ED]原创 2015-11-15 14:58:19 · 1462 阅读 · 0 评论 -
毕设第二周(GraphX环境搭建 GraphX API 以及对Pregel的熟悉)
毕业设计第二周GraphX环境搭建与API的熟悉我自己在本机上搭建了GraphX的环境,并测试了几个Demo。这方面的内容,GraphX的官方网站上有详细的介绍,列举几个我个人认为比较基础和重要的关于Graph的Operators:class Graph[VD, ED] { //这个是把图存成Table所需要的数据,上一个周报里面提到了 val vertices: VertexRDD原创 2015-11-09 09:25:20 · 2057 阅读 · 0 评论 -
毕业设计第四周(PowerGraph)
PowerGraph承接上一周的内容,上一周看到GraphX中对Pregel的实现借鉴了PowerGraph。这周对PowerGraph进行了调研。 主要是这篇paper: PowerGraph: Distributed Graph-Parallel Computation on Natural Graphs这篇paper中指出Pregel和GraphLab对natural graphs的支持并不原创 2015-11-30 15:47:44 · 1242 阅读 · 0 评论