![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
logic_orz
Logic weaving the world !
展开
-
kudu----ubuntu 16.04 安装过程
ubuntu 16.04 需要先添加数据源: 从 http://archive.cloudera.com/kudu/ubuntu/xenial/amd64/kudu/cloudera.list 下载 添加到/etc/apt/sources.list中(添加方式随意) 添加公匙: 从http://cloudera-fastly-s3-2.s3-website-us-west-1....原创 2018-03-22 14:59:41 · 1177 阅读 · 0 评论 -
Louvain 社区发现算法---scala 实现
关系对象类:class RelationBean { //起始节点 private var _fromNode: String = "null" def fromNode: String = _fromNode def fromNode_=(value: String): Unit = { _fromNode = value } //指向节点 priva...原创 2018-04-26 11:28:57 · 2554 阅读 · 1 评论 -
pagerank ----scala 实现
import scala.collection.mutableclass RelationBean { //起始节点 private var _fromNode: String = "null" def fromNode: String = _fromNode def fromNode_=(value: String): Unit = { _fromNode = ...原创 2018-04-26 11:37:04 · 405 阅读 · 0 评论 -
spark从复杂的不清晰的关系网络中区分出一个个孤立的关系网络图
关系数据为 from -> to 的 边设定数据格式为Longspark计算关系网络 由于数据量过大 某些算法无法实现或实现代价太大为了降低计算压力或优化计算方法 将整个关系网络中的孤立的,不与其他节点相连的数据关系区分出来,形成一个个小的关系网络图实现方法:( 用 图id 来标识每个关系网络图)初始状态下 不知道每个节点所属网络图 将每个节点的 id 设为他自己所...原创 2018-11-02 10:43:24 · 478 阅读 · 0 评论