关闭

scala协变逆变上界下界---理解篇

如果你对面向对象的泛型bt...
阅读(6554) 评论(2)

scala implicit 隐式转换

我们经常在scala api doc 上看到类似implicit这个关键字。...
阅读(10759) 评论(3)

Spark Hadoop集群部署与Spark操作HDFS运行详解---Spark学习笔记10

目前spark的Run on的hadoop版本大多是hadoop2以上,但是实际上各个公司的生产环境不尽相同,用到2.0...
阅读(17807) 评论(2)

海量小文件网络传输copy优化

今天部署集群环境,拷贝了一下编译好的.class文件。...
阅读(3162) 评论(0)

Spark0.91使用sbt编译Unresolved依赖问题

最近测试一下spark0.91编译hadoop0.20.2-cdh3u5. 经常出现...
阅读(5268) 评论(0)

Ubuntu12.04安装ganglia监控

Ganglia是UC Berkeley发起的一个开源实时监视项目,用于测量数以千计的节点,为云计算系统提供系统静态数据以及重要的性能度量数据。Ganglia系统基本包含以下三大部分。 Gmond:Gmond运行在每台计算机上,它主要监控每台机器上收集和发送度量数据(如处理器速度、内存使用量等)。 Gmetad:Gmetad运行在Cluster的一台主机上,作为Web Server,或者用于与W...
阅读(1806) 评论(0)

Spark0.91编译记录maven

最近新的版本发布了,听说修复了很多bug,专业人士说直接可以弃用0.81版本,直接0.91...
阅读(1574) 评论(0)

jvm调优--查找最耗CPU的代码

今天在公司用mvn编译的时候,出现机器卡死的情况,让我深深的反省了一下。...
阅读(2968) 评论(0)

RDD Dependency详解---Spark学习笔记9

RDD的最重要的特性之一就是血缘关系,血缘关系描述了...
阅读(4647) 评论(0)

Spark里几个重要的概念及术语

1. Application 客户端的应用程序,...
阅读(10173) 评论(1)

Spark Streaming的WindowedDStream

Spark Streaming的 窗口操作的类WindowedDStream 下面我们一起探究一下,Spark Streaming怎么实现chu...
阅读(3148) 评论(0)

Spark Streaming的窗口操作

1.Spark Streaming的Window Operation可以理解为定时的进行一定时间段内的数据的处理。...
阅读(15541) 评论(0)

Spark Streaming初探

Spark Streaming是一个基于Spark核心的扩展。主要y...
阅读(7231) 评论(4)

Scala中List的步长by

List中的步长 List(1 to 100 by 2:_*) map (i=>i*i) sum...
阅读(1945) 评论(0)

Scala的cons,集合合并与添加

scala对集合的元素合有特殊的符号,比如::和::: 简单说明一下: 双冒号是连接 一个元素 和 一个集合...
阅读(4082) 评论(3)
22条 共2页1 2 下一页 尾页
    个人资料
    • 访问:496725次
    • 积分:5379
    • 等级:
    • 排名:第5341名
    • 原创:80篇
    • 转载:0篇
    • 译文:1篇
    • 评论:67条
    博客专栏
    微博
    文章分类
    最新评论