- 博客(9)
- 资源 (16)
- 收藏
- 关注
原创 快学Scala--第二章习题
1 一个数字如果为正数,则它的signum为1;如果是负数,则signum为-1;如果为0,则signum为0.编写一个函数来计算这个值def signum(num:Int){if(num>0)print(1)elseif(num<0)print(-1)else print(0)}Scala中已经有此方法了,刚才查找API的时候,应该能看到BigInt(10).signum2 一个空的快表达式{
2015-06-29 10:36:29 539
原创 卸载CDH4.7
主机 IP 系统 节点 YZ-xx.xx-11.h.cn 172.xx.xx.11 CentOS release 6.4 Namenode、zkfc、 YZ-xx.xx-12.h.cn 172.xx.xx.12 CentOS release 6.4 Namenode、zkfc
2015-06-26 13:59:36 448
转载 Linux 中如何安装卸载软件
Linux软件的安装和卸载一直是困扰许多新用户的难题。在Windows中,我们可以使用软件自带的安装卸载程序或在控制面板中的“添加/删除程序” 来实现。与其相类似,在Linux下有一个功能强大的软件安装卸载工具,名为RPM。它可以用来建立、安装、查询、更新、卸载软件。该工具是在命令行下使用的。在Shell的提示符后输入rpm,就可获得该命令的帮助信息。 软件的安装 Linux下软件的安装主要
2015-06-25 16:34:07 435
原创 spark 根据关键字查询日志信息(关键字下行10行)
业务需要根据关键字查询HDFS日志信息,并且需要查看关键字Key之下10行package com.spark.scalaimport org.apache.spark.{SparkContext,SparkConf}class mylog{}object mylog{ def main(args: Array[String]) { //没有数据源,退出
2015-06-16 12:13:59 1182
原创 Spark 1.X 大数据平台V2(第三周作业)
上传一张或者多张你成功运行Spark on YARN的截图。最好是监控页面的截图 建立一个JobServer工程,写一个查找输入字母中出现次数最多的那个字母的程序。 如’a a a b b c’ 需要返回 a
2015-06-08 17:29:59 631
原创 Spark 1.X 大数据平台V2(第二周作业)
1 . 请说明application与job之间的关系? 一个Application和一个SparkContext相关联,每个Application中可以有一个或多个Job,可以并行或者串行运行Job。 Spark中的一个Action可以触发一个Job的运行。在Job里面又包含了多个Stage,Stage是以Shuffle进行划分的。在Stage中又包含了多个Task,多个Task构成
2015-06-08 14:59:54 582
原创 Spark 1.X 大数据平台V2(第一周作业)
RDD执行transformation和执行action的区别是什么? 1、transformation是得到一个新的RDD,方式很多,比如从数据源生成一个新的RDD,从RDD生成一个新的RDD 2、action是得到一个值,或者一个结果(直接将RDDcache到内存中)。所有的transformation都是采用的懒策略,就是如果只是将transformation提交是不会执行计算的,
2015-06-08 14:54:45 964
原创 Scala基础与实践练习题[小象学院]
1 编写一个BankAccount类,加入deposit和withdraw方法,和一个只读的balance属性?class BankAccount(val balance:Int = 0){ def deposit(){} def withdraw(){} } 2 class中的apply方法和object中的apply方法有什么区别?
2015-06-02 11:46:55 1074
转载 IntelliJ Idea 常用快捷键列表
IntelliJ Idea 常用快捷键列表Ctrl+Shift + Enter,语句完成 “!”,否定完成,输入表达式时按 “!”键 Ctrl+E,最近的文件 Ctrl+Shift+E,最近更改的文件 Shift+Click,可以关闭文件 Ctrl+[ OR ],可以跑到大括号的开头与结尾 Ctrl+F12,可以显示当前文件的结构 Ctrl+F7,可以查询当前元素在当前文件中的引用,然
2015-06-01 17:48:58 376
hadoop distcp
2015-02-05
windowsFTP
2013-09-17
PowerDesigner125Crack破解
2013-09-13
FlashFXPE_xp510破解版
2013-06-08
润乾报表跨域问题解决方案
2013-04-26
Everything_1.2.1.37
2013-02-04
FusionCharts-v3.1破解版
2013-02-04
JAVA 反编译工具jad
2013-01-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人