- 博客(5)
- 资源 (7)
- 收藏
- 关注
转载 aggregateByKey
1. aggregateByKey的运行机制 /** * Aggregate the values of each key, using given combine functions and a neutral "zero value". * This function can return a different result type, U, than the typ
2016-04-21 00:13:35 1020
转载 Spark 中 map 与 flatMap 的区别
vi test.txt this is 1st line we have 2nd line too val tf = sc.textFile("test.txt") //操作1 var mapResult=tf.map(line=>line.split("\\s+")) -- Array[Array[String]] = Array(Array(this,is,1st,line
2016-04-12 23:53:19 3128
转载 spark入门资料精化
Spark简介 spark 可以很容易和yarn结合,直接调用HDFS、Hbase上面的数据,和hadoop结合。配置很容易。 spark发展迅猛,框架比hadoop更加灵活实用。减少了延时处理,提高性能效率实用灵活性。也可以与hadoop切实相互结合。 spark核心部分分为RDD。Spark SQL、Spark Streaming、MLlib、GraphX、Spa
2016-04-12 23:26:27 764
转载 linux shell while读取文件变量作用域
程序如下: -----程序开始---------- a=0 cat b.sh|while read line do a=$(($a+1)) echo "inter:"$a done echo "outer:"$a ----程序结束----- 程序输出结果为: inter:1 inter:2 inter:3 inter:4 out
2016-04-06 17:05:58 5514
转载 linux下安装oracle客户端
参考:http://www.nyoug.org/Presentations/2007/200703_Ji_Instant%20Client.pdf IC介绍 许多人正在使用Oracle Instant Client,它提供一个部署基于OCI、OCCI、JDBC OCI应用容易和快速的方法。 通过添加更多的工具,Instant Client可以变成一个更加强大的工具,如下:
2016-04-01 16:08:09 6045
sqlyog Ultimate trial版本.
2022-08-17
libreacs-bin-0.6.zip
2020-09-24
jboss-4.2.0.GA
2020-09-22
fishcorecpe
2020-09-22
mod_h264_streaming
2019-04-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人