- 博客(4)
- 收藏
- 关注
RSS订阅原创 wordcount spark...
sc.textFile("hdfs://...").flatMap(line => line.split(" ")).map(word => (word, 1)).reduceByKey(_ + _).saveAsTextFile("hdfs://...") .
2015-05-14 09:11:45
313
原创 这个快排是不是很简洁呢...
def quickSort(xs: List[Int]): List[Int] = { if (xs.isEmpty) xs else quickSort(xs.filter(x=>x<xs.head)):::xs.head::quickSort(xs.filter(x=>x>xs.head)) }
2015-05-12 16:04:38
376
原创 eclipse连接hadoop报错Unknown protocol to job tracker: org.apache.hadoop.hdfs.protocol.ClientProtocol
用windows远程连接虚拟机hadoop集群时报Unknown protocol to job tracker: org.apache.hadoop.hdfs.protocol.ClientProtocol 原因是端口地址写错了
2015-01-29 15:47:58
1979
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人