- 博客(4)
- 资源 (4)
- 收藏
- 关注
原创 IntelliJ IDEA使用说明
安装完Intellij后请记得安装scala插件,此处跳过1.创建scala项目: IntelliJ IDEA使用说明 单击右键,run第一次因为要进行编译时间会比较久,第二次运行就快多了 进行spark开发: 对刚才的程序打包: 接下来进行build:
2015-12-06 09:12:47 524
原创 SimpleGraphX PageRank shell
package week7 import org.apache.log4j.{Level, Logger} import org.apache.spark.{SparkContext, SparkConf} import org.apache.spark.graphx._ import org.apache.spark.rdd.RDD object SimpleGraphX { def m
2015-12-02 08:36:35 520
原创 hive参数调节
一.优化切入后 session作用域 set mapred.job.priority set mapred.job.priority=VERY_HIGH 整体map执行90%,才会启动reduced MR中间压缩 set hive.exec.compress.intermediate=true; hive开启压缩 set mapred.compress.map.o
2015-12-02 07:39:26 1760
原创 SparkSqlForTest
package week4 /** * Created by Administrator on 2015/3/31. */ import java.text.SimpleDateFormat import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.SparkConte
2015-12-02 07:37:43 422
csapp手稿-计算机系统基础
2017-12-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人