生活的本质就是快乐地分享,引导技术往熟悉的地方引导
回答问题需要做到:简洁、痛点
大数据的本质:从数据中挖掘价值
云计算的本质:共享服务
【某公司笔试面试题】
1\使用mr,spark ,spark sql编写word count程序
【Spark 版本】
val conf=new SparkConf().setAppName("wd").setMaster("local[1]")
val sc=new SparkContext(conf,2)
//加载
val lines=sc.textFile("tructField("name",DataTypes.StringType,true)")
val paris=lines.flatMap(line=>line.split("^A"))
val words=paris.map((_,1))
val result=words.reduceByKey(_+_).sortBy(x=>x._1,false)
//打印
result.foreach(
wds=>{
println("单词:"