qq_37001101的博客

sparksql操作hive遇到的坑 第一次写sparksql项目想用sparksql操作hive查询数据就找到了百度代码做参考【idea工具开发】 代码如下： import org.apache.spark.sql.SparkSession object aaa { def main(args: Array[String]): Unit = { //设置HADOOP_USER_NAME，否则会有权限问题 System.setProperty("HADOOP_USER_NAME",...

Actor 什么是Scala Actor （1）Scala中的Actor能够实现并行编程的强大功能，他是基于事件模板的并发机制。Scala是运用消息的发送接、收来实现多线程的。使用Scala能够更容易地实现多线程应用的开发。   多线程不是提高程序运行效率而是提高资源利用率   （2）并发（concurrency）和并行（parallellism）是： 解释一：并行是指两个或者多个事件...

Java实现WordCount 思路：首先建立map集合----将文件按行读取------按规则进行拆分-----循环遍历放入map集合中。如果集合中没有元素就将单词与数字1放进去，如果集合中存在要添加的内容就将value+1覆盖原来的内容。 import java.io.*;import java.util.HashMap;import java.util.Map;public cla...