![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据模块
文章平均质量分 79
奇芸
这个作者很懒,什么都没留下…
展开
-
**初学scala课程内容(小知识点)**
初学scala课程内容(小知识点) 1.fun3方法带参数但是返回值类型为Unit,功能类似java中的void 2.同一个包下的类名不能重复否则会报错 上述内容是初学时对内容掌握不扎实时所遇到的问题,需要注意。 另外,还有如下几点需要注意: 1)匿名函数无法直接调用; 2)定义无参方法时,若加上括号,则调用方法时需要使用方法名(),当省略()时,调用方法直接使用方法名即可; 3)样例类的toSt...原创 2019-07-14 19:19:18 · 203 阅读 · 0 评论 -
初识Spark小知识点
1.设置分区数 分区数默认是1,运行结果: 分区数设置为2,运行结果为: 数据分布在哪个分区是随机的原创 2019-07-14 19:41:25 · 115 阅读 · 0 评论 -
spark sql远程连接hive时遇到问题
报错提示证书问题以及连接失败的问题 处理方法:将下述文件证书值改为false即可原创 2019-07-14 19:46:03 · 650 阅读 · 0 评论 -
Spark搭建遇到的问题
1.Spark启动master报错,是因为和zookeeper相关配置的文件中出现空格导致,查看日志可以看出来有空格。(报错要先查看日志) 2.2. zookerper启动成功,jps显示进程,但是查看状态没有显示 查看日志:/opt/zookeeper-3.4.10/zookeeper.out 解决方法:可能是映射文件后两台没有配置vim /etc/hosts,或者是myid重复,或者是...原创 2019-07-14 20:03:42 · 263 阅读 · 0 评论