- 博客(4)
- 收藏
- 关注
原创 spark 集群运行standalone的cluster 方式遇到的bug,希望能被一个大神来解决
这个问题是这样的,就是我这spark的集群已经搭建好了,然后使用spark的安装包里的实例进行测试时发现报了这么一个问题,不知道各位spark的探索者们是否注意过这个问题:我这将把这个问题的原景表现出来,希望大家能帮我解决一下,我这给我说一下这其中的缘由。在集群已经正常启动的情况下,我这里使用这个命令提交的:./spark-submit --master spark://node06:7077 ...
2018-01-23 16:26:28 2134 10
原创 关于cdh安装过程中的遇见的一些问题以及解决办法的总结
注意:这篇文章是我搭建之后过了两天才来写的,所以这里有点泛化,没有很强的针对性,只供大家一个参考的方向。问题一: 启动Cloudera的agent报:Cloudera-scm-agent dead but pid file exist 解决的办法思路:方法一: 可以先参考这篇博客文章来进行操作:http://blog.csdn.net/DViewer/article/details/5
2018-01-17 12:33:29 3115
原创 将一个大文件进行拆分为多个小文件源码
import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.File;import java.io.FileInputStream;import java.io.FileWriter;import java.io.IOException;import java.io.InputStre
2018-01-09 16:26:12 5360
原创 使用beeline 连接客户端报错
当hive数据仓库搭建起来了,同时将hiveserver2 服务器端已启动(命令:./hiveserver2) ,使用 beeline 命令启动客户端 报一下这个错误: Beeline version 1.2.1 by Apache Hivebeeline> !connect jdbc:hive2://192.168.173.128:10000 Connecting to jdbc:hiv
2018-01-02 16:16:20 3443
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人