- 博客(8)
- 资源 (3)
- 收藏
- 关注
原创 提示-bash: telnet: command not found的解决方法
yum list telnet* 列出telnet相关的安装包yum install telnet-server 安装telnet服务yum install telnet.* 安装telnet客户端
2019-08-30 09:17:35 2646
原创 Python模块导入出现ModuleNotFoundError: No module named '***'
Traceback (most recent call last): File "/usr/flink/alert/server/greeter_server.py", line 8, in <module> from example import helloworld_pb2, helloworld_pb2_grpcModuleNotFoundError: No mo...
2019-08-27 17:19:03 111508 10
原创 安装好anaconda之后,系统终端界面前面出现(base)字样
安装conda后取消命令行前出现的base,取消每次启动自动激活conda的基础环境方法一:每次在命令行通过conda deactivate退出base环境回到系统自动的环境方法二1,通过将auto_activate_base参数设置为false实现:conda config --set auto_activate_base false2,那要进入的话通过conda activate...
2019-08-27 14:37:39 7950 1
原创 flink本地安装
flink要求java1.8.0以上版本卸载自带jdk先查看已安装的目录:yum list installed卸载:yum remove java-1.8.0-openjdk.x86_64解压flinkcd /etc/user/flinksudo tar zxvf flink-1.7.0-bin-hadoop27-scala_2.11.tgz安装新的jdkyum ...
2019-08-26 10:22:10 761
原创 Spark SQL 连接Hive
Apache Hive 是Hadoop 上的一种常见的结构化数据源。Hive 可以在HDFS 内或者在其他存储系统上存储多种格式的表。这些格式从普通文本到列式存储格式,应有尽有。SparkSQL 可以读取Hive 支持的任何表。要把Spark SQL 连接到已有的Hive 上,你需要提供Hive 的配置文件。你需要将hive-site.xml 文件复制到Spark 的./conf/ 目录...
2019-08-17 10:55:45 789
原创 Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/SparkConf
敲黑板 ,引入的依赖 一定要 “compile” 或则 “runtime”,否则spark conf 无法初始化,这辈子也运行不了,千万不要是 “provided". <dependency> <groupId>org.apache.spark</groupId> <artifactId>...
2019-08-16 18:07:32 12109 1
原创 Error initializing SparkContext. java.lang.IllegalArgumentException: System memory 259522560 must be
Error initializing SparkContext.java.lang.IllegalArgumentException: System memory 259522560 must be at least 471859200. 解决办法java.lang.IllegalArgumentException: System memory 259522560 must be at lea...
2019-08-16 16:26:30 562
原创 Command line is too long. In order to reduce its length classpath file can be used.
Intellij IDEA运行报Command line is too long解法Command line is too long. In order to reduce its length classpath file can be used. Would you like to enable classpath file mode for all run configurations o...
2019-08-16 15:06:14 2561
Hadoop中文版资料.7z
2019-06-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人