spark
文章平均质量分 81
Danger_Life
工作记录,归纳,问题整理
展开
-
Linux环境 spark集群搭建 和基于zookeeper集群搭建
Linux环境 spark集群搭建借鉴地址软件下载配置环境变量jdk配置spark配置借鉴地址转载(报错处理): https://blog.csdn.net/Abandon_Sun/article/details/76686398转载(虚拟机克隆问题):https://blog.csdn.net/qq_31089125/article/details/95728140转载(Linux常...原创 2019-07-20 17:51:05 · 480 阅读 · 0 评论 -
CentOS 6.5 ssh: connect to host localhost port 22: Connection refused
ssh: connect to host localhost port 22: Connection refusedCentOS 6.5问题描述 ssh localhsot ssh hostname(自己主机名),包如上错误,但是ping 没有问题解决方法:1:问题产生 —>我这里主要是ssh服务有问题2:直接执行 yum 安装 还是会报错 ,采用了 直接卸载干净,重新下载3:...原创 2019-08-26 11:47:52 · 788 阅读 · 0 评论 -
三步部署Spark 单机版
1. 修改slaves 添加localhost2. 修改spark-env.sh==3.==修改 /etc/hosts搞定页面详细步骤前面的文章都有ssh localhost 报错:https://blog.csdn.net/weixin_44385419/article/details/100073500spark 搭建详细步骤:https://blog.csdn...原创 2019-08-26 12:01:08 · 742 阅读 · 0 评论 -
一分钟搞定ssh localhost 免密登陆
ssh localhost 免密登陆首先确保 ssh localhost 可已使用 只是需要输入密码如果不可用参考:https://blog.csdn.net/weixin_44385419/article/details/100073500ssh localhost 可用ssh-keygen -t dsa -P ‘’ -f ~/.ssh/id_dsacat ~/.ssh...原创 2019-08-27 14:01:36 · 705 阅读 · 3 评论 -
Windows下------安装配置Hadoop
hadoop 下载地址下载hadoop ,apache官网:https://archive.apache.org/dist/hadoop/common/ 下载解压下载hadooponwindows-master.zip 链接: https://pan.baidu.com/s/1KvX6uHk5KhiB2jO25EYeOA 提取码: 4vq8hadooponwindows-master 替...原创 2019-09-02 10:36:16 · 81 阅读 · 0 评论