- 博客(3)
- 收藏
- 关注
原创 在pycharm中使用jupyter编辑器的操作方法以及遇到的问题
本文简单介绍了在pycharm中使用jupyter编写python程序的方法,以及配置过程中,在下载软件包package时遇到连接超时的问题
2024-08-06 23:21:48
206
原创 spark配置——local模式-yarn模式-spark集群
准备三台配置hadoop集群的虚拟机下载spark,scala,anacondaspark下载地址scala下载地址Anaconda下载地址将下载的软件上传到虚拟机上local模式解压spark和scala,并重命名到program文件夹下tar -zxvf scala-2.12.15.tgztar -zxvf spark-3.0.3-bin-hadoop3.2.tgzmv scala-2.12.15 /home/hadoop/program/scala-2.12mv spa
2021-10-14 15:04:18
913
原创 hadoop集群配置——本地模式-伪分布式-全分布式
hadoop集群搭建local模式首先准备三台虚拟机(centos7版)配置网络和主机之间的映射关系,保证三台虚拟机之间能相互找到(需要root用户,三台虚拟机均需要配置):vi /etc/hosts 在后面添加网络和主机的映射: 192.168.187.100 hadoop0 192.168.187.101 hadoop1 192.168.187.102 hadoop2检验:ping hadoop0ping hadoop1ping hadoop2关闭防火墙(需要ro
2021-10-11 17:21:38
309
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人