- 博客(4)
- 收藏
- 关注
原创 hadoop上的spark和Scala安装与配置
进入 /opt/software/ 查看是否导入scala、spark包(刚开始就导入包了,这里直接查看)然后进行文件的托拽到(/opt/software)目录下,也可以复制哦(可以两个包一起导入)(2)进入 /opt/software/ 查看是否导入scala、spark包。然后用tar命令解压文件,解压到/usr/local/src/目录下。然后用tar命令解压文件,解压到/usr/local/src/目录下。(3)之后就进入/usr/local/src/目录。(2)配置spark的环境变量。
2024-04-25 23:14:50 793 5
原创 山有木兮木有枝,烟火人间,一起做个Spark分子可好?
(1)Hadoop是一个由Apache基金会所开发的分布式系统基础架构(2)主要解决海量数据的存储和海量数据的分析计算问题(3)广义上来说,Hadoop通常是指一个更广泛的概念——Hadoop生态圈总结:hadoop就是利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理。1.2hadoop有什么神秘特性的优点?扩容能力(Scalable):Hadoop 是在可用的计算机集群间分配数据并完成计算任务的,这些集群可用方便的扩展到数以千计的节点中。
2024-03-07 19:55:53 1659
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人