Spark
文章平均质量分 91
mengshicheng1992
这个作者很懒,什么都没留下…
展开
-
搭建Spark on Yarn集群
搭建Spark on Yarn集群此文以Hadoop 3.2.2、Spark 3.1.2版本为例!如未指定,下述命令在所有节点执行!一、系统资源及组件规划节点名称系统名称CPU/内存网卡磁盘IP地址OSNameNodenamenode2C/4Gens33128G192.168.0.11CentOS7Secondary NameNodesecondarynamenode2C/4Gens33128G192.168.0.12CentOS7R原创 2021-08-24 19:51:44 · 755 阅读 · 1 评论 -
搭建Spark Standalone高可用集群
搭建Spark Standalone高可用集群此文以Spark 3.1.2版本为例!如未指定,下述命令在所有节点执行!一、系统资源及组件规划节点名称系统名称CPU/内存网卡磁盘IP地址OS节点角色Master1master12C/4Gens33128G192.168.0.11CentOS7MasterMaster2master22C/4Gens33128G192.168.0.12CentOS7MasterWorker1work原创 2021-08-18 13:02:52 · 303 阅读 · 0 评论 -
搭建Spark Standalone集群
搭建Spark Standalone集群此文以Spark 3.1.2版本为例!如未指定,下述命令在所有节点执行!一、系统资源及组件规划节点名称系统名称CPU/内存网卡磁盘IP地址OSMastermaster2C/4Gens33128G192.168.0.10CentOS7Worker1worker12C/4Gens33128G192.168.0.11CentOS7Worker2worker22C/4Gens33128G192原创 2021-08-18 13:02:01 · 244 阅读 · 0 评论