- 博客(2)
- 收藏
- 关注
RSS订阅原创 174、Spark运维管理进阶之作业资源调度动态资源分配原理
什么是动态资源分配 spark 1.2开始，引入了一种根据作业负载动态分配集群资源给你的多个作业的功能。这意味着你的作业在申请到了资源之后，可以在使用完之后将资源还给cluster manager，而且可以在之后有需要的时候再次申请这些资源。这个功能对于多个作业在集群中共享资源是非常有用的。如果部分资源被分配给了一个作业，然后出现了空闲，那么可以还给cluster manager的资源池中，并且...
2019-11-05 16:04:15
341
原创 mac 电脑下Virtualbox 折腾记
记录 换了mac电脑，又想折腾下大数据，记录下入坑爬坑过程 网络设置 管理 -> 主机网络管理器，添加仅主机(Host-Only)网络需要使用的网卡 偏好设置 -> 网络 添加NAT网络需要的网卡 安装虚拟机，网卡设置 固定虚拟机ip地址，不让每次重启虚拟机ip地址就变 目录/etc/sysconfig/network-scripts/ 下的ifcfg-enp0s3 内容如下...
2019-11-05 16:02:39
526
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人