大数据平台
文章平均质量分 73
CDH、TDH、Ambari、DataSophon大数据平台
shangjg3
这个作者很懒,什么都没留下…
展开
-
大数据管理平台DataSophon1.2离线安装
1.安装前准备1.1集群规划主机名ipddh1ddh2ddh31.2配置hostname和hosts1.3 yum更换阿里云源1.4互联网环境配置时钟同步互联网环境下,集群内机器都执行1.5内网环境下配置时钟同步ddh1安装ntpd服务dddh2和ddh31.6关闭selinuxselinux的主要作用就是最大限度地减小系统中服务进程可访问的资源(最小权限原则)1.7修改文件句柄最大限制1.8 配置免密登录1.9 安装mysql并关闭SSL重启mysql。原创 2023-08-18 16:43:36 · 964 阅读 · 1 评论 -
Ambari系列1:Ambari 2.7.4 和HDP 3.1.4 离线安装
THP的目的是通过将页表项映射更大的内存,来减少 Page Fault,从而提升 TLB (Translation Lookaside Buffer,由存储器管理单元用于改进虚拟地址到物理地址的转译速度)的命中率。结合存储器层次结构设计原理可知,当程序的访存局部性较好时,THP 将带来性能提升,反之 THP 的优势不仅丧失,还有可能化身为恶魔,引起系统的不稳定。/var/www/html 目录,在此目录下创建ambari目录,并将以下三个文件上传到ambari目录。4.10 配置各个大数据组件的账号信息。原创 2023-08-14 16:46:48 · 457 阅读 · 0 评论 -
Ambari系列2: Ambari安装和维护问题汇总
版本问题,其实真正的原因是hdp的yum元数据缓存没有创建成功。其实是hdp的yum元数据缓存版本没有配置好。将3.1.4.0改为3.1。根据报错信息,会以为是。原创 2023-08-10 17:01:50 · 418 阅读 · 0 评论