Linux
文章平均质量分 90
Linux技术
AIMaynor
个人博客:maynor1024.live,ai网站:api.maynor1024.live
展开
-
Cloudera Manager环境搭建【二】
进行Linux优化配置安装Cloudera Manager的Server和Agent安装Cloudera Manager监控Service使用CM安装大数据组件使用CM添加新服务器原创 2022-11-22 14:44:52 · 914 阅读 · 2 评论 -
Cloudera Manager环境准备【一】
因为业务隔离场景是不尽相同的,这里主要针对后者进行讲解:使得集群系统资源最大化利用,那首先要看业务对系统资源的需求情况。经过对线上业务的梳理,通常可将这些业务分为如下几类:原创 2022-11-22 14:21:56 · 1168 阅读 · 0 评论 -
CDH大数据集群Linux系统参数调优
设置方法:swap即交换空间,作用类似于Windows中的虚拟内存,也就是当物理内存不足时,将硬盘上的swap分区当做内存来使用。但是,由于磁盘的读写速率与内存相比差太多,一旦发生大量交换,系统延迟就会增加,甚至会造成服务长期不可用,这对于大数据集群而言是致命的。vm.swappiness参数用于控制内核对交换空间的使用积极性,默认是60。......转载 2022-06-16 15:07:18 · 903 阅读 · 0 评论 -
如何使用云容器搭建基于CentOS7的Hadoop2.x伪分布式环境(CSDN开发者云平台使用初体验)
前不久CSDN联合国内顶级云厂商,共同为开发者提供稳定便宜的云服务,送了学长两张优惠券,一张云容器,一张云主机。恰好最近在学习某硅谷的SeaTunnel课程需要用到主机做实验,使用本地的还需要,有诸多不便,于是想试试服务。.........原创 2022-06-12 18:00:22 · 1501 阅读 · 27 评论 -
CPU使用率过高问题排查及Linux之top命令用法详解
公司连续2天服务器告警CPU使用率过高问题,查看日志无果,尝试使用top命令排查问题。原创 2022-06-08 09:44:38 · 6696 阅读 · 1 评论 -
大数据开发工程师基本功修炼之Linux学习笔记(四)
1 挂载新的硬盘1.1 目标虚拟机 增加一块 硬盘1.2 路径第一步: 了解linux系统分区的原理第二步: 查看系统分区情况第三步: 虚拟机 增加 硬盘第四步: 分区第五步: 格式化第六步: 挂载第七步: 设置重启后 挂载不失效1.3 实现第一步: 了解linux系统分区的原理一个硬盘可以分成多个分区用户不能直接操作硬件, 需要 让硬件和系统的目录 建立映射关系(挂载) 才可以操作, 称为 挂载第二步: 查看系统分区挂载情况命令英文含义l原创 2021-06-26 13:35:23 · 930 阅读 · 0 评论 -
大数据开发工程师基本功修炼之Linux学习笔记(三)
管道相关命令目标cutsortwcuniqteetrsplitawksedgrep准备工作zhangsan 68 99 26lisi 98 66 96wangwu 38 33 86zhaoliu 78 44 36maq 88 22 66zhouba 98 44 46以上是成绩表信息使用 逗号 分割, 第一列 是 姓名, 第二列是 语文成绩, 第三列是 数学成绩, 第四列是 英语成绩准备工作vim 1.txt111:aaa:bbb:ccc2原创 2021-06-26 13:34:40 · 442 阅读 · 0 评论 -
大数据开发工程师基本功修炼之Linux学习笔记(二)
VI编辑器_终端编辑器(重点重点重点)目标vi简介打开和新建文件三种工作模式常用命令查询1 简介1.1 学习vi的目的在工作中, 要对 服务器上的 文件进行 简单 的修改, 可以使用 ssh 登录到远程服务器上, 并且使用 vi编辑器 进行简单的编辑即可需要修改的文件包括源代码配置文件例如: tomcat服务器的配置文件例如: 网卡信息的配置文件在没有图形界面的环境下, 要编辑文件, vi是最佳选择每一个使用linux的程序员,都应该或多或少的学习一些原创 2021-06-26 13:32:49 · 561 阅读 · 0 评论 -
大数据开发工程师基本功修炼之史上最全Linux学习笔记(建议)
操作系统概述目标:了解 操作系统 的作用1.1 操作系统(Operation System, OS)操作系统作为接口的示意图:没有安装操作系统的计算机, 通常被称为 裸机如果想在 裸机 上运行自己所编写的程序, 就必须用机器语言书写程序如果计算机上安装了操作系统, 就可以在操作系统上安装支持的高级语言环境,用于高级语言开发1.2 操作系统的种类桌面操作系统服务器操作系统嵌入式操作系统移动设备操作系统1.2.1 桌面操作系统Window 系列用户群体大macOS原创 2021-06-26 13:19:19 · 4087 阅读 · 15 评论 -
CentOS7与CentOS6的一些不同地方(命令)
#查看ip addr show#新的网卡名称也修改为ens33用ifconfig -a也可以而网络的配置与6几乎无异#路径cat /etc/sysconfig/network-scripts/ifcfg-ens33#配置信息TYPE=EthernetPROXY_METHOD=noneBROWSER_ONLY=noBOOTPROTO=staticIPADDR=192.168.79.7NETMASK=255.255.255.0GATEWAY=192.168.79.2DNS1=1原创 2021-03-07 12:20:25 · 813 阅读 · 0 评论 -
Linux学习易错点-网络yum源的配置过程
网络yum源的配置过程原理:一个节点配置资源库,其他节点通过http服务访问该节点资源,其他节点无需安装资源库。Node01:资源库节点Node02:其他节点1、在Node01安装httpd软件,并启动a)yum install –y httpdb)/etc/init.d/httpd statusi./etc/init.d/httpd startii./etc/init.d/httpd status总结:一般初学者容易忘记开httpd ,即/etc/init.d/httpd原创 2020-10-04 10:11:07 · 5271 阅读 · 1 评论 -
在Linux安装Python3
yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make zlib zlib-devel libffi-devel -ywget https://www.python.org/ftp/python/3.7.4/Python-3.7.4.tgz解压安装包,并cd进去编译并安装./configure --prefix=/usr/local/p原创 2020-12-28 11:18:13 · 294 阅读 · 1 评论