![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
linux
文章平均质量分 61
꧁꫞ND꫞꧂
每一天都值得期待与认证对待
展开
-
大数据命令大全
大数据命令大全技术如同手中的水有了生命似的,汇聚在了一起。为了方便大家学习与工作查询资料。现生成大数据命令文档供大家参考。本总结只列举常用的命令,比较多的命令操作。比如linux,kafka命令就比较多,hdfs操作也多。但是对于HBase. . . . .这类框架命令比较少,就不再本篇展示。望周知。其中内容包含以下,具体命令会一一介绍。Linux(vi/vim)一般模式语法 功能描述 yy 复制光标当前一行 y数字y 复制一段(从第几行到第几行) p转载 2022-04-08 12:27:16 · 493 阅读 · 0 评论 -
Linux 状态查看
1、核心命令linux 监控网络IO、磁盘、CPU、内存:CPU:vmstat 、sar –u、top磁盘IO:iostat –xd、sar –d、top网络IO:iftop -n、ifstat、dstat –nt、sar -n DEV 2 3磁盘容量:df –h内存使用:free –m、top2、常用命令(1)内存:条数、每条大小、内存是DDR4还是DDR3、内存频率是2666MT/S还是1600MT/s条数: dmidecode|grep -A5 'Memory Device'|.转载 2021-08-30 07:03:38 · 1827 阅读 · 0 评论 -
ubuntu截图工具flameshot
FLAMESHOT简介有如下盛名linux系统里面最好用的截屏工具 支持图形化截图 支持命令行截图v0.6.0及之后的版本就已经支持了插入字体的功能,但是需要去github上下载才可以使用执行命令安装sudo apt install flameshot配置快捷键打开设置 选择device 选择键盘 配置快捷键 点击加号 然后command输入下面命令 name随便填写即可flameshot gui命令行运行## 1 开启捕捉界面fla转载 2021-07-06 12:48:45 · 241 阅读 · 0 评论 -
Linux找回删除文件
注意:root账户操作第一步:创建文件,删除文件第二步:另启一个Xshell,打开刚刚被删除文件所在分区命令 df /root/第三步:debugfs修复3.1、打开debugs3.2、执行命令open /dev/mapper/vg_root-lv_root(第二步结果) 查看目录分区3.3、显示文件所在目录3.4、执行命令“ logdump -i <262066>”查找文件所在区块号3.5、退出 q...原创 2021-04-07 17:35:53 · 1211 阅读 · 3 评论 -
linux中直接修改jar包内配置文件
当有些文件上传到服务器调试的时候,为了方便修改jar包里的东西可以直接在服务器上进行修改,不需要每次都打包上传。(1)使用jar tvf jar名称 | grep 目标文件名 查询出目标文件在jar包中的目录jar tvf service-0.0.1-SNAPSHOT.jar |grep config.properties(2)使用jar xvf jar名称 目标文件名(copy上面查出的全路径) 将目标文件及所在jar包中的目录解压到当前路径jar xvf service-0.0.1-SN.原创 2021-03-17 09:23:18 · 3333 阅读 · 4 评论 -
本地和Linux服务器上加载文件不同方式
同样的代码,我们在Windows上测试或许是好使用的,但是在服务器上可能是不行的,这是因为他们两个系统的加载方式不一样导致,我们需要对不同的环境做些微调,如下:定义访问路径:#file.staticAccessPath=C:/xxxdir/xxxdir/xxxdir //windows系统访问目录file.staticAccessPath=/xxxdir/xxxdir/xxxdir/xxxdir/xxxdir/ //linux系统,访问目录时,末尾加上/#f.原创 2020-12-09 14:43:16 · 258 阅读 · 0 评论 -
linux的初级命令
Linux初级指令ls——Listls 介绍 这是我学Linux的第一个命令,相信也是很多人学习Linux的第一个命令。ls全称list.List information about the FILEs (the current directory by default). Sort entries alphabetically if none of -cftuvSUX nor --sort is specified.列出有关文件的信息(默认为当前目录)。如果没有指定-cftuvS..转载 2020-10-27 14:43:32 · 740 阅读 · 0 评论 -
Linux中的top查看进程详解
默认输出 top命令的默认输出如下: 上半部分显示了整体系统负载情况 top一行:从左到右依次为当前系统时间,系统运行的时间,系统在之前1min、5min和15min内cpu的平均负载值 Tasks一行:该行给出进程整体的统计信息,包括统计周期内进程总数、运行状态进程数、休眠状态进程数、停止状态进程数和僵死状态进程数 Cpu(s)一行:cpu整体统计信息,包括用户态下进程、系统态下进程占用cpu时间比,nice值大于0的进程在用户态下占用cpu时间比,cpu处于idle状..转载 2020-10-15 10:47:33 · 8768 阅读 · 0 评论 -
技术行业的革新,运维慌不慌?
云原生时代下,企业的IT运维面临架构复杂化、业务需求多样化和运维数据海量化等挑战,如何能够实现精准告警、异常智能诊断、根因定位、异常预测和异常自动修复,已成为企业数字化转型的急迫需求。9月26日,阿里巴巴高级技术专家滕圣波在《GOPS全球运维大会》上发表了题为《云上服务器无人值守与自助服务实战》的主题演讲,分享了阿里云弹性计算团队如何利用人工智能技术赋能运维自动化,实现云上服务器无人值守,帮助用户降低云服务器实例管理的复杂性,来保障实例服务的稳定和高效运行。本文根据滕圣波的演讲整理。本文内容架构:转载 2020-09-28 17:24:56 · 248 阅读 · 0 评论 -
防火墙白名单的配置和端口开放
Firewalld 是可用于许多 Linux 发行版的防火墙管理解决方案,它充当 Linux 内核提供的 iptables 数据包过滤系统的前端。在本教程中,介绍如何为服务器设置防火墙,并使用 firewall-cmd 管理工具来管理防火墙添加 IP 白名单。Firewalld 中的基本概念区域(zone)区域(zone)基本上是一组规则,它们决定了允许哪些流量,具体取决于你对计算机所连接的网络的信任程度。为网络接口分配了一个区域,以指示防火墙应允许的行为。Firewalld 一般已经默认内转载 2020-08-25 10:52:47 · 6895 阅读 · 1 评论 -
kernel:NMI watchdog: BUG: soft lockup - CPU#6 stuck for 28s!
运行一段时间后,部分节点会重启,然后报错如下,加入配置kernel:NMI watchdog: BUG: soft lockup - CPU#6 stuck for 28s! CentOS7linux中内核被锁死环境说明:虚拟机 CentOS7中解压一个8G的包时,内核报错Message from syslogd@cosmo-01 at Apr 25 11:05:59 ...kernel:NMI watchdog: BUG: soft lockup - CPU#6 stuck for 21原创 2020-08-12 16:11:55 · 1773 阅读 · 0 评论 -
jar包本地运行正确,放到服务运行主类找不到
caused an exception during initialization: Invalid signature file digest for Manifest main attributes这是由于我们的项目每个人都改,提交到Git上可能有些同事把不需要的信息提价了,导致我们的jar打入依赖jar的时候,找不到了,需要我们加入一些过滤依赖信息。org.apache.flink.client.program.ProgramInvocationException: The program原创 2020-08-11 13:57:09 · 1756 阅读 · 0 评论 -
几种大数据架构的了解
数据分析工作虽然隐藏在业务系统背后,但是具有非常重要的作用,数据分析的结果对决策、业务发展有着举足轻重的作用。随着大数据技术的发展,数据挖掘、数据探索等专有名词曝光度越来越高,但是在类似于Hadoop系列的大数据分析系统大行其道之前,数据分析工作已经经历了长足的发展,尤其是以BI系统为主的数据分析,已经有了非常成熟和稳定的技术方案和生态系统,对于BI系统来说,大概的架构图如下:可以看到...转载 2019-10-11 14:16:31 · 236 阅读 · 0 评论 -
Shell基本语法
1、shell介绍shell 俗称叫做壳,计算机的壳层,和内核是相对的,用于和用户交互,接收用户指令,调用相应的程序。因此,把shell分为2大类1.1、图形界面shell(Graphical User Interface shell 即 GUI shell)也就是用户使用GUI和计算机核交互的shell,比如Windows下使用最广泛的Windows Explorer(Wind...原创 2019-06-10 16:52:26 · 3910 阅读 · 0 评论 -
Linux服务器在运行job的时候,因为usercache过大导致磁盘落满job挂掉
问题描述Linux内存使用量超过阈值,使得Java应用程序无可用内存,最终导致程序崩溃。即使在程序没有挂掉时把程序停掉,系统内存也不会被释放。找原因的过程这个问题已经困扰我好几个月了,分析过好多次都没有找到原因,网上查了一下该问题其他人也都遇到过,不过并没有什么好的解决方案,因为项目一直没有上线,每次当内存不足时导致程序崩溃都是重启服务就好了,索性也就没花太多的时间来找问题。现在...转载 2019-06-06 11:15:08 · 566 阅读 · 0 评论 -
memoryOverhead issue in Spark
memoryOverhead issue in SparkWhen using Spark and Hadoop for Big Data applications you may find yourself asking: How to deal with this error, that usually ends-up killing your job: Container killed ...转载 2019-01-25 13:49:33 · 284 阅读 · 0 评论