linux基础
大数据玩家
致力于大数据源码研究、底层原理研究!
展开
-
linux环境下crontab加载用户变量、python虚拟环境踩坑
问题场景 在python虚拟环境中,执行一个语义分析的程序 ./commentAnalysis.sh ,需要每隔10分钟执行一次!结果发现手动执行该脚本,完全没问题,但是呢,一放到crontab定时器就不执行了?这是为什么呢? 问题排查 在linux shell中手动执行 env , 显示出来一堆已经加载的环境变量; 然后写一个脚本 执行 env命令,放在...原创 2019-01-07 22:18:10 · 1690 阅读 · 1 评论 -
linux基础操作
一、killall1)安装yum install psmisc -y2)使用# 杀掉所有名为nginx的进程killall nginx原创 2019-08-01 16:15:18 · 112 阅读 · 0 评论 -
wrk 并发测试
一、安装yum install https://extras.getpagespeed.com/release-el7-latest.rpmyum install wrk二、测试1) get请求wrk -d 60 -c 10000 -t 32 'http://www.baidu.com'-d 持续时间-c 并发数-t 线程数...原创 2019-07-22 12:05:26 · 1260 阅读 · 0 评论 -
linux shell
1、批量杀掉集群任务for x in $(yarn application -list | awk 'NR > 2 { print $1 }'); do yarn application -kill $x;done# 仅杀掉accept状态任务for x in $(yarn application -list -appStates ACCEPTED | awk ...原创 2019-07-11 11:24:20 · 116 阅读 · 0 评论 -
使用autossh在外网访问内网服务器并设置代理
Part1、需求一缘由 内网服务器A需要访问外网服务器B中内网的某些应用,但是外网服务器并不开放这些服务的端口,因此需要设置代理访问!操作 A服务器上的操作:# 安装autosshyum -y install autossh# 需要将A的公钥放到B的服务器上ssh-copy-id B_IP# -M参数,这个参数指定一个端口,这个端口是外网...原创 2019-06-06 09:53:15 · 731 阅读 · 0 评论 -
yum安装提示无可用包
缘由 Centos 7下安装htop,使用yum install htop,提示没有可用的软件包。原因 很多软件包在yum里面没有的,解决的方法,就是使用epel源,也就是安装epel-release软件包。EPEL(Extra Packages for Enterprise Linux)是基于Fedora的一个项目,为“红帽系”的操作系统提供额外的软...原创 2019-04-28 18:03:17 · 5937 阅读 · 0 评论 -
测试两台服务器之间的网络带宽
一、选择iperf的原因 为了测试两台服务器在局域网内的带宽,有人说,使用文件拷贝的方式,其实测试出来的都不太准确,受限于磁盘IO等等因素的影响。为了有较准确的测试结果,iperf是最好的选择。二、iperf安装yum install -y iperf三、测试两台服务器,IP地址分别为192.168.2.105和192.168.2.106...原创 2019-04-24 10:20:47 · 9873 阅读 · 0 评论 -
linux多线程下载axel
下载与安装apt-get install axel 由于 CentOS 源里默认没有包含 axel,我们需要安装 EPEL 才能通过 yum 进行安装。yum install epel-releaseyum install axel使用其中[options]可以包括如下参数:--max-speed=x , -s x 最高速度x --num-connections=...原创 2019-04-15 15:41:48 · 1138 阅读 · 0 评论 -
Linux通过rpm包安装yum
安装环境 CensOS 7步骤一事先准备好rpm包:wget http://mirrors.163.com/centos/7/os/x86_64/RPM-GPG-KEY-CentOS-7 wget http://mirrors.163.com/centos/7/os/x86_64/Packages/yum-3.4.3-161.el7.centos.noar...原创 2019-09-09 23:27:35 · 3125 阅读 · 0 评论