Shell
Shell相关
一个处女座程序员
分享技术心得体会
展开
-
ScurieCRT批名导入服务器信息
SecureCrt批量导入服务器信息转载 2022-04-18 14:45:56 · 202 阅读 · 0 评论 -
mysql单表2亿无索引数据,迁移到hive中并分区存放
无索引数据有几十G,用sqoop导入进度太慢,等待很久map还是0%所以才去分而治理1、先用mysql导入到csv文件中,顺序扫描并保存到文件中select * from t_swmx_sl into outfile 't_swmx_sl.csv' fields terminated by '\001'lines terminated by '\n';用时间:11:17->2、后加载到hadoop中3、创建hive表4、再加载到hive中5、创建hive分区表6、用原创 2021-10-14 15:53:27 · 571 阅读 · 0 评论 -
spark任务调度脚本 同一任务只能有一个在队列总执行
脚本会判断相同任务是否正在执行如果正在执行中,则忽略如果没有执行,根据用户传递参数执行任务. /etc/profile.d/hadoop.sh#runing=`ps aux | grep 'edu.xd.spark.FenXiShiShiZaiXiao' | grep -v grep | grep -v "bigdata.sh" | wc -l`runing=`ps aux | grep "$1" | grep -v grep | grep -v "bigdata.sh" | wc -l`ec原创 2021-10-09 17:39:41 · 301 阅读 · 0 评论 -
一行命令解决电视盒子播放下载的电视剧无声音的问题
快过年了,防止无聊,下载了部经典喜剧在电视盒子上看看。现在片源越来越不好找了,好不容易下了部回家在机顶盒上一播放,傻眼了,有图像没声音,声道切换也不管用这点事情难不倒程序猿,ffprobe查看视频属性ffprobe 01.mkv结果ffprobe version 4.1.3 Copyright (c) 2007-2019 the FFmpeg develope...原创 2020-01-20 19:29:38 · 2986 阅读 · 0 评论 -
一行简单Shell脚本实现免密码登陆Linux服务器
有句名言是:人生苦短只用Python免密码登陆Linux有很多方便,节省大量时间网上有很多教大家如何实现免密码登陆Linux服务器的教程,大多很繁琐,包含很多步骤步骤越多往往问题越多,有时居然莫名失败,实在是没必要那么繁琐,只要一行shell脚本就可以搞定,废话不多说,上代码ssh-copy-id -i ~/.ssh/id_rsa.pub [email protected]...原创 2020-01-17 10:47:36 · 542 阅读 · 3 评论 -
ffmpeg如何进行高清图片转码,截取视频
默认命令ffmpeg -i [video] -f image2 output_%d.jpg但是转码出来的图片像素不高可以使用qscale命令,说明如下:Use -qscale:vUse -qscale:v (or the alias -q:v) as an output option. Effective range for JPEG is 2-31 with 31 bein...原创 2019-11-28 10:29:08 · 2813 阅读 · 0 评论 -
VIM 常用快捷键
目录vi常用快捷键1)移动光标2)插入文本3)删除文本4)复制文本5)查找文本6)屏幕翻滚7)末行命令8)键盘图9)列操作vi常用快捷键1)移动光标h :光标左移一个字符j :光标上移一个字符k:光标下移一个字符l :光标右移一个字符0 :光标移至行首$ :光标移至行尾H :光标移至屏幕首行...原创 2019-11-30 19:08:10 · 256 阅读 · 0 评论 -
Screen常见用法 Linux手动编译安装Screen
Linux下手动编译安装Screen1,下载screen源码https://ftp.gnu.org/gnu/screen/我下载的是screen-4.7.0.tar.gz2,编译mkdir build && cd build#运行配置程序../configure3,configure出错configure: error: !!! no t...原创 2019-12-06 10:55:02 · 1859 阅读 · 0 评论 -
python3.6和ffmpeg结合剪去电视剧的头尾
看电视剧时片头片尾特别耽误时间,如果能剪切掉就完美啦!这点事情能难道处女座程序员吗,说干就干,用python和ffmpeg小试牛刀!不废话,直接上代码!#截取视频,去掉头尾# -*- coding: UTF-8 -*-import osimport mathimport reimport sys#请根据您的情况自行修改todo位置的代码def cut_movie(src_...原创 2019-12-08 15:15:07 · 901 阅读 · 0 评论