shell脚本处理日志的几个题目

最新推荐文章于 2021-04-22 10:26:12 发布
最新推荐文章于 2021-04-22 10:26:12 发布
阅读量1.7k 收藏 1
点赞数 2
分类专栏： shell脚本 文章标签： shell脚本
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/linux4fun/article/details/17587691
版权
本文介绍了如何使用Shell脚本处理日志文件，包括统计IP访问、进行文本分析和文件整理。例如，通过awk和uniq命令统计Apache访问日志中的IP访问量，从/etc/passwd文件中分析shell出现的次数，以及如何合并和排序两个包含工号信息的文本文件。
摘要由CSDN通过智能技术生成

统计IP访问：

要求分析apache访问日志，找出访问页面数量在前100位的IP数。日志大小在78M左右。以下是apache的访问日志节选

 202.101.129.218 - - [26/Mar/2006:23:59:55 +0800] "GET /online/stat_inst.php?pid=d065 HTTP/1.1" 302 20-"-" "-" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)"

 # awk '{print $1}' log      |sort |uniq -c|sort -r |head -n10

      5 22

最低0.47元/天 解锁文章
厨房小菜刀
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
shell之日志处理
weixin_33692284的博客
08-10 290
#!/bin/bash #bylcat20160428forhadoop(grep_recharge) DATE=`date+%F_%H\:%M\:%S` YTDATE=`date-d"-1day"+%Y%m%d` RESTDIR=/home/hadoop/prodata/rest DATEDIR=/home/hadoop/prodata/rest/$YT...
shell习题-处理日志
weixin_34161064的博客
11-03 208
写一个脚本查找/data/log目录下，最后创建时间是3天前，后缀是*.log的文件，打包后发送至192.168.1.2服务上的/data/log下，并删除原始.log文件，仅保留打包后的文件#!/bin/bash find/data/log-name“*.log”-mtime+3>/tmp/file.list cd/data/log tarczvf...
日志处理中一些shell命令技巧
tanhaizhiguang的专栏
06-07 547
阴差阳错的做的日志分析，前途未卜的这段日子，唯一还有点意思的可能就是手动的处理大量日志。总结一下。 日志文件的输入是动则几个G的文本。从N个这样的文件中得到一个列表，一个数字，一个比例。在什么工具都没有情况下，用shell命令不仅是验证系统数据的准确性的方法，也是一个很好的学习过程。 使用cut命令切割日志行 下面的一行典型的apache访问日志： 120.51.133.125
Shell脚本练习题
weixin_43636782的博客
04-22 1452
Shell编程，判断一文件是不是块或字符设备文件，如果是则将其复制到/dev目录下 代码如下: #!/bin/bash touch test.txt if test -b test.txt then cp test.txt /dev/test1.txt else echo "current file is not a block file" fi 运行结果: Shell编程，通过条件测试条件判断当前用户是否拥有某个文件的读权限 代码如下: #/bin/bash test -...
解决Unity不能调用shell脚本传递参数的问题
04-07
在Unity开发过程中，有时我们需要与操作系统进行交互，例如执行shell脚本来处理一些特定的任务。但在实际操作中，可能会遇到Unity无法正确调用shell脚本并传递参数的问题。本文将详细介绍如何解决这一问题，并提供一...
实验4 SHELL脚本的编写(一).pdf
02-22
创建和执行shell脚本通常包括以下几个步骤： 1. 在脚本的开头添加"#!/bin/sh"，这是告诉系统使用哪个shell解释器来执行脚本。 2. 将脚本文件设置为可执行，使用`chmod +x scriptname`命令。 3. 可以通过`. script...
推荐一份阿里大厂面试时的几道题目
最新发布
04-20
- **API调用技术**：如何使用Shell或Python脚本调用API接口。 - **数据集成工具**：DataX等工具的使用方法及其优势。 - **分布式计算框架**：如Spark、Hadoop等框架的特点及其应用场景。 - **UDF开发**：在计算引擎...
os与shell编程实验题目（电子科大）
06-29
6. 脚本编写：编写完整的shell脚本，例如自动化备份、日志分析等实用工具。 7. 正则表达式：在shell脚本中使用正则表达式进行文本匹配和处理。 在实验过程中，可能会分析提供的os&unixOS代码，理解其工作原理，找...
百度面试题 shell
12-01
综上所述，通过对这些面试题的解析，我们不仅能够了解到Shell脚本编程的基础知识，还能掌握一些高级特性，如并发处理、日志数据分析、信号处理等，这对于提升Shell脚本编程技能是非常有帮助的。
shell日志颜色处理及清理系统日志的方法
01-20
记录一下shell日志颜色处理 _COLORS=${BS_COLORS:-$(tput colors 2>/dev/null || echo 0)} __detect_color_support() { # shellcheck disable=SC2181 if [ $? -eq 0 ] && [ $_COLORS -gt 2 ]; then RC='\\033[1;31m' GC='\\033[1;32m' BC='\\033[1;34m' YC='\\033[1;33m' EC='\\033[0m' else RC= G
5个实用的shell脚本面试题和答案
01-10
这边提到的5个面试问题，延续之前的有关Linux面试问题和答案。如果你是Tecmint的读者，你的支持我非常感谢。 1. 写一个shell脚本来得到当前的日期，时间，用户名和当前工作目录。 答案 : 输出用户名，当前日期和时间，以及当前工作目录的命令就是logname，date，who i am和pwd。 现在，创建一个名为userstats.sh文件，将下面的代码添加到它。 代码如下: #!/bin/bash echo “Hello, $LOGNAME” echo “Current date is `date`” echo “User is `who i am`” echo “Cu
shell脚本（监控日志发告警邮件）
10-21
监控生产环境nginx日志发告警邮件,需要使用linux系统的定时任务，如5分钟执行或者其他时间间隔
shell脚本练习题
shenlong1356的博客
06-12 3030
https://www.cnblogs.com/OctoptusLian/p/8979646.html
第十三节.Shell日志处理和信号捕捉
千门公子襄
11-16 399
一.日志文件1.创建日志文件的重要性统计排错2.以时间为标志的日志文件#!/bin/bash #createlog today=`date '+%Y-%m-$d'` filelog="${today}.log if [[ ! -e $filelog ]];then touch $filelog fi echo "`date '+%Y-%m-%d %T'` log input start" >
shell脚本习题
Ruoshuiss的博客
12-09 1851
如果你的想要管理好你的主机，那么就要好好学习自动管理系统的有效工具——hell script！基本上，shell script有点像早期的批处理文件，即将很多命令整合起来一次执行，但是shell script拥有更强大的功能，它可以进行类似程序的编写，并且不需要经过编译就能够执行，非常方便我们对系统进行管理。   今天我们主要通过对一些shell script的习题来加深对脚本知识的学习。 习
Shell脚本：完成日志老化，将保存一周的日志打包转移到新目录下，并保存一月后清除。
热门推荐
张彦峰的博客
12-10 169万+
要求日志老化，具体要求如下：将以上具体某个日志下的日志已保留了七天的统一打包到一个目录下，该目录的名称和原来的目录名称基本对应，以保证在看其备份日志时，可以方便查找；上面打包以后采用直接move操作来转移到新目录下；在新的统一目录下，要求所有的tar包都只保留一个月，一个月后自动清除。
Shell脚本编程实战指南：100个经典实例
第3个脚本是一个自动备份脚本，使用`tar`命令每周五备份`/var/log`目录下的日志文件，并通过`crontab`实现定时任务。这个例子展示了如何利用时间表达式设置定时任务，并通过变量引用当前日期生成备份文件名，避免...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值