Linux 命令tail -f ｜管道条件(sed,awk)文件,不输出原因

最新推荐文章于 2024-07-02 11:36:08 发布

自动化了去摸鱼

最新推荐文章于 2024-07-02 11:36:08 发布

阅读量2k

点赞数

文章标签： linux 运维服务器

本文链接：https://blog.csdn.net/weixin_46656392/article/details/126299630

版权

一般我们使用tail -f来跟踪文件变化(或tail -F来对付轮转日志)。

但是在tail加上管道（例如tail -f | awk或者sed )后，会发现输出可能有延时，
就是说，日志文件变化了，但管道命令并没有及时输出结果。要等到日志
变化达到一定量时才输出。

发生这种现象，就是因为IO缓冲机制造成的。
缓冲是一种有效提高IO效率的方法，把频繁的读写请求积累到一定程度后再
一次性的与IO设备交互操作。

IO缓冲有3种，无缓冲，行缓冲，和全缓冲

这下面有个例子

tail -f /root/.pm2/logs/blr-game-9001-*-out.log | grep niubi \
| sed -r "s/\x1B\[([0-9]{1,2}(;[0-9]{1,2})?)?[m|K]//g" |  sed 's/time=//;s/\"//g'  \
 |  awk '{print $1","$4","$5","$6","$7","$8","$9}'

如何解决呢？使用stdbuf命令即可解决我的centos7.8是系统自带的,无需安装

tail -f $logs | \
stdbuf -oL grep 'niubi' | stdbuf -oL sed -r "s/\x1B\[([0-9]{1,2}(;[0-9]{1,2})?)?[m|K]//g" | \
 stdbuf -oL sed 's/time=//;s/\"//g;s/ level=info/,level=info/g'