linux过滤数据写出到文件,工作遇到问题,用linux命令过滤数据文件,恳请大家帮忙了...

数据文件,文件名:/home/data/vwap.tbt.20101117

IF1012,3,3157.4,16,092603, ,2010/11/17 09:24:29.566,3157.400000,

IF1012,3,3157.4,1,092603, ,2010/11/17 09:24:30.067,3157.400000,

cu1011,4,3157.4,1,092603, ,2010/11/17 09:24:30.068,3157.500000,

IF1012,3,3157.2,4,092604, ,2010/11/17 09:24:30.527,3157.400000,

IF1012,3,3156.8,2,092604, ,2010/11/17 09:24:31.051,3157.200000,

IF1012,3,3156.6,8,092605, ,2010/11/17 09:24:32.103,3157.000000,

IF1012,3,3155.2,20,092606, ,2010/11/17 09:24:32.503,3156.600000,

cu1011,4,3155.2,20,092606, ,2010/11/17 09:24:32.504,3158.600000,

IF1012,3,3155.2,2,092606, ,2010/11/17 09:24:33.025,3156.600000,

IF1012,3,3156,2,092607, ,2010/11/17 09:24:33.558,3156.400000,

M000300,1,3124.109,563959,092606,2,2010/11/17 09:24:33.703,,

IF1012,3,3156.4,7,092607, ,2010/11/17 09:24:34.083,3156.600000,

IF1012,3,3157,11,092608, ,2010/11/17 09:24:34.533,3157.000000,

IF1012,3,3156.4,3,092608, ,2010/11/17 09:24:35.057,3156.600000,

IF1012,3,3156.6,2,092609, ,2010/11/17 09:24:35.586,3156.600000,

IF1012,3,3156.6,2,092609, ,2010/11/17 09:24:36.101,3157.000000,

IF1012,3,3156.6,5,092610, ,2010/11/17 09:24:36.529,3157.000000,

观察这个数据文件:

1、每一行都有8个字段,每个字段都用“,”进行分割,第6个字段时空的,两个逗号之间是一个空格。

2、第5个字段是时间:如,2010/11/17 09:24:29.566

3、每一行都按照时间递增,所有数据的时间范围在2010/11/17 08:45:00.000到2010/11/17 15:15:30.000

我的问题是:

我想过滤出以IF1012和M000300开头的,并且时间是2010/11/17 09:24:30.527之后的所有数据,

过滤到文件 /home/data/temp.txt 中。

希望不要采用先过滤出以IF1012和M000300开头的所有数据到一个文件中,然后再从过滤出的文件中过滤出

时间2010/11/17 09:24:30.527之后的数据。因为效率对我来说很重要,如果这样的过滤方法可能效率

比较低,我的那个数据文件有600多M呢。

我考虑了好久不知道如何解决,恳请高手、大牛帮忙解决一下,多谢、非常感谢、万分感谢!

时间比较紧急,如果谁帮忙做出来,我会把分数全权给予的。再次感谢!

|

忘了忘文件里写 而且看错你的条件了哇

用下面这个

awk -F',' '{if($1 ~ /^IF1012|M000300/ && $7 > "2010/11/17 09:24:30.527") print $0}' /home/data/vwap.tbt.20101117 > /home/data/temp.txt

表情包
插入表情
评论将由博主筛选后显示,对所有人可见 | 还能输入1000个字符
相关推荐
<div style="color:rgba(0,0,0,.75);"> <span style="color:#4d4d4d;"> </span> <div style="color:rgba(0,0,0,.75);"> <span style="color:#4d4d4d;"> </span> <div style="color:rgba(0,0,0,.75);"> <div style="color:rgba(0,0,0,.75);"> <span style="color:#4d4d4d;">当前课程中商城项目的实战源码是我发布在 GitHub 上的开源项目 newbee-mall (新蜂商城),目前已有 6300 多个 star,</span><span style="color:#4d4d4d;">本课程是一个 Spring Boot 技术栈的实战类课程,课程共分为 3 大部分,前面两个部分为基础环境准备和相关概念介绍,第三个部分是 Spring Boot 商城项目功能的讲解,让大家实际操作并实践上手一个大型的线上商城项目,并学习到一定的开发经验以及其中的开发技巧。<br /> 商城项目所涉及的功能结构图整理如下:<br /> </span> </div> <div style="color:rgba(0,0,0,.75);">   </div> <div style="color:rgba(0,0,0,.75);"> <p style="color:#4d4d4d;"> <img alt="modules" src="https://imgconvert.csdnimg.cn/aHR0cHM6Ly9uZXdiZWUtbWFsbC5vc3MtY24tYmVpamluZy5hbGl5dW5jcy5jb20vcG9zdGVyL3N0b3JlL25ld2JlZS1tYWxsLXMucG5n?x-oss-process=image/format,png" /> </p> </div> <p style="color:rgba(0,0,0,.75);"> <strong><span style="color:#e53333;">课程特色</span></strong> </p> <p style="color:rgba(0,0,0,.75);">   </p> <div style="color:rgba(0,0,0,.75);">   </div> <div style="color:rgba(0,0,0,.75);"> <ul> <li> 对新手开发者十分友好,无需复杂的操作步骤,仅需 2 秒就可以启动这个完整的商城项目 </li> <li> 最终的实战项目是一个企业级别的 Spring Boot 大型项目,对于各个阶段的 Java 开发者都是极佳的选择 </li> <li> 实践项目页面美观且实用,交互效果完美 </li> <li> 教程详细开发教程详细完整、文档资源齐全 </li> <li> 代码+讲解+演示网站全方位保证,向 Hello World 教程说拜拜 </li> <li> 技术栈新颖且知识点丰富,学习后可以提升大家对于知识的理解和掌握,可以进一步提升你的市场竞争力 </li> </ul> </div> <p style="color:rgba(0,0,0,.75);">   </p> <p style="color:rgba(0,0,0,.75);"> <span style="color:#e53333;">课程预览</span> </p> <p style="color:rgba(0,0,0,.75);">   </p> <div style="color:rgba(0,0,0,.75);">   </div> <div style="color:rgba(0,0,0,.75);"> <p style="color:#4d4d4d;"> 以下为商城项目的页面和功能展示,分别为: </p> </div> <div style="color:rgba(0,0,0,.75);"> <ul> <li> 商城首页 1<br /> <img alt="" src="https://img-bss.csdnimg.cn/202103050347585499.gif" /> </li> <li> 商城首页 2<br /> <img alt="" src="https://img-bss.csdn.net/202005181054413605.png" /> </li> <li>   </li> <li> 购物车<br /> <img alt="cart" src="https://imgconvert.csdnimg.cn/aHR0cHM6Ly9uZXdiZWUtbWFsbC5vc3MtY24tYmVpamluZy5hbGl5dW5jcy5jb20vcG9zdGVyL3Byb2R1Y3QvY2FydC5wbmc?x-oss-process=image/format,png" /> </li> <li> 订单结算<br /> <img alt="settle" src="https://imgconvert.csdnimg.cn/aHR0cHM6Ly9uZXdiZWUtbWFsbC5vc3MtY24tYmVpamluZy5hbGl5dW5jcy5jb20vcG9zdGVyL3Byb2R1Y3Qvc2V0dGxlLnBuZw?x-oss-process=image/format,png" /> </li> <li> 订单列表<br /> <img alt="orders" src="https://imgconvert.csdnimg.cn/aHR0cHM6Ly9uZXdiZWUtbWFsbC5vc3MtY24tYmVpamluZy5hbGl5dW5jcy5jb20vcG9zdGVyL3Byb2R1Y3Qvb3JkZXJzLnBuZw?x-oss-process=image/format,png" /> </li> <li> 支付页面<br /> <img alt="" src="https://img-bss.csdn.net/201909280301493716.jpg" /> </li> <li> 后台管理系统登录页<br /> <img alt="login" src="https://imgconvert.csdnimg.cn/aHR0cHM6Ly9uZXdiZWUtbWFsbC5vc3MtY24tYmVpamluZy5hbGl5dW5jcy5jb20vcG9zdGVyL3Byb2R1Y3QvbWFuYWdlLWxvZ2luLnBuZw?x-oss-process=image/format,png" /> </li> <li> 商品管理<br /> <img alt="goods" src="https://imgconvert.csdnimg.cn/aHR0cHM6Ly9uZXdiZWUtbWFsbC5vc3MtY24tYmVpamluZy5hbGl5dW5jcy5jb20vcG9zdGVyL3Byb2R1Y3QvbWFuYWdlLWdvb2RzLnBuZw?x-oss-process=image/format,png" /> </li> <li> 商品编辑<br /> <img alt="" src="https://img-bss.csdnimg.cn/202103050348242799.png" /> </li> </ul> </div> </div> </div> </div>
©️2020 CSDN 皮肤主题: 深蓝海洋 设计师:CSDN官方博客 返回首页