linux下求文件的差集

最新推荐文章于 2021-12-25 18:44:36 发布
最新推荐文章于 2021-12-25 18:44:36 发布
阅读量65 收藏
点赞数
文章标签： 操作系统
原文链接：http://www.cnblogs.com/mikewolf2002/archive/2013/02/28/2936165.html
版权

grep -F -v -f a.txt b.txt | sort | uniq

通过grep命令，可以求得b.txt中去除a.txt后的内容。

比如b.txt

1

2

3

a.txt

1

则该命令内容为

2

3

 

转载于:https://www.cnblogs.com/mikewolf2002/archive/2013/02/28/2936165.html

weixin_33882452
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Linux实现文件内容去重及求交并差集
01-09
一、数据去重 日常工作中，使用Hive或者Impala查询导出来可能会存在数据重复的现象，但又不想重新执行一遍查询（查询时间稍长，导出文件内容多），因此想到了使用Linux命令将文件的内容重复数据进行去除。 案例如下： 可以看到aaa.txx有3条重复数据 想去掉多余的数据，只保留一条 sort aaa.txt | uniq > bbb.txt 将aaa.txt文件中重复数据去掉，输出到bbb.txt 可以看到bbb.txt文件中只保留了一条数据 二、数据交、并、差 1)、交集(相当于user_2019 inner join user_2020 on user_2019.user_no=u
Linux 求文件交集 差集等
weixin_34364135的博客
07-29 152
使用comm命令 假设两个文件FILE1和FILE2用集合A和B表示，FILE1内容如下： a b c e d a　　 FILE2内容如下： c d a c 基本上有两个方法，一个是comm命令，一个是grep命令。分别介绍如下：   comm命令 ， Compare sorted files FILE1 and FILE2 line by l...
Linux求文件差集
a3amux18550的博客
04-07 142
grep -F -f listb lista -v 可以求差集A-B 转载于:https://www.cnblogs.com/ITEagle/archive/2013/04/07/3003611.html
Linux中求文件差集的方法
victorunique的专栏
01-15 821
求集合A与集合B的差集方法1:sort B B A | uniq -u方法2:grep -vFf file_b file_a
linux命令对两个文件求差集、交集、并集
dkgee
12-25 5876
一、差集 有两个文件user_2020.txt、user_2019.txt 其中user_2020.txt中内容如下： uuu aaa bbb 111 user_2019.txt中内容如下： eeeee aaa bbb ccc aaa 示例一：求user_2020.txt - user_2019.txt的差集命令 sort user_2020.txt user_2019.txt user_2019.txt| uniq -u 结果如下： 111 uuu 示例二：求user_201.
Windows和Linux下的Redis.zip
10-23
这个压缩包“Windows和Linux下的Redis.zip”包含了适用于两种操作系统环境的Redis安装包，分别是Linux下的`redis-5.0.4.tar.gz`和Windows下的`redis_5377.zip`。 1. Redis简介： Redis是Remote Dictionary Server...
linux for arm, 配置文件比对工具
最新发布
01-03
`diff`命令提供了一种直观的方式来查看两个文件之间的不同之处，而`comm`则可以显示两个已排序文件的交集、差集和并集。这些基础工具对于简单文件的比较非常有用，但在处理复杂配置文件时可能不够强大。 更高级的...
redis-7.0.7_linux_x86.tar.gz
05-25
- **集合（Sets）**：无序的不重复元素集合，支持成员的添加、删除、求交集、并集和差集操作。 - **有序集合（Sorted Sets）**：集合的基础上增加了分数字段，可以根据分数进行排序。 3. **Redis持久化**： - **...
高级shell扩展---uniq命令
panbuhei
11-06 320
uniq uniq 命令用于检查及删除文本文件中重复出现的行列，一般与 sort 命令结合使用。 语法 uniq [-cdu][-f<栏位>][-s<字符位置>][-w<字符位置>][--help][--version][输入文件][输出文件] 参数： -c或--count 在每列旁边显示该行重复出现的次数。 -d或--repeated 仅显示重复出现的行列。 -f<栏位>或--skip-fields=<栏位> 忽略比较指定的栏位。 -s<
linux求两个文件的差集,linux 两个文件取交集命令
weixin_28481133的博客
04-28 260
有两个文件a和b，a中包含b中所有数据。需要找出a文件中包含b文件内容的数据。具体操作如下：a.txt文件http://www.simonzhang.net/msg?phone=12320421&msg=hfeafhttp://www.simonzhang.net/msg?phone=13219543&msg=efweff3http://www.simonzhang.net/msg...
linux取差集
qq_39460085的博客
10-24 549
A,B两个文件，取 A-B cat A B B|sort|uniq -u 取A交B sort A B | uniq -d
Linux下求差集运算方法小结
xibeichengf的专栏
11-01 4040
在实际的工作中我们经常会遇到求数据的差集的问题。比如，原来数据库的某个表中有1000条数据，后来经过一些后续的变更，变成了1200条数据了。那么我们如何求得这多出来的200条数据究竟是哪一些呢？在此，我做了一个小小的总结，把求解此类问题的方法在此列出。为了后面叙述的方便，现把原来的1000条数据的文件命名为file1.txt，后来的1200条数据的文件命名为file2.txt。file1.txt和
linux shell下求文件的交集、并集、差集
04-01 8510
有两个方法，一个是comm命令，一个是grep命令comm命令comm(选项)(参数) 选项-1：不显示在第一个文件中出现的内容 ； -2：不显示在第二个文件中出现的内容； -3：不显示同时在两个文件中都出现的内容。
LINUX Shell 下求两个文件交集和差集的办法
热门推荐
autofei的专栏
07-01 7万+
假设两个文件FILE1和FILE2用集合A和B表示，FILE1内容如下：abceda FILE2内容如下：cdac基本上有两个方法，一个是comm命令，一个是grep命令。分别介绍如下： comm命令， Compare sorted files FILE1 and FILE2 line by line. With  no op
Linux 两个文件求交集、并集、差集
yuanyuan95的专栏
03-08 2015
这里写自定义目录标题Linux 两个文件求交集、并集、差集一、交集二、并集三、差集四、相关的解释 Linux 两个文件求交集、并集、差集 原文地址： Linux 两个文件求交集、并集、差集 (https://www.cnblogs.com/molong1208/p/5358509.html) 一、交集 sort a.txt b.txt | uniq -d 二、并集 sort a.txt b.tx...
linux两个文件取交集、并集、差集
Kenina_Xie的博客
10-29 2297
如何得到两个文件的交集、并集和差集？ 交集：两个文件中都出现的行 并集：两个文件中的所有行加起来，去掉重复 差集：在一个文件中存在，而在另一个文件中不存在。 比如以下两个文件： a.txt aaa bbb ccc 111 222 b.txt ccc ddd eee 111 333 结果： a.txt和b.txt的交集： ccc 111 a.txt和b.txt的并集： 111 222 333 aaa bbb ccc ddd eee a.txt中存在b.txt中不存在： 222 aaa bbb b.txt中存在
linux求两个文件的差集,Linux 求文件交集 差集等
weixin_39821874的博客
04-28 339
使用comm命令假设两个文件FILE1和FILE2用集合A和B表示，FILE1内容如下：abcedaFILE2内容如下：cdac基本上有两个方法，一个是comm命令，一个是grep命令。分别介绍如下：comm命令， Compare sorted files FILE1 and FILE2 line by line. With no options, produce three-column o...
Linux shell计算两个文件的交集，并集和差集
傲雪星枫
08-31 4万+
本文介绍linux下shell计算两个文件的交集，并集和差集的方法，提供完整测试命令与演示。
使用linux命令做差集
10-08
使用Linux命令进行差集运算可以使用`diff`命令。`diff`命令用于比较两个文件的内容，并输出它们之间的差异。 下面是`diff`命令的基本用法： ``` diff file1 file2 ``` 其中，`file1`和`file2`为要比较的两个文件。 如果您想输出`file1`中存在，但在`file2`中不存在的行，可以使用以下命令： ``` diff file1 file2 | grep "^<" | cut -c 3- ``` 这将输出`file1`中与`file2`不同的行。 如果您想输出`file2`中存在，但在`file1`中不存在的行，可以使用以下命令： ``` diff file1 file2 | grep "^>" | cut -c 3- ``` 这将输出`file2`中与`file1`不同的行。 请注意，以上命令假设文件是按行比较的。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值