linux 统计两个文件中相同或不同的行

最新推荐文章于 2025-05-28 14:59:48 发布
原创 最新推荐文章于 2025-05-28 14:59:48 发布 · 1.9w 阅读 · 2 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
标签
#linux
本文介绍如何使用grep命令来找出两个文件中的相同及不同行。通过具体示例展示了如何精确匹配行以及排除不需要的内容。

文件111：

aaaaaaaaaabbb
bbbbbbbbbbccc
ccccccccccaaabbb
aaaaaaaaaabbb
ddddddddd

文件222：

aaaaaaaaaabbb
sdgsdagdsa
bbbbbbbbbbccc
ds
bbbbbbbbbbccc
cceeccccccaaabbb
edddddddd

打印文件222中和文件111中相同的行

[root@flashhq test]# grep -Ff 111 222
aaaaaaaaaabbb
bbbbbbbbbbccc
bbbbbbbbbbccc

打印文件111中和文件222中相同的行

[root@flashhq test]# grep -Ff 222 111
aaaaaaaaaabbb
bbbbbbbbbbccc
aaaaaaaaaabbb

打印文件111中和文件222中不相同的行：

[root@flashhq test]# grep -vFf 222 111
ccccccccccaaabbb
ddddddddd


Linux下如何寻找相同文件的方法
01-09
随着电脑的使用，系统里将产生很多垃圾，最典型的就是同一份文件被保存到了不同的位置，这样导致的结果就是磁盘空间被大量占用，系统运行越来越慢。 所以如果你的电脑空间告急的话，可以试着去删除这样的文件，释放一些空间。在 Linux 下，我们可以通过识别文件的 inode 值来找出系统中的相同文件。 inode 是一个数据结构，记录了文件所有信息，除了文件名和文件内容。如果两个或多个文件具有相同的 inode 值，即使它们的文件名不一样，位置不一样，它们的内容、所有者、权限其实都是一样的，我们可以将其视有相同文件。 这类型的文件其实就是所谓的「硬链接」。硬链接具有相同的 inode 值，但文件名不一样
linux 下获取两个文件的不同行和相同行
一名运维开发工程师的日常记录
05-09 567
a，b两个文件，a中有，b中无的行：a，b中都有的行：
linux过滤两个不同文件重复行,Linux命令grep过滤比较两个文件的不同
weixin_42523975的博客
04-28 1245
该脚本用来比较两个文件中，其中一个文件比另一个文件多的行，常用来工作环境中，对比得出多余的ip地址#!/bin/bash#differentinfile1andfile2#author：vaedit#date：2017/8/20#read-p"请输入第一个文件路径"file1#read-p"请输入第二个文件路径"file2functionprint_help(){echo"...
centos 找到并删除重复文件 去重
05-08 636
这个命令将提示你保留还是删除所有其他重复文件。输入任一号码保留相应的文件，并删除剩下的文件。当使用这个选项的时候需要更加注意。如果不小心，你可能会删除原文件。Fdupes 用法非常简单。显示子目录中的重复文件，使用。删除所有重复文件，使用。
Linux取两个或多个文件的相同行或不同行
SunMy的博客
03-31 3318
使用uniq取相同行和不同行 -u 仅显示不重复的行 -d 仅显示重复的行 cat passwd /etc/passwd | sort | uniq -u cat passwd /etc/passwd | sort | uniq -d uniq显示的重复是指相邻的重复行，所以常搭配sort先排序，将重复的都聚拢在一起，再进行查重和去重 实例： [11:51:18 rooter@C8-3-55 ~]#cat passwd /etc/passwd | sort | uniq -u hello hello
Linux文件内容统计及比较命令（wc&comm）
weixin_45740510的博客
12-27 844
文件内容统计及比较命令 WC命令：统计文件中的字节数、字数、行数将结果输出到输出到设备上 参数： -c : 统计字节数 -l : 统计行数 -m : 统计字符数，注意不能跟 -c 同时使用 -w : 统计字节数 -L ：统计最长行的长度 实例： wc b.txt wc -c b.txt 输出文件中的字节数 wc -l b.txt 输出文件中的行数 wc -w b.txt 输出文件中的字数 ls -l | wc -l 输出当前目录中的文件数 COMM 命令：用于两个文件中的比较，也可以实现两
使用shell 统计文本行数，输出两个文件不同或相同的行
fengxueping的专栏
07-01 3775
1、统计一个文本的行数： grep -c “XXX” owc_list.txt   # 输出匹配“XXX”的行数，当”XXX“ 为空”“时，输出整个文本的行数 grep -n “XXX” owc_list.txt  #输出代号，且匹配“XXX”的行 cat owc_list.txt |wc -l   #只输出文本的总行数 cat -n owc_list.txt  #输出带行号的文本，且输入
笔记：在linux里面使用伪分布式的hadoop操作（1.制作 一个文件，里面包含10-20不同的或部分相同的单词。 2.使用wordcount方法实现单词出现频率统计。）
欢迎来到我的CSDN博客！在这里，我将分享关于技术、学习和生活的各种笔记和心得体会。无论你是正在学习编程、探索新技术，还是对生活中的点滴有所感悟，我都希望我的博客能够给你带来启发和帮助。
04-28 3073
在linux里面使用伪分布式的hadoop操作1.制作 一个文件，里面包含10-20不同的或部分相同的单词。2.使用wordcount方法实现单词出现频率统计。在Linux环境下使用伪分布式Hadoop进行单词出现频率统计是一项常见的任务。Hadoop是一个开源的分布式计算框架，主要用于大规模数据的存储和处理。而在伪分布式环境下，我们可以在单台计算机上模拟出Hadoop的基本功能，以便学习、测试和开发分布式系统，而无需真正的多台物理计算机。制作一个包含10-20个不同或部分相同单词的文本文件。
Linux如何显示文件数目的技巧&比较两个文件夹是否相同
ciscomonkey的博客
11-12 3882
文章目录如何对比文件数目比较两个文件夹是否相同 工作场景，现在我需要对比同事的一个目录下的文件，与我的目录下的文件数量是否相同，如果数量相同的话，文件是否相同。 如何对比文件数目 如上图所示，我以列表详细用ls -al列出了所有文件（包括隐藏文件) 如果文件很多，则用wc命令 和 grep 命令进行过滤。 wc命令显示输出的行 列 字符数，-l表示仅列出行、-w表示仅列出多少字、-m表示仅列出多少字符； grep用于过滤输出信息，不做详细介绍 分别代表行、列、字 我们关注行即可。 参考文章：1 比较两个
linux-统计文件中相同行的数量
diepiao6729的博客
05-12 2919
cat sorttest | sort | uniq -c sorttest文件内容如下 转载于:https://www.cnblogs.com/DengGao/p/sort_uniq.html
linux 打印两个文件内容相同行和不同行（交集和差集）
qq_31024251的博客
12-11 718
test1文件 dw dsa sd a 2 2 32 21 32 12 23 ew dawd ra 我ca dawda 行吧666 test2 文件 1dw 2dsa ssd a 2 2 32 21 32 12 23 ew dawd ra 我我ca dawda 行吧666 打印文件相同行(交集) grep -Fxf test1 test2 文件内容差集 grep -vxf test1 test2 ...
linux输出两个文件中不同的行数,Linux join将两个文件中，指定栏位内容相同的行连接起来命令详解...
weixin_35735370的博客
04-29 373
功能说明：将两个文件中，指定栏位内容相同的行连接起来。语法：join [-i][-a<1或2>][-e][-o][-t][-v<1或2>][-1][-2][–help][–version][文件1][文件2]补充说明：找出两个文件中，指定栏位内容相同的行，并加以合并，再输出到标准输出设备。参数：-a<1或2> 除了显示原来的输出内容之外，还显示指令文件中没有...
linux之找出两个文件里面相同的数据
码莎拉蒂
11-09 1万+
1 问题 找出2个文件里面重复的数据（这个问题是csdn排名第一的大神stpeace的专栏在微信里面和我的交流，我当时一脸懵逼） 文件a.txt文件内容如下 cat a.txt 123 123 234 345 456 文件b.txt文件内容如下 cat b.txt 234 345 456 789 789 两个文件重复的数据如下 234 345 456 ...
linux使用grep获取两个文件相同的行或不同的行
热门推荐
SeaSky_Steven的博客
01-08 2万+
linux的使用过程中会经常使用到匹配两个文件的操作 如果文件足够大，就无法通过人手动完成两个文件的匹配工作，这时候可以使用grep工具来帮助我们完成对文件的匹配工作。 grep文件匹配时用到的参数grep进行文件内容匹配工作是用到的参数主要有两个，分别是 1. 取出两个文件中的相同部分内容“-wf”参数. 2. 取出两个文件中的不同部分内容“-wvf”参数 操作指南 创建两个文件分别是aaa....
linux中取出两个文件中的相同的内容或不同的内容
小生南瞧
02-19 9189
取出两个文件中的重复行或唯一行 两个文件内容 [root@xsnq opt]# cat 1.txt 1 2 3 4 5 [root@xsnq opt]# cat 2.txt 3 2 1 6 7 1.取相同的行 命令：grep -wf [文件名] [文件名] [root@xsnq opt]# grep -wf 1.txt 2.txt 3 2 1 取出两个文件中相同的行，并以2.txt出现的顺序排序。 2.取不相同的行 [root@xsnq opt]# grep -wvf 2.txt 1.txt
linux 如何过滤出两个文本相同的内容
最新发布
xiaopeng_thriller的博客
05-28 478
comm 是专门比较两个已排序文件的工具，能找出相同和不同的行。awk 强大、灵活 需要处理更复杂的匹配条件时（如字段匹配等）🎯 方法二：grep + F (适合不需要排序的场景)comm 简单、直观 文件已排序，内容较大时使用。grep 快速、无需排序 小文件或临时检查时使用。linux 如何过滤出两个文本相同的内容。🎯 方法三：awk 实现（更强大）🎯 方法一：comm 命令。方法 优势 适用场景。
在Linux中查找和删除重复文件的4种方法
Linux和Eda技术分享
10-15 1306
大神教你在Linux中查找和删除重复文件的4种方法 在本教程中，您将学习如何使用rdfind和fdupes命令行工具以及称为DupeGuru和FSlint的GUI工具在Linux中查找和删除重复文件。 如果您习惯于从网络下载各种内容，则整理您的主目录甚至系统可能会特别困难。 您可能会发现自己下载了相同的mp3，pdf，zip(以及所有其他类型的文件扩展名)并将其复制到其他目录。这可能会导致...
LINUX入门常用命令之文本处理
Opossum的专栏
10-12 1181
Linux文本处理命令  sort命令 sort命令的功能是对文件中的各行进行排序。sort命令有许多非常实用的选项，这些选项最初是用来对数据库格式的文件内容进行各种排序操作的。实际上，sort命令可以被认为是一个非常强大的数据管理工具，用来管理内容类似数据库记录的文件。Sort命令将逐行对文件中的内容进行排序，如果两行的首字符相同，该命令将继续比较这两行的下一字符，如果还相同，将继续进行
Linux统计单个文件统计
yixian918的专栏
07-22 665
语法：wc [选项] 文件… 说明：该命令统计给定文件中的字节数、字数、行数。如果没有给出文件名，则从标准输入读取。wc同时也给出所有指定文件的总统计数。字是由空格字符区分开的最大字符串。 该命令各选项含义如下： 　　- c 统计字节数。 　　- l 统计行数。 　　- w 统计字数。 这些选项可以组合使用。 输出列的顺序和数目不受选项的顺序和数目的影响。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值