“如何在Linux下合并多个文件并删除重复行”的版本间的差异

2022年3月22日 (二) 10:54的版本

e

e

合并文件

4.输入“cat a.txt b.txt > c.txt”合并b.txt文件内容到a.txt的下方并输出到c.txt。并输入“cat c.txt”输出c.txt文件内容。
   注意：蓝色框内为原a.txt文件内容，黄色框内为原b.txt文件内容。

5.输入“paste a.txt b.txt > d.txt”合并b.txt文件内容到a.txt的右方并输出到d.txt。并输入“cat d.txt”输出d.txt文件内容。
   注意：蓝色框内为原a.txt文件内容，黄色框内为原b.txt文件内容。

6.输入“cat a.txt b.txt | sort | uniq | > e.txt”合并a.txt和b.txt文件内容并删除重复行，将结果输出到e.txt。并输入“cat e.txt”输出e.txt文件内容。
   注意e.txt与上图c.txt文件的区别。

e

文件并集&交集&补集

注意：文件补集和交集等操作需保证文件内容无重复行。
13.输入“cat a.txt b.txt | sort | uniq > h.txt”命令将a.txt和b.txt文件合并输出为h.txt（如果两个源文件有重复行则只保留一行），并输入“cat h.txt”查看h.txt文件内容。

14.输入“cat a.txt b.txt | sort | uniq -c > h1.txt”命令将a.txt和b.txt文件合并输出为h1.txt（-c 参数显示每行出现的次数），并输入“cat h1.txt”查看h.txt文件内容。

15.输入“cat a.txt b.txt | sort | uniq -d > i.txt”命令（-d参数表示仅显示重复行）将a.txt和b.txt的交集输出到i.txt，并输入“cat i.txt”查看文件内容。
     注意：此处因b.txt有重复行，故输出文件内容不正确。

16.输入“sort b.txt | uniq > b1.txt”命令将b.txt删除重复行（重复行只保留一行）的结果输出为b1.txt文件，并输入“cat b1.txt”查看文件内容。

17.输入“cat a.txt b1.txt | sort | uniq -d > j.txt”命令（-d参数表示仅显示重复行）将a.txt和b1.txt的交集输出到j.txt，并输入“cat j.txt”查看文件内容。
     注意：此处因b1.txt无重复行，故输出文件内容正确。

18.输入“cat a.txt b.txt | sort | uniq -u > k.txt”命令（-u参数表示仅显示文件中不重复行）将删除a.txt和b.txt文件的交集（111和777两行），并将其他内容输出到k.txt， 输入“cat k.txt”查看文件内容。
    注意：因b.txt文件内容有重复行（aaa和bbb两行），故输出文件内容不正确

19.输入“cat a.txt b1.txt | sort | uniq -u > k1.txt”命令（-u参数表示仅显示文件中不重复行）将删除a.txt和b1.txt文件的交集（111和777两行），并将其他内容输出到k1.txt， 输入“cat k.txt”查看文件内容。
    注意：因b1.txt文件内容无重复行，故输出文件内容正确