主页 / ubuntu / 问题 / 1355730
Accepted
Cas
Asked: 2021-08-04 05:35:08 +0800 CST

如果它们在文件中紧随其后，如何仅删除重复的行

  • 772

假设我有以下文件：

$ cat test.txt
a
-----
b
-----
-----
c
-----
-----
-----
d
-----
e
-----
-----

现在我想删除所有的-----，但前提是它们彼此重复。所以结果应该是这样的：

a
-----
b
-----
c
-----
d
-----
e
-----

我试过grep -Pvz -- "-----\n-----"了，但是没有用。

command-line

2 个回答

  1. Best Answer

    这正是该uniq命令的用途：

    NAME
       uniq - report or omit repeated lines

SYNOPSIS
       uniq [OPTION]... [INPUT [OUTPUT]]

DESCRIPTION
       Filter adjacent matching lines from INPUT (or standard input), writing to OUTPUT
       (or standard output).

       With no options, matching lines are merged to the first occurrence.

    所以

    $ uniq test.txt 
a
-----
b
-----
c
-----
d
-----
e
-----

    或者，您可以使用此 sed one-liner 69. 从文件中删除重复的连续行（模拟“uniq”）从Sed One-Liners Explained, Part III: Selective Deletion of certain Lines and Special Applications

    sed '$!N; /^\(.*\)\n\1$/!P; D' test.txt

    如果您想test.txt就地编辑（通过添加-ior--in-place选项），这可能是首选。

    • 10

  2. 就像uniq filename.txt 名字所说的那样，只剩下唯一的行并合并重复

    • 0

相关问题