AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 694127
Accepted
Lahor
Lahor
Asked: 2022-03-13 08:11:54 +0800 CST2022-03-13 08:11:54 +0800 CST 2022-03-13 08:11:54 +0800 CST

为什么 sort -u 只删除管道中的重复项?

  • 772

在此命令中,sort -u删除了重复项。

curl https://en.wikipedia.org/wiki/Help:Special_page -s | grep -oP 'Special:\K[a-zA-Z0-9]*' | sort -u > special_page_names

在这个命令中,它没有。

curl https://en.wikipedia.org/wiki/Help:Special_page -s | grep -oP 'Special:\K[a-zA-Z0-9]*' > special_page_names
sort -u special_page_names

为什么 sort -u 只删除管道中的重复项?
即,为什么在常规文件上运行时不删除重复项?

sort deduplication
  • 1 1 个回答
  • 41 Views

1 个回答

  • Voted
  1. Best Answer
    Kamil Maciorowski
    2022-03-13T08:45:08+08:002022-03-13T08:45:08+08:00

    sort是一个过滤器。它读取输入,以某种方式修改数据并打印输出。grep也是一个过滤器。

    通常,过滤器通过读取其标准输入并写入其标准输出来工作。

    如果… | grep … | sort -u > special_page_names标准输入sortfrom fromgrep和标准输出sortgo to special_page_names。|您通过使用between grepandsort和> special_page_names在末尾使用来请求此操作。

    语法sort -u special_page_names告诉工具忽略其标准输入(在您的交互式 shell 中,这是终端,标准输入从 shell 继承)并改为读取special_page_names。标准输出不重定向;它是从 shell 继承的标准输出,通常是终端,在你的情况下是终端。special_page_names 数据从你的终端飞来。

    如果要将 的输出保存sort -u special_page_names到常规文件,那么一种方法是重定向 的输出sort,就像在第一种情况下一样。不要重定向回special_page_names虽然;选择另一个文件。

    sort -u special_page_names > special_page_names_sorted
    

    有一些工具可以修改他们读取的文件(例如文本编辑器)。有一些过滤器可以选择覆盖他们读取的文件(例如sed -i)。您可以通过将文件指定为选项参数-o和操作数来对同一文件进行排序写入:

    sort -u -o special_page_names special_page_names
    
    • 1

相关问题

  • 使用单个命令行命令,我将如何搜索数据库中的每个文本文件以找到 10 个最常用的单词?

  • 数字排序无法正确排序文件

  • 如何对文件中每个日期的行数进行排序?

  • 列出根据特定内容行排序的文件

  • 读取带有单词的文本文件及其出现次数和排序的打印输出

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve