AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 543541
Accepted
argentum2f
argentum2f
Asked: 2019-09-25 14:45:54 +0800 CST2019-09-25 14:45:54 +0800 CST 2019-09-25 14:45:54 +0800 CST

是否有海绵的标准替代品将文件通过管道传输到自身?

  • 772

我经常想做这样的事情:

 cat file | command > file

(这显然不起作用)。我看到的唯一解决方案是sponge,即

 cat file | command | sponge file

不幸的是,sponge我无法使用(我也无法安装它或任何其他软件包)。

有没有更标准的快速方法来做到这一点,而不必每次都将其分解为多个命令(管道到临时文件,管道返回原始文件,删除临时文件)?例如,我尝试过tee,它似乎有效,但它是一致/安全的解决方案吗?

pipe
  • 3 3 个回答
  • 2313 Views

3 个回答

  • Voted
  1. Best Answer
    Kusalananda
    2020-01-11T00:05:34+08:002020-01-11T00:05:34+08:00

    一个shell函数替换sponge:

    mysponge () (
        append=false
    
        while getopts 'a' opt; do
            case $opt in
                a) append=true ;;
                *) echo error; exit 1
            esac
        done
        shift "$(( OPTIND - 1 ))"
    
        outfile=$1
    
        tmpfile=$(mktemp "$(dirname "$outfile")/tmp-sponge.XXXXXXXX") &&
        cat >"$tmpfile" &&
        if "$append"; then
            cat "$tmpfile" >>"$outfile"
        else
            if [ -f "$outfile" ]; then
                chmod --reference="$outfile" "$tmpfile"
            fi
            if [ -f "$outfile" ]; then
                mv "$tmpfile" "$outfile"
            elif [ -n "$outfile" ] && [ ! -e "$outfile" ]; then
                cat "$tmpfile" >"$outfile"
            else
                cat "$tmpfile"
            fi
        fi &&
        rm -f "$tmpfile"
    )
    

    这个myspongeshell 函数将标准输入上的所有可用数据传递到一个临时文件。

    当所有数据都被重定向到临时文件时,收集的数据被复制到函数参数命名的文件中。如果不将数据附加到文件中(即-a不使用),并且如果给定的输出文件名引用现有的常规文件,如果它不存在,则使用mv(如果文件是现有的常规文件,首先尝试使用 GNU 将文件模式转移到临时文件chmod)。如果输出不是常规文件(命名管道、标准输出等),则数据以cat.

    如果命令行上没有给出文件,则收集的数据将发送到标准输出。

    最后,临时文件被删除。

    函数中的每一步都依赖于上一步的成功完成。如果一个命令失败(它可能包含重要数据),则不会尝试删除临时文件。

    如果命名的文件不存在,那么它将使用用户的默认权限等创建,并将来自标准输入的数据写入其中。

    该mktemp实用程序不是标准的,但通常可用。

    上述函数模仿了 Debian 软件包手册中描述的行为。spongemoreutils


    使用tee代替sponge将不是一个可行的选择。你说你已经尝试过了,它似乎对你有用。它可能有效,也可能无效。它依赖于管道中命令的启动时间(它们几乎是同时启动的),以及输入数据文件的大小。

    以下是一个示例,显示了 usingtee不起作用的情况。

    原始文件是 200000 字节,但在管道之后,它被截断为 32 KiB(这很可能对应于我系统上的一些缓冲区大小)。

    $ yes | head -n 100000 >hello
    $ ls -l hello
    -rw-r--r--  1 kk  wheel  200000 Jan 10 09:45 hello
    
    $ cat hello | tee hello >/dev/null
    $ ls -l hello
    -rw-r--r--  1 kk  wheel  32768 Jan 10 09:46 hello
    
    • 8
  2. marinara
    2020-01-10T22:58:23+08:002020-01-10T22:58:23+08:00

    有这个简短的 bash 脚本,需要 Perl
    https://github.com/ildar-shaimordanov/perl-utils#sponge

    第二个脚本应该是 moreutils 中版本的直接替换

    还有一个版本是独立的 perl 脚本。

    • 0
  3. ipatev_nn
    2020-01-11T01:42:01+08:002020-01-11T01:42:01+08:00
    function wf() {
        #create a temporary file
        local tmpf="${1}_$(< /dev/urandom tr -dc A-Za-z0-9 | head -c16)"
        #redirect the result
        cat > $tmpf
        #replace the original file
        mv -f $tmpf "${1}"
    }
    

    接下来我们使用函数

    grep "error" messages.log | wf messages.log
    
    • 0

相关问题

  • 如何在 bash 中使用“sudo”调用时将“yes”或“y”通过管道传输到程序中?

  • 将句柄传递给标准输入下行管道

  • 如何通过管道传输 bash 命令并保持 Ctrl+C 正常工作?

  • 为什么管道`mysql`到'tail'会改变输出格式?

  • `tee` 和 `bash` 进程替换顺序

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve