AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 485271
Accepted
MatrixManAtYrService
MatrixManAtYrService
Asked: 2018-12-01 14:37:53 +0800 CST2018-12-01 14:37:53 +0800 CST 2018-12-01 14:37:53 +0800 CST

单个管道入口是否可以查看整个管道?

  • 772

我有一个func可以生成表格输出或 json 输出的 tion。我知道处理这个问题的常规方法是使用这样的参数:

$ func -j | jq .firstField
$ func -t | awk '{print $1}'

我想“向前看”并根据管道中的下一阶段推断输出类型。理想的用法很简单:

$ func | jq .firstField
$ func | awk '{print $1}'

我想象在 func 的某个地方,我会检查管道中下一阶段的第 0 个参数,看看它是否包含一个j. 如果是这样,我会生成 json,否则会生成表格。

bash 允许这样的巫术吗?如果是这样,怎么做?

bash
  • 2 2 个回答
  • 191 Views

2 个回答

  • Voted
  1. Best Answer
    thrig
    2018-12-06T12:31:25+08:002018-12-06T12:31:25+08:00

    没有与管道关联的正式元数据或查询 API,除了可以通过流程工具从流程树中抢救出来的内容,或者/proc如果存在的话,可以从类型文件系统中挖掘出来。父 shell 将(可能)在内存中的某个地方拥有完整的管道,并且将知道所涉及的各种子进程,尽管同样没有 API 可以让任意cat的(毫无意义,除了作为示例)管道cat | cat | cat | ...知道cat它在那个管道,因此它的同行是谁。

    % cat | cat -b | cat -e | cat -n
    

    更有用,因为有了独特的标志,人类将更容易分辨哪个是哪个;pstree(1)例如在另一个终端可能会显示

     |     \-+= 35276 jhqdoe -zsh (zsh)
     |       |--- 44661 jhqdoe cat -n
     |       |--- 03968 jhqdoe cat -b
     |       |--- 96165 jhqdoe cat -e
     |       \--= 26975 jhqdoe cat
    

    但这不会告诉我们cat -e管道到cat -n,只告诉我们猫袋都属于父 shell 35276 的进程组。

    % ps ao ppid,pid,command | grep '[ ]cat'
    35276 44661 cat -n
    35276 96165 cat -e
    35276  3968 cat -b
    35276 26975 cat
    

    如果您所在的系统有/proc或命令检查 pid 的哪些管道或描述符连接到什么,您可能能够弄清楚什么连接到进程所属的进程组中的什么。例如,在 linux 上lsof运行类似的 cat 管道时,可以链接cat -e和命令,因为它们共享管道 14301040:cat -n

    -bash-4.2$ lsof -p 23591 | grep pipe
    cat     23591 jhqdoe    0r  FIFO    0,9       0t0 14301039 pipe
    cat     23591 jhqdoe    1w  FIFO    0,9       0t0 14301040 pipe
    -bash-4.2$ lsof -p 23592 | grep pipe
    cat     23592 jhqdoe    0r  FIFO    0,9       0t0 14301040 pipe
    

    因此,虽然这些信息可能可用,但可能需要大量挖掘和使用不可移植的工具进行重建才能弄清楚。

    父 shell 可能会提供一种在输入管道后重写管道的方法,尽管 ZSH 挂钩函数preexec似乎没有提供任何重写要运行的命令的方法。(这样的功能可能类似于 LISP 宏让程序员重新编写代码的方式。)父 shell 也可能提供某种 API 子进程可用于检查管道......但是这些类型的添加需要编写进入外壳。

    然而,可以构建一个复杂的管道:

    func | ( cd ... && ... | ( ... | awk ... ) )
    

    在这种情况下,您func要么无法找到awk并做出(可能)错误的反应,要么您的流程管道搜索功能需要递归遍历下一个管道元素的所有命令,在这种情况下,它awk可能func与飞。或者你可能忘记你设置了这个行为并且awk可能被错误地修改,这可能会导致难以发现的错误......

    • 4
  2. MatrixManAtYrService
    2019-01-19T11:03:21+08:002019-01-19T11:03:21+08:00

    我已经能够做到这一点,至少在 Linux 上是这样。这是一个演示它的脚本:https ://gist.github.com/MatrixManAtYrService/790a4a058bc841b0ceb2eb0263fb5d88

    示例用法:

    ❯ cat -b | ./luigi | jq .
    [
      {
        "pid": "20832",
        "name": "cat -b",
        "node": {
          "write": "5157339",
          "read": null
        }
      },
      {
        "pid": "20833",
        "name": "bash ./luigi",
        "node": {
          "write": "5157341",
          "read": "5157339"
        }
      },
      {
        "pid": "20834",
        "name": "jq .",
        "node": {
          "write": null,
          "read": "5157341"
        }
      }
    ]
    
    • 1

相关问题

  • 通过命令的标准输出以编程方式导出环境变量[重复]

  • 从文本文件传递变量的奇怪问题

  • 虽然行读取保持转义空间?

  • `tee` 和 `bash` 进程替换顺序

  • 运行一个非常慢的脚本直到它成功

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    ssh 无法协商:“找不到匹配的密码”,正在拒绝 cbc

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    如何卸载内核模块“nvidia-drm”?

    • 13 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Wong Jia Hau ssh-add 返回:“连接代理时出错:没有这样的文件或目录” 2018-08-24 23:28:13 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST
  • Martin Hope
    Bagas Sanjaya 为什么 Linux 使用 LF 作为换行符? 2017-12-20 05:48:21 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve