AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 707263
Accepted
Sollosa
Sollosa
Asked: 2022-06-24 09:46:33 +0800 CST2022-06-24 09:46:33 +0800 CST 2022-06-24 09:46:33 +0800 CST

用循环中的变量替换特定字段中的文本

  • 772

我有一个巨大的文件要解析并需要搜索和替换文本,但在特定字段中,共享一个名为 dest 的小样本以供参考。第一行是标题供参考。

cat dest
ID|NAME|COMPANY|NUMBER
1001|Adam||15001
1002|eve|adam&eve|15002
1003|||
1004|||50000
1005|||50001

我有单独的文件,其中包含要匹配的模式、要替换的文本和要替换的文本

cat src
1003||15003
1004|50000|15004
1005|50001|15005

所以我可以使用 sed 运行下面给定的 while 循环来实现 src 文件中的最后 2 行。

cat src | while IFS=$'|'; read id old new; do sed -i "/^${id}/s/${old}/${new}/" dest; done

但是对于ID=1003我得到空字符串$old,它将替换该ID的dest文件中的所有空列。我想避免。我想要做的是只替换最后一个字段。

期望:

ID|NAME|COMPANY|NUMBER
1001|Adam||15001
1002|eve|adam&eve|15002
1003|||15003
1004|||15004
1005|||15005

当涉及到柱状数据时,我可以使用 awk,因为它更细化。但据我了解,awk 会多次打印到标准输出,这在我的情况下也不实用。

那么有没有一种方法可以让我以简洁明了的方式做到这一点?

awk sed
  • 2 2 个回答
  • 110 Views

2 个回答

  • Voted
  1. Best Answer
    αғsнιη
    2022-06-24T10:12:30+08:002022-06-24T10:12:30+08:00
    awk 'BEGIN{ FS=OFS="|" }
     NR==FNR  { id[$1, $2]=$3; next }
              { $4=( ($1, $4) in id? id[$1, $4]: $4) } 1' src dest
    
    • FS :字段分隔符

    • OFS :输出字段分隔符_

    • NR==FNR:第一个输入文件的始终为真条件习语。

      NR表示awk读取的记录总数;FNR是
      每个单独文件的记录数。

    • id[$1, $2]=$3: 关联的 awk 数组。

      名称:id
      键:column#1+column#2
      值:column#3

      第一个块仅针对第一个输入文件运行,即。e,文件src。

    在此,我们正在更新第二个文件 i$4=($1, $4) in id? id[$1, $4]: $4的最后一列($NF或)的值。$4e,从id数组中column#1+column#4的匹配键组合文件dest,如果找到则返回该值(),否则复制其当前值。id[$1, $4]

    • 3
  2. Kusalananda
    2022-06-24T22:31:13+08:002022-06-24T22:31:13+08:00

    另一种awk解决方案,它假设来自的行src将按顺序使用一次。这允许我们只跟踪下一行,src直到它被使用,然后读取下一行。

    awk -F '|' '
        BEGIN { OFS=FS }
        ! have {
            getline line <"src"
            split(line, pat)
            have = 1
        }
        $1 == pat[1] {
            if ($4 == pat[2]) $4 = pat[3]
            have = 0
        }; 1' dest
    

    如果标志have未设置或为零,则下一行 fromsrc被读入line并拆分到数组pat中。这是在! have块中完成的。

    如果当前输入行的dest第一个字段与 的第一个元素相同pat,那么我们将针对第 4 个字段进行测试,如果它们相同,则将其pat[2]替换为。pat[3]然后将该have标志重置为零以触发从 中读取新行src。

    1程序末尾的尾随awk导致(可能已修改)记录被输出。

    给定问题中的数据,输出:

    ID|NAME|COMPANY|NUMBER
    1001|Adam||15001
    1002|eve|adam&eve|15002
    1003|||15003
    1004|||15004
    1005|||15005
    
    • 1

相关问题

  • 如何改进这个字符转换脚本?

  • 如何删除两行之间的单行

  • 重新排列字母并比较两个单词

  • 多行文件洗牌

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve