AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 740488
Accepted
Vinod Kumar
Vinod Kumar
Asked: 2023-03-21 22:13:58 +0800 CST2023-03-21 22:13:58 +0800 CST 2023-03-21 22:13:58 +0800 CST

使用“sed”在 TSV 文件中的字段末尾插入文本

  • 772

我想使用sed带有通配符表达式的命令在 TSV 文件中插入字符:

我有一个这样的文件:

Marker  Pvalue  Trait   Chr Pos
S3_16887238 6.172847e-09    Total_Soil_S    3   16887238
S3_16887238 6.172847e-09    Total_Soil_Pa   3   16887238
S3_16887238 6.172847e-09    Total_Soil_Cl   3   16887238

我想_All在第三列的所有文本末尾添加如下内容:

Marker  Pvalue  Trait   Chr Pos
S3_16887238 6.172847e-09    Total_Soil_S_All    3   16887238
S3_16887238 6.172847e-09    Total_Soil_Pa_All   3   16887238
S3_16887238 6.172847e-09    Total_Soil_Cl_All   3   16887238

我正在使用此命令但它不起作用:

sed -i 's/Total_Soil_\(.*\)/&_\1_All/g' top1.txt

这只是一个示例文件,除了S, Pa, 和Cl.

text-processing
  • 3 3 个回答
  • 60 Views

3 个回答

  • Voted
  1. Best Answer
    Kusalananda
    2023-03-21T22:27:05+08:002023-03-21T22:27:05+08:00

    我会避免处理表格数据,sed因为很难正确定位要修改的数据中的确切位置。该sed实用程序更适合处理文本等非结构化数据。


    使用Miller(mlr一种专门用于处理结构化数据的工具)将字符串附加到每个 TSV 记录字段_All中数据的末尾:Trait

    $ mlr --tsv put '$Trait .= "_All"' file
    Marker  Pvalue  Trait   Chr     Pos
    S3_16887238     6.172847e-09    Total_Soil_S_All        3       16887238
    S3_16887238     6.172847e-09    Total_Soil_Pa_All       3       16887238
    S3_16887238     6.172847e-09    Total_Soil_Cl_All       3       16887238
    

    mlr与其选项一起使用-I以就地进行更改。

    您是否需要确保仅当字段以字符串开头时才修改该字段Total_Soil,然后使用

    mlr --tsv put '$Trait =~ "^Total_Soil" { $Trait .= "_All" }' file
    

    使用awk,将字符串附加_All到每条记录的第三个制表符分隔字段中的数据末尾:

    $ awk -F '\t' 'BEGIN { OFS=FS } NR > 1 { $3 = $3 "_All" }; 1' file
    Marker  Pvalue  Trait       Chr     Pos
    S3_16887238     6.172847e-09    Total_Soil_S_All        3       16887238
    S3_16887238     6.172847e-09    Total_Soil_Pa_All       3       16887238
    S3_16887238     6.172847e-09    Total_Soil_Cl_All       3       16887238
    

    1代码末尾的尾随awk导致无条件输出修改后的记录。在某种程度上,它是一种速记方式{ print }。请注意,我们明确需要避免修改标头。我们通过仅在测试计算结果为真(是当前记录的序号)时测试使用NR > 1和修改字段来执行此操作。NR

    将输出重定向到新文件,然后将新文件重命名为原始名称。或者,如果您使用的是 GNU awk,请-i inplace按照另一个问题+答案中的说明使用。

    同样,如果您需要确保只修改以 string 开头的第 3 个字段Total_Soil,则使用

    awk -F '\t' 'BEGIN { OFS=FS } NR > 1 && $3 ~ /^Total_Soil/ { $3 = $3 "_All" }; 1' file
    

    以几乎相同的方式使用 Perl awk:

    $ perl -F'\t' -e 'BEGIN { $" = "\t" } if ($. > 1) { $F[2] .= "_All" } print "@F"' file
    Marker  Pvalue  Trait   Chr     Pos
    S3_16887238     6.172847e-09    Total_Soil_S_All        3       16887238
    S3_16887238     6.172847e-09    Total_Soil_Pa_All       3       16887238
    S3_16887238     6.172847e-09    Total_Soil_Cl_All       3       16887238
    

    确保我们只修改Total_Soil数据:

    perl -F'\t' -e 'BEGIN { $" = "\t" } if ($. > 1 && $F[2] =~ /^Total_Soil/) { $F[2] .= "_All" } print "@F"' file
    
    • 4
  2. jubilatious1
    2023-03-22T02:33:00+08:002023-03-22T02:33:00+08:00

    使用Raku(以前称为 Perl_6)

    ~$ raku -ne 'BEGIN put get; my @a = .split("\t"); @a.[2] = @a.[2] ~ "_All"; put @a.join("\t");' file
    

    Raku 是 Perl 编程语言家族的一员。Raku 的一个优势是对内置 Unicode 的高级支持,不需要外部库(或特殊标志)。

    以上是@Kusalananda 出色的 Perl(5) 答案的相当直接的翻译。-ne使用Raku 的非自动打印“linewise”命令行标志。要逐字打印标题行,请使用将(print-using-terminator) 放在第一行的BEGIN移相器。put getget

    linewise 命令的主体是这样工作的:声明一个数组并为其分配标签上的my @a输入行[是 ] 的缩写。$_.split("\t").split("\t")$_.split("\t")

    取@a.[2]第三个元素(即列)并用相同的元素覆盖它,并@a.[2] ~ "_All"用尾随_All字符串连接波浪号。

    然后取出所有@a元素,join在选项卡上重新组合在一起,然后 out put。

    示例输入:

    Marker  Pvalue  Trait   Chr Pos
    S3_16887238 6.172847e-09    Total_Soil_S    3   16887238
    S3_16887238 6.172847e-09    Total_Soil_Pa   3   16887238
    S3_16887238 6.172847e-09    Total_Soil_Cl   3   16887238
    

    示例输出:

    Marker  Pvalue  Trait   Chr Pos
    S3_16887238 6.172847e-09    Total_Soil_S_All    3   16887238
    S3_16887238 6.172847e-09    Total_Soil_Pa_All   3   16887238
    S3_16887238 6.172847e-09    Total_Soil_Cl_All   3   16887238
    

    https://docs.raku.org
    https://raku.org

    • 0
  3. Oliver Knodel
    2023-03-22T03:48:38+08:002023-03-22T03:48:38+08:00

    使用 sed 你可以:

    sed 's/Total_Soil_[^[:blank:]]*/&_All/' top1.txt
    

    要内联,添加一个-iafter sed

    编辑:替换[^ ]为[^[:blank:]]以匹配除Spaces和Tabs之外的所有内容。

    • 0

相关问题

  • grep 从 $START 到 $END 的一组行并且在 $MIDDLE 中包含匹配项

  • 重新排列字母并比较两个单词

  • 在awk中的两行之间减去相同的列

  • 多行文件洗牌

  • 如何更改字符大小写(从小到大,反之亦然)?同时[重复]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve