AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / coding / 问题 / 79315592
Accepted
Roger Costello
Roger Costello
Asked: 2024-12-29 20:32:54 +0800 CST2024-12-29 20:32:54 +0800 CST 2024-12-29 20:32:54 +0800 CST

如何在多个文件的第一行打印唯一的字段名称?

  • 772

每个文件的第一行包含字段名称。字段名称中可能存在重复。我只想打印唯一的字段名称。以下是我尝试的:

在 Bash 文件 files_and_folders.sh 中,我输入了以下内容:

#!/bin/bash
for file in **/*.TXT ; do
   awk 'NR == 1 { for (i=1; i<=NF; i++) if (!seen[$i]) seen[$i] = 1} END { for (idx in seen) printf ("%s\n",idx) }' "${file}"
done

Bash 文件成功运行,但输出包含重复项:

AB_CODE
ACFT_CODE
AC_TYPE
ADD_INFO
AKA
ALT
ALT
ALT
ALT
ALT
ALT
ALT
ALT1_DESC
ALT2_DESC
ALT3_DESC

如何修改 AWK 程序(在 Bash 脚本中)以消除重复?

bash
  • 2 2 个回答
  • 47 Views

2 个回答

  • Voted
  1. Ed Morton
    2024-12-30T08:14:34+08:002024-12-30T08:14:34+08:00

    最有效的做法可能是:

    head -q -n 1 **/*.TXT | tr -s '[:space:]' $'\n' | sort -fu
    

    但是如果您想使用 awk,那么使用任何 awk 您都可以执行以下操作:

    awk '
        FNR == 1 {
            for ( i=1; i<=NF; i++ ) {
                names[$i]
            }
            nextfile
        }
        END {
            for ( name in names ) {
                print name
            }
        }
    ' **/*.TXT
    

    或这样:

    awk '
        FNR == 1 {
            for ( i=1; i<=NF; i++ ) {
                if ( !seen[$i]++ ) {
                    print $i
                }
            }
            nextfile
        }
    ' **/*.TXT
    

    但是在部分中创建一个seen[]数组并循环遍历它END是没有意义的,也没有意义if (!seen[$i]) seen[$i] = 1——那就是测试是否seen[$i]设置了,如果没有,则设置它,以便该语句的结果始终seen[$i]设置为1。

    • 3
  2. Best Answer
    anubhava
    2024-12-29T21:21:28+08:002024-12-29T21:21:28+08:00

    您不能运行循环bash并为每个文件运行一个新awk进程,否则关联数组seen将为每个文件初始化awk,并且它将不知道以前调用设置的现有条目awk。

    你应该像这样一次性完成它awk:

    awk 'FNR == 1 {
       for (i=1; i<=NF; ++i) {
          uniques[$i]
       }
    }
    END {
       for (i in uniques)
          print i
    }' **/*.TXT
    
    AC_TYPE
    AKA
    ALT
    ADD_INFO
    AB_CODE
    ALT1_DESC
    ALT2_DESC
    ALT3_DESC
    ACFT_CODE
    
    • 2

相关问题

  • (macOS Bash) 2个看似相同的字符串并不相等,仅通过“set -x”显示差异

  • Xargs:尽管扩展了别名,但别名替换仍失败

  • Linux 环境中 $PATH 和 ${PATH:+:${PATH}} 的区别

  • awk 查找并替换为正则表达式和环境变量

  • 如何在 bash 中对任意长度的编号、分隔字母数字字符串的文件名进行零填充?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    Vue 3:创建时出错“预期标识符但发现‘导入’”[重复]

    • 1 个回答
  • Marko Smith

    为什么这个简单而小的 Java 代码在所有 Graal JVM 上的运行速度都快 30 倍,但在任何 Oracle JVM 上却不行?

    • 1 个回答
  • Marko Smith

    具有指定基础类型但没有枚举器的“枚举类”的用途是什么?

    • 1 个回答
  • Marko Smith

    如何修复未手动导入的模块的 MODULE_NOT_FOUND 错误?

    • 6 个回答
  • Marko Smith

    `(表达式,左值) = 右值` 在 C 或 C++ 中是有效的赋值吗?为什么有些编译器会接受/拒绝它?

    • 3 个回答
  • Marko Smith

    何时应使用 std::inplace_vector 而不是 std::vector?

    • 3 个回答
  • Marko Smith

    在 C++ 中,一个不执行任何操作的空程序需要 204KB 的堆,但在 C 中则不需要

    • 1 个回答
  • Marko Smith

    PowerBI 目前与 BigQuery 不兼容:Simba 驱动程序与 Windows 更新有关

    • 2 个回答
  • Marko Smith

    AdMob:MobileAds.initialize() - 对于某些设备,“java.lang.Integer 无法转换为 java.lang.String”

    • 1 个回答
  • Marko Smith

    我正在尝试仅使用海龟随机和数学模块来制作吃豆人游戏

    • 1 个回答
  • Martin Hope
    Aleksandr Dubinsky 为什么 InetAddress 上的 switch 模式匹配会失败,并出现“未涵盖所有可能的输入值”? 2024-12-23 06:56:21 +0800 CST
  • Martin Hope
    Phillip Borge 为什么这个简单而小的 Java 代码在所有 Graal JVM 上的运行速度都快 30 倍,但在任何 Oracle JVM 上却不行? 2024-12-12 20:46:46 +0800 CST
  • Martin Hope
    Oodini 具有指定基础类型但没有枚举器的“枚举类”的用途是什么? 2024-12-12 06:27:11 +0800 CST
  • Martin Hope
    sleeptightAnsiC `(表达式,左值) = 右值` 在 C 或 C++ 中是有效的赋值吗?为什么有些编译器会接受/拒绝它? 2024-11-09 07:18:53 +0800 CST
  • Martin Hope
    The Mad Gamer 何时应使用 std::inplace_vector 而不是 std::vector? 2024-10-29 23:01:00 +0800 CST
  • Martin Hope
    Chad Feller 在 5.2 版中,bash 条件语句中的 [[ .. ]] 中的分号现在是可选的吗? 2024-10-21 05:50:33 +0800 CST
  • Martin Hope
    Wrench 为什么双破折号 (--) 会导致此 MariaDB 子句评估为 true? 2024-05-05 13:37:20 +0800 CST
  • Martin Hope
    Waket Zheng 为什么 `dict(id=1, **{'id': 2})` 有时会引发 `KeyError: 'id'` 而不是 TypeError? 2024-05-04 14:19:19 +0800 CST
  • Martin Hope
    user924 AdMob:MobileAds.initialize() - 对于某些设备,“java.lang.Integer 无法转换为 java.lang.String” 2024-03-20 03:12:31 +0800 CST
  • Martin Hope
    MarkB 为什么 GCC 生成有条件执行 SIMD 实现的代码? 2024-02-17 06:17:14 +0800 CST

热门标签

python javascript c++ c# java typescript sql reactjs html

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve