AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 498133
Accepted
Brad Parks
Brad Parks
Asked: 2019-02-02 05:39:50 +0800 CST2019-02-02 05:39:50 +0800 CST 2019-02-02 05:39:50 +0800 CST

Bash - 从任意文本中按名称提取键值?

  • 772

我想要一个简单的脚本,让我可以将任何文本传递给它,并从字符串中提取一个键的值。

我希望它灵活,并接受 XML 或 JSON 输入,甚至是格式不正确的输入,例如日志中的文本。

例如,给定以下任何输入,它应该能够提取test键的值。

例如

$ echo "test:5 hi there" | extract_key_value test

应该导致

5

请注意,我不在乎它是用什么写的,所以 node、ruby 等对我来说很好,但是可移植性(Linux/osx)很好;-)

输入1

this is test:5 i saw a value

输入2

this is test:'another value' i saw a value

输入3

this is test=5 i saw a value

输入4

test='a string value here'

输入5

my data
on line 2 test='a string value here'
more data

我对此的快速破解如下,我觉得可以大大改进,感觉应该在某个地方解决!

提取键值

#!/usr/bin/env bash

function show_help()
{
  IT=$(cat <<EOF
  
  Helps you extract a key value from a string, typically a log msg

  usage: key {keyBeginDelim} {keyEndDelim}

  e.g. given "asd f asdf asdf test=easy asdf me=you" as input

  extract_key_value test        
  => returns easy
EOF
)
  echo "$IT"
  exit
}

if [ "$1" == "help" ]
then
  show_help
fi
if [ -z "$1" ]
then
  show_help
fi

INPUT=$(cat -)
KEY="$1"

function getVal()
{
  DELIM1="$1"
  DELIM2="$2"
  echo "$INPUT" | awk -F "$DELIM1" '{print $2}' | awk -F "$DELIM2" '{print $1}'
}

# Try whatever the user passed in or defaults for delims
if [ -n "$2" ]
then
  IT=$(getVal "$2" "$3")
fi

# Try other use cases
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY:'" "'")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY='" "'")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY=\"" "\"")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY:\"" "\"")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY:" " ")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY=" " ")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY=" ";")
fi
if [ -z "$IT" ]
then
  IT=$(getVal "$KEY:" ";")
fi

echo "$IT"
bash
  • 2 2 个回答
  • 546 Views

2 个回答

  • Voted
  1. Best Answer
    Stéphane Chazelas
    2019-02-02T06:23:12+08:002019-02-02T06:23:12+08:00

    与pcregrep:

    extract_key_value() {
      pcregrep -Mo1 "(?sx)
       (?:
           \Q$1\E      # key literally
         | \"\Q$1\E\"  # same in double quotes
         | '\Q$1\E'    # same in single quotes
       )
       [=:]
       (?|  # branch reset
           '(.*?)'
         | \"(.*?)\"
         | ([^\"'\s]+)
       )"
    }
    
    • -M: 多行匹配(允许test:'foo\nbar'...)
    • -o1:输出与第一个捕获组匹配的文本(见下文关于分支重置)。
    • (?sx):启用s标志(也.匹配换行符)和x标志(允许带有注释格式的多行)
    • \Q$1\E(函数的第一个参数)的内容$1应按字面意思理解。假设它不包含\E自身。在类似 ksh93 的 shellbash中,您可以替换$1为${1//\\E/\\E\\\\E\\Q}来解决这个问题。
    • (?|.(.).|.(.).)分支重置。捕获组的编号在 each 之后从 1 开始|,因此-o1将返回在任何交替中匹配的第一个捕获组。
    • '.*?'. .*?是 的非贪婪变体.*,因此'.*'将匹配之后'的第一个'。
    • \s: 任何空白字符。

    这并没有尝试解决像\xjson 中的编码这样的极端情况,在引号中嵌入引号(根据语言的不同,这样做的方式不同)。它不允许在:or的任何一侧有空格=。如果需要,所有这些都可以解决。这将取决于您尝试处理的确切输入的类型。

    • 4
  2. Thiago Luís
    2019-02-02T06:55:41+08:002019-02-02T06:55:41+08:00

    使用 grep 的示例:

    function extract_key_value() {
        egrep -o "$1[:=]['\"[:alnum:]]+" | egrep -o "['\"[:alnum:]]+$" | egrep -o "[[:alnum:]]+"
    }
    
    echo -e "on line 1\ntest:123 asasas\non line 3\ntest='abc'\non line 5" | extract_key_value test
    
    • 3

相关问题

  • 通过命令的标准输出以编程方式导出环境变量[重复]

  • 从文本文件传递变量的奇怪问题

  • 虽然行读取保持转义空间?

  • `tee` 和 `bash` 进程替换顺序

  • 运行一个非常慢的脚本直到它成功

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve