AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 700889
Accepted
Nina G
Nina G
Asked: 2022-04-30 13:04:07 +0800 CST2022-04-30 13:04:07 +0800 CST 2022-04-30 13:04:07 +0800 CST

从文件中针对列表域卷曲不起作用

  • 772

我在下面有一个 bash 脚本,旨在从文件中对域列表进行 curl 并输出结果。

#!/bin/bash
    
baseurl=https://csp.infoblox.com
domains=/home/user/Documents/domainlist
B1Dossier=/tide/api/data/threats/state/host?host=$domains
APIKey=<REDACTED>
AUTH="Authorization: Token $APIKey"
        
        
for domain in $domains; do curl -H "$AUTH" -X GET ${baseurl}${B1Dossier} > /tmp/outputfile; done

不幸的是,脚本并没有遍历文件中的每个域。

为了帮助理解,我列出了脚本的期望/解释:

  • 在文件中/home/user/Documents/domainlist,我有几个域。
  • 我正在尝试使用 API 来检查文件中的每个域,方法是$domains在末尾附加变量B1Dossier
  • 期望它会对文件中的每个域运行指定的 curl 命令,并输出结果。

为了增加可见性,我在下面包含了用于单个域的工作 curl 命令:

curl -H 'Authorization: Token <REDACTED>' -X GET https://csp.infoblox.com/tide/api/data/threats/state/host?host=<place domain here>

有人可以帮助我做错什么以及如何解决这个问题吗?

bash variable
  • 3 3 个回答
  • 300 Views

3 个回答

  • Voted
  1. Best Answer
    thanasisp
    2022-04-30T13:40:17+08:002022-04-30T13:40:17+08:00

    您可以将域从文件读取到数组并为它们循环。

    baseurl="https://csp.infoblox.com"
    B1Dossier="/tide/api/data/threats/state/host?host="
    url="${baseurl}${B1Dossier}"
    
    # read domains to an array
    mapfile -t domains < /home/user/Documents/domainlist
    
    # loop for domains
    for d in "${domains[@]}"; do
        curl -H "$AUTH" -X GET "${url}${d}" >> temp
    done
    

    笔记:

    在您的命令中,使用B1Dossierinto 循环没有任何效果,似乎您正在等待某种递归评估,因为域包含在B1Dossier并且您循环 for domain. 但是您的网址不会以这种方式在循环内更改。

    此外,您必须使用将响应附加到目标文件>>,否则每个下一个响应都会覆盖前一个响应。

    • 2
  2. Kusalananda
    2022-04-30T22:27:45+08:002022-04-30T22:27:45+08:00

    您似乎在迭代包含实际域的文件的名称,这就是为什么您的代码没有按照您希望的方式执行。您似乎也将所有内容输出到同一个文件,每次调用curl.

    curl您可以使用具有多个url设置的配置文件,而不是使用 shell 循环遍历列表。

    配置文件实际上并不需要存储在磁盘上,因此我们可以即时创建它并将其通过管道传递给curl:

    domain_list=/home/user/Documents/domainlist
    
    base_url=https://csp.infoblox.com
    endpoint=tide/api/data/threats/state/host
    
    APIKey=<REDACTED>
    auth_header="Authorization: Token $APIKey"
    
    awk -v h="$auth_header" -v b="$base_url" -v e="$endpoint" '
            BEGIN {
                    printf "header = \"%s\"\n", h
            }
            {
                    printf "url = %s/%s?host=%s\n", b, e, $0
            }' "$domain_list" |
    curl --config -
    

    这首先用于awk为域列表的每一行添加前缀

    url = https://csp.infoblox.com/tide/api/data/threats/state/host?host=
    

    然后将其用作curl要联系的 URL 列表。

    该awk代码还在配置数据的开头设置一次授权标头。无需明确指定方法。

    结果被写入标准输出,但您也可以output = somefilename在每行之前插入选项url以将结果输出到特定文件。


    相同的脚本,但可能有所简化:

    domain_list=/home/user/Documents/domainlist
    
    base_url=https://csp.infoblox.com
    endpoint=tide/api/data/threats/state/host
    
    APIKey=<REDACTED>
    auth_header="Authorization: Token $APIKey"
    
    {
        printf 'header = "%s"\n' "$auth_header"
        prefix="url = $base_url/$endpoint?host=" \
        awk '{ print ENVIRON["prefix"] $0 }' "$domain_list" 
    } | curl --config -
    
    • 1
  3. annahri
    2022-04-30T23:28:25+08:002022-04-30T23:28:25+08:00

    使用while循环:

    #!/bin/bash
        
    baseurl=https://csp.infoblox.com
    domains=/home/user/Documents/domainlist
    APIKey=<REDACTED>
    AUTH="Authorization: Token $APIKey"
    
    while read -r domain; do
        url="${baseurl}/tide/api/data/threats/state/host?host=${domain}"
        curl -H "$AUTH" -X GET "$url" >> /tmp/outputfile
    done < "$domains"
    

    循环将while逐行读取输入文件并将其分配给domain变量(由 定义read domain),在本例中为$domains。

    • 1

相关问题

  • 从文本文件传递变量的奇怪问题

  • 虽然行读取保持转义空间?

  • 如何将带有〜的路径保存到变量中?

  • `tee` 和 `bash` 进程替换顺序

  • 运行一个非常慢的脚本直到它成功

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve