AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 559304
Accepted
PoC
PoC
Asked: 2019-12-29 09:59:10 +0800 CST2019-12-29 09:59:10 +0800 CST 2019-12-29 09:59:10 +0800 CST

一次处理一项任务

  • 772

我习惯了具有灵活排队配置可能性的 IBM i (AS/400) 批处理。我正在寻找类似的 Linux 批处理工具。

最重要的是一次从队列中取出一项作业并执行。之后,将扫描队列以查找更多条目。如果有的话,下一个任务将被取出来运行。

at -b相对接近,但如果一个作业占用的资源太少以至于负载保持下降,更多的任务会并行执行,这是不希望的。

Run-p​​arts 将是另一种选择,但它的行为过于静态,并且不会作为守护进程运行以在给定队列中查找新条目。我可以将其作为常规 cron 作业运行,但我需要自己处理要从队列中删除的作业。

我是否必须编写自己的代码或扩展 at 才能实现所需的功能,或者是否有可用的替代批处理排队机制?

batch-jobs
  • 2 2 个回答
  • 890 Views

2 个回答

  • Voted
  1. Abdurrahim
    2019-12-29T11:26:41+08:002019-12-29T11:26:41+08:00

    你可以使用 bash 来做到这一点:

    1- 使用 mkfifo 创建 fifo(你也可以创建文件)

    mkfifo mybuff
    

    2-尾随fifo并将每一行传递给您的执行程序(这将是一种任务服务器)

    while IFS= read -r line
    do
      echo "Running: '$line' with bash"
      bash -c "$line"
      echo "Finished '$line' with exit code: $?"
    done < <(tail -f mybuff)
    

    3-例如将您的命令发送到队列(这将客户端请求任务)

    echo 'sleep 10' >> mybuff
    echo 'echo "hello world"' >> mybuff
    echo 'my fancy command to be executed' >> mybuff
    ...
    

    PS:您可以像下面的示例一样简化第 2 步,但是当您将“exit”发送到命令缓冲区时,这将完成任务侦听器

    tail -f mybuff | bash -x
    
    • 4
  2. Best Answer
    rudib
    2019-12-30T12:12:46+08:002019-12-30T12:12:46+08:00

    ts - task spooler. A simple unix batch system应该完成任务。它运行一个任务后台处理程序/队列服务器,您可以使用一个简单的命令添加一个新任务,例如:

    tsp yourcommand
    

    您可以指定槽数 - 也就是一次应该执行多少个作业。默认情况下,这设置为一个,AFAIK。它还具有一些高级功能,例如仅在某个先前的命令成功时才运行命令。您还可以查看每个作业的队列和详细信息。您可以在手册页中找到更多详细信息。

    • 3

相关问题

  • 如何批量启动后台任务?

  • 单台机器上多个单核作业的类似队列行为?[复制]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve