主页 / unix / 问题 / 533508
Accepted
Aditya369
Asked: 2019-08-02 23:33:36 +0800 CST

如何仅检索特定的 cpu、内存和接口统计信息

  • 772

需要仅收集特定的统计信息，例如 %idle、memfree、available、pmemused 等。我还必须将输出转换为 json 字符串并使用它。

是否有任何 UNIX 工具可以做到这一点？

我尝试了 sar 和 sadf 的组合，但我得到了一个我不需要的复杂 json 格式。

/usr/bin/sar -r 1 1 -o tmp1 &> 1;
/usr/bin/sadf tmp1 -j --iface=eth1 -- -u -r -n DEV

我得到这个输出：

{
    "sysstat": {
        "hosts": [{
            "nodename": "ESDNAS1",
            "sysname": "Linux",
            "release": "4.4.143-94.47-default",
            "machine": "x86_64",
            "number-of-cpus": 8,
            "file-date": "2019-08-02",
            "file-utc-time": "04:53:09",
            "statistics": [{
                "timestamp": {
                    "date": "2019-08-02",
                    "time": "04:53:10",
                    "utc": 1,
                    "interval": 1
                },
                "cpu-load": [{
                    "cpu": "all",
                    "user": 0.25,
                    "nice": 0.00,
                    "system": 1.00,
                    "iowait": 0.00,
                    "steal": 0.00,
                    "idle": 98.75
                }],
                "memory": {
                    "memfree": 3707764,
                    "avail": 12451860,
                    "memused": 12013448,
                    "memused-percent": 45.01,
                    "buffers": 225176,
                    "cached": 4361204,
                    "commit": 28665304,
                    "commit-percent": 107.41,
                    "active": 13473076,
                    "inactive": 1535816,
                    "dirty": 616
                },
                "network": {
                    "net-dev": [{
                        "iface": "eth1",
                        "rxpck": 1.00,
                        "txpck": 1.00,
                        "rxkB": 0.11,
                        "txkB": 0.00,
                        "rxcmp": 0.00,
                        "txcmp": 0.00,
                        "rxmcst": 0.00,
                        "ifutil-percent": 0.00
                    }]
                }
            }],
            "restarts": []
        }]
    }
}

我正在寻找这样的东西（或关闭一个很简单的东西）：

{
  "sysstat": {
    "hosts": [
      {
        "nodename": "HOSTNAME",
        "statistics": [
          {
            "timestamp": {
              "date": "2019-08-02",
              "time": "04:53:10"
            },
            "cpu-load": [
              {
                "idle": 98.75
              }
            ],
            "memory": {
              "memfree": 3707764,
              "avail": 12451860,
              "memused-percent": 45.01
            },
            "network": {
              "net-dev": [
                {
                  "iface": "eth1",
                  "rxpck": 1,
                  "txpck": 1,
                  "ifutil-percent": 0
                }
              ]
            }
          }
        ],
        "restarts": []
      }
    ]
  }
}
json statistics

3 个回答

  1. 您可以在 python 中使用psutil并创建自定义的 json。

    psutil（python 系统和进程实用程序）是一个跨平台库，用于在 Python 中检索有关正在运行的进程和系统利用率（CPU、内存、磁盘、网络、传感器）的信息。它主要用于系统监控、分析、限制进程资源和管理正在运行的进程。它实现了 UNIX 命令行工具提供的许多功能，例如：ps、top、lsof、netstat、ifconfig、who、df、kill、free、nice、ionice、iostat、iotop、uptime、pidof、tty、taskset、pmap。

    例子：

    import json
import psutil
def used_mem(json_key):
        mem_total = psutil.virtual_memory().total
        mem_percent = psutil.virtual_memory().percent
        mem_used = psutil.virtual_memory().used
        mem_free = psutil.virtual_memory().free
        swap_percent =  psutil.swap_memory().percent
        swap_total =  psutil.swap_memory().total
        swap_used =  psutil.swap_memory().used
        json_key['free_mem'] = mem_free
        json_key['total_mem'] = mem_total
        json_key['mem_used'] = mem_used
        json_key['percent_mem'] = mem_percent
        json_key['swap_percent'] =  swap_percent
        json_key['swap_total'] =  swap_total
        json_key['swap_used'] =  swap_used

json_key={}
used_mem(json_key)
print json.dumps(json_key)

    输出：

    {"swap_used": 14061568, "percent_mem": 48.3, "free_mem": 1792401408, "total_mem": 12447776768, "mem_used": 5128196096, "swap_total": 11999899648, "swap_percent": 0.1}

    有用的链接： https ://github.com/giampaolo/psutil

    • 3
  2. Best Answer

    我认为jq是首选工具。

    jq就像sedJSON 数据一样 - 您可以使用它来切片、过滤、映射和转换结构化数据，就像 ,sed和朋友让您玩文本一样容易。awkgrep

    jq可以在 Github https://stedolan.github.io/jq/tutorial/找到一个精彩的教程，这里有一个很好的教程：https ://programminghistorian.org/en/lessons/json-and-jq 。

    例如，要进入“memfree”部分，将命令的输出通过管道输出jq如下：

    ... | jq .[].hosts[].statistics[].memory.memfree

    这使：

    3707764

    或者，要在 JSON 中获取整个内存部分：

    ... | | jq .[].hosts[].statistics[].memory

    这使：

    {
  "memfree": 3707764,
  "avail": 12451860,
  "memused": 12013448,
  "memused-percent": 45.01,
  "buffers": 225176,
  "cached": 4361204,
  "commit": 28665304,
  "commit-percent": 107.41,
  "active": 13473076,
  "inactive": 1535816,
  "dirty": 616
}
    • 1

  3. jq如果您无法调整原始命令 (sar或sadf) 以按预期生成 JSON，请使用 JSON 解析器执行此操作，如下所示

    jq '.sysstat.hosts[] |= { nodename, statistics : [ { timestamp : .statistics[].timestamp | { date, time }, 
    "cpu-load": .statistics[]."cpu-load"[] | [{ idle }], 
    "memory": .statistics[].memory | { memfree, avail, "memused-percent" }, 
    "network" : { "net-dev" : .statistics[].network."net-dev"[] | { iface, rxpck, txpck, "ifutil-percent"} } } ] , restarts}'

    您可以在 jq-1.6 上的 jq-playground 中看到此过滤器

    • 1

相关问题