问题[linux](coding)

我有一个从未轮换过的服务的日志文件。现在我想将此日志文件拆分为单独的文件，每个月一个。大多数行都以括号中的 unix 时间戳开头，但是有些日志消息跨越多行（来自 的输出dig），需要抓取。此外，多行消息后带有时间戳的下一行不一定来自同一个月。如下例所示。

1700653509 = Wed 22 Nov 12:45:09 CET 2023
1700798246 = Fri 24 Nov 04:57:26 CET 2023
1701385200 = Fri  1 Dec 00:00:00 CET 2023

[1700653509] unbound[499:0] debug: module config: "subnetcache validator iterator"
[1700798246] unbound[1506:0] info: incoming scrubbed packet: ;; ->>HEADER<<- opcode: QUERY, rcode: NOERROR, id: 0
;; flags: qr aa ; QUERY: 1, ANSWER: 1, AUTHORITY: 0, ADDITIONAL: 0
;; QUESTION SECTION:
chat.cdn.whatsapp.net.  IN      A

;; ANSWER SECTION:
chat.cdn.whatsapp.net.  60      IN      A       157.240.252.61

;; AUTHORITY SECTION:

;; ADDITIONAL SECTION:
;; MSG SIZE  rcvd: 55

[1701385200] unbound[1506:0] debug: iter_handle processing q with state QUERY RESPONSE STATE

我的第一个方法是定义最小值和最大值（一个月的第一秒和最后一秒），并检查行中的时间戳是否符合该范围。如果是，则将其写入新日志文件并继续。我需要这种方法，因为日志文件中并非存在一个月的每个第一秒或最后一秒。

像这样：

for YEAR in {2023..2024}; do
  for MONTH in {1..12}; do

# Calculate first and last second of each month
FIRST_SECOND="$(date -d "$(date +"$YEAR"/"$MONTH"/01)" "+%s")"
LAST_SECOND="$(date -d "$(date +"$YEAR"/"$MONTH"/01) + 1 month - 1 second" "+%s")"`

awk -F'[\\[\\]]' -v MIN="${FIRST_SECOND}" -v MAX="${LAST_SECOND}" '{if($2 >= MIN && $2 <= MAX) print}' unbound.log >> "unbound-$YEAR-$MONTH.log
  done;
done

然后我遇到了多行消息并遇到了障碍。

基本上，我现在需要的是某种“抓取所有匹配和不匹配的行，直到第一个值大于 MAX”。我想到获取第一个和最后一个匹配的行号，然后简单地使用它们。但是我又遇到了多行消息的相同问题。

有什么想法吗？

编辑：根据已接受的答案，我最终得到了这个。我将文件名更改为 unbound-YYYY-MM 而不是 MM-YYYY，并在关闭每个文件后对其进行 gzip 压缩。

awk '
$1 ~ /^\[[0-9]+]$/ {
  f = "unbound-" strftime("%Y-%m", substr($1, 2, length($1)-2)) ".log"
  if (f != prev) {
    if (prev) system("gzip " prev)
    close(prev)
    prev = f
  }
}
{
  print > f
}
END {
  if (prev) system("gzip " prev)
}' unbound.log

我正在尝试使用 GNU Parallel 并行启动 Octave 脚本。一切正常，但我对导出的变量有疑问。在使用 GNU Parallel 之前，我的工作流程是打开一个终端，执行export OMP_NUM_THREADS=1，然后执行我的 Octave 脚本。这样，我为 Octave 使用的 BLAS 分配了 1 个线程。使用 GNU Parallel 时，export OMP_NUM_THREADS=1在使用 GNU Parallel 之前执行的操作是否足够，或者我应该做些不同的事情？我读过，env_parallel但我不确定在我的用例中是否需要它，以及如果需要，如何使用它。

这是我在没有 GNU Parallel 的情况下所做的（打开一个终端并）：

export OMP_NUM_THREADS=1
octave--gui

这就是我现在使用 GNU Parallel 所做的事情（然后打开一个终端）：

export OMP_NUM_THREADS=1
readlink -f ./data/*.csv | parallel "octave validation.m {}"

基本上，我正在尝试并行处理目录中的 CSV 文件validation.m，并且我想确保 BLAS 只使用 1 个线程。

我是汇编语言的新手，正在尝试编写一个计算器，用户可以输入 2 个数字，使用加法或减法来显示结果。我尝试了很多方法，但似乎找不到我哪里出错了！任何建议或解决方案都将不胜感激。提前谢谢 :)

  section .data

        welcome db 0dh, 0ah, 0dh, 0ah, "**Hey, welcome to this calculator!**", 0dh, 0ah
        welcome_length equ $ - welcome
        msg_prompt db "Add your calculation (e.g., 24 + 6): ", 0
        msg_result db "Result: ", 0
        msg_newline db 10, 0    
        invalid_operator db "Invalid input, please use + or - for operations", 0

    section .bss
        buffer resb 32
        num1 resq 1 ; Number 1
        num2 resq 1 ; Number 2

    section .text
        global _start
    

    _start:
    ; Print the welcome message
        mov rsi, welcome
        mov rdx, welcome_length
        mov rax, 1
        mov rdi, 1 
        syscall

    
    ; Print the message prompt
        mov rsi, msg_prompt
        mov rdx, 37
        mov rax, 1
        mov rdi, 1
        syscall
    
    ; Read the input
        mov rsi, buffer
        mov rdx, 32
        mov rax, 0
        mov rdi, 0
        syscall

    ; Convert first number to an int
        mov rsi, buffer
        call parse_number
        mov [num1], rax

    ; Move to the operator (adjusying rsi based on parsed length)
    add rsi, rax
    call skip_spaces

    ; Check the operator
    movzx rbx, byte [rsi]
    cmp rbx, '+'
    je add_numbers
    cmp rbx, '-'
    je subtract_numbers

    ; Invalid operator - print error message
    mov rsi, invalid_operator
    mov rdx, 47
    mov rax, 1
    mov rdi, 1
    syscall
    jmp _exit

    ; Move to the 2nd
add_numbers:
    inc rsi
    call skip_spaces
    call parse_number
    mov [num2], rax

    ; Perform additiom
    mov rax, [num1]
    add rax, [num2]
    call print_result
    jmp _exit

    ; Move to the 2nd
subtract_numbers:
    inc rsi
    call skip_spaces
    call parse_number
    mov [num2], rax

    ; Perform subtraction
    mov rax, [num1]
    sub rax, [num2]
    call print_result
    jmp _exit

print_result:
    ; Printing the results
    mov rsi, msg_result
    mov rdx, 8
    mov rax, 1
    mov rdi, 1
    syscall

    ; Converting results to a string
    call print_number
    ret

parse_number:
    ; Convering a string to a number
    xor rax, rax
    mov rcx, 0

parse_loop:
    movzx rbx, byte [rsi]
    test rbx, rbx
    jz done_parsing
    cmp rbx, '0'
    jb done_parsing
    cmp rbx, '9'
    ja done_parsing
    sub rbx, '0'
    imul rax, rax, 10
    add rax, rbx
    inc rsi
    inc rcx
    jmp parse_loop
done_parsing:
    mov rax, rcx
    ret

print_number:
    ; Convert the number in rax  to ASCII in buffer and display
    mov rsi, buffer + 32
    mov rcx, 10
    add rsi, 1
    mov byte [rsi], 0

    ; If the number is 0, handle it seperately
    cmp rax, 0
    je print_zero

print_loop:
    xor rdx, rdx
    div rcx
    dec rsi
    add dl, '0'
    mov [rsi], dl
    test rax, rax
    jnz print_loop
    jmp print_result_buffer

print_zero:
    dec rsi
    mov byte [rsi], '0'
    jmp print_result_buffer
    
print_result_buffer:
    ; display result from buffer
    mov rdx, buffer + 32
    sub rdx, rsi
    mov rax, 1
    mov rdi, 1
    syscall
    ret

skip_spaces:
    ; skipping any spaces in the buffer
skip_space_loop:
    movzx rbx, byte [rsi]
    cmp rbx, ' ' 
    jne skip_done
    inc rsi
    jmp skip_space_loop
skip_done:
    ret

_exit:
    ; Exit the program
    mov rax, 60
    xor rdi, rdi
    syscall

我已经记不清我尝试过的所有变化了。输出确实允许用户输入等式，例如 3 + 2，然后打印结果：，但实际上并没有显示数值计算

我正在使用 mosquitto-go-auth 插件在 mosquitto 代理中进行身份验证。

我已经通过以下链接设置了插件

https://github.com/iegomez/mosquitto-go-auth

https://www.chirpstack.io/project/guides/mqtt-authentication/#build-for-mosquitto-14x

这是我的 mosquitto.conf

  per_listener_settings false 
  listener 1883 
  protocol mqtt
  auth_plugin /home/user/mosquitto-go-auth/go-auth.so
  allow_anonymous false 
  persistence true 
  persistence_location /var/lib/mosquitto/ 
  log_dest file /var/log/mosquitto/mosquitto.log

当我重启我的代理时。我在日志文件中看到了这个。

1731240636:  ├── TLS-PSK checking enabled.
1731240636:  └── Extended authentication not enabled.
1731240636: mosquitto version 2.0.15 starting
1731240636: Config loaded from /etc/mosquitto/mosquitto.conf.
1731240636: Loading plugin: /home/user/mosquitto-go-auth/go-auth.so
1731240636:  ├── Username/password checking enabled.
1731240636:  ├── TLS-PSK checking enabled.
1731240636:  └── Extended authentication not enabled.
1731240637: mosquitto version 2.0.15 starting
1731240637: Config loaded from /etc/mosquitto/mosquitto.conf.
1731240637: Loading plugin: /home/user/mosquitto-go-auth/go-auth.so
1731240637:  ├── Username/password checking enabled.
1731240637:  ├── TLS-PSK checking enabled.
1731240637:  └── Extended authentication not enabled.
1731240637: mosquitto version 2.0.15 starting
1731240637: Config loaded from /etc/mosquitto/mosquitto.conf.
1731240637: Loading plugin: /home/user/mosquitto-go-auth/go-auth.so
1731240637:  ├── Username/password checking enabled.
1731240637:  ├── TLS-PSK checking enabled.
1731240637:  └── Extended authentication not enabled.

如果我删除该插件，那么代理就可以正常工作。但是如果我添加身份验证插件，它就会失败。

Hardillb 我已经更新了我的 mosquitto.conf 文件

per_listener_settings false

listener 1883
protocol mqtt


auth_plugin /home/user/mosquitto-go-auth/go-auth.so
auth_opt_backends postgres
auth_opt_pg_host 172.25.34.117
auth_opt_pg_port 5432
auth_opt_pg_dbname go_auth
auth_opt_pg_user postgres
auth_opt_pg_password postgres
auth_opt_pg_userquery  SELECT password FROM users WHERE name = ? LIMIT 1
auth_opt_hasher bcrypt
auth_opt_hasher_cost 10
auth_opt_cache true
auth_opt_cache_reset true
#auth_opt_auth_cache_seconds 30
#auth_opt_acl_cache_seconds 90
#auth_opt_auth_jitter_second 3
#auth_opt_acl_jitter_seconds 5
#auth_opt_http_host auth.backend.com
#auth_opt_http_port 80


persistence true
persistence_location /var/lib/mosquitto/

log_dest file /var/log/mosquitto/mosquitto.log

但在日志中我得到了相同的信息，即未启用加密，但这次代理运行正常，没有任何问题。但当我检查 mosquitto 状态时，我得到了 postgres 错误。即使所有配置设置都输入正确。

● mosquitto.service - Mosquitto MQTT v3.1/v5 server
     Loaded: loaded (/etc/systemd/system/mosquitto.service; enabled; preset: enabled)
     Active: active (running) since Mon 2024-11-11 04:58:51 UTC; 1s ago
       Docs: http://mosquitto.org/documentation/
   Main PID: 10909 (mosquitto)
      Tasks: 7 (limit: 9337)
     Memory: 13.8M ()
     CGroup: /system.slice/mosquitto.service
             └─10909 /usr/local/sbin/mosquitto -c /etc/mosquitto/mosquitto.conf

Nov 11 04:58:51 DESKTOP-J9NGCNR systemd[1]: Started mosquitto.service - Mosquitto MQTT v3.1/v5 server.
Nov 11 04:58:51 DESKTOP-J9NGCNR Mosquitto[10909]: time="2024-11-11T04:58:51Z" level=error msg="ping database postgres error, will re ```

第二次更新

抱歉大家，我没有意识到Makefile变量和环境变量之间的区别。

在下面的例子中，我说的 .env 文件看起来像

ENV_VAR = {"example": "multi\nline\n"}

但实际上我使用的例子是

ENV_VAR = '{"example": "multi\nline\n"}'

似乎这里的单引号包装很重要（我以为它们只是被剥离了）。如果没有单引号，@william purcell 的以下答案就可以解决问题

printf '%s\n' '$(MAKE_VAR)' > example.json

但是，对于引号，我看到的最佳解决方案是按照@Barmar 和@Christopher Wrogg 建议的那样\在每个引号前面添加附加内容。\n

更新以包含 makefile 的使用

我将一个包含多行字符串的 json 对象存储为环境变量，并在 Makefile 中使用

（.环境）

ENV_VAR = {"example": "multi\nline\n"}

（Makefile）

include .env
export

job:
  echo ${ENV_VAR} > example.json
  

我需要将此环境变量打印到文件中，创建一个有效的 json 文件 example.json

但上述命令最终导致 JSON 损坏

{"example": "multi
line
"}

命令也同样如此printf。

我可以使用什么命令将这个多行环境变量作为单行打印到文件中？

期望的最终结果：

{"example": "multi\nline\n"}

谢谢

我有一个脚本需要在另一个程序中循环运行。但我想捕获信号以正常停止循环。

这是我的可重现代码：

loop.sh：

#!/bin/bash
COMMAND="logic.sh"
terminate=false

trap 'terminate=true' SIGTERM SIGINT

while true; do
    if $terminate; then
        echo "Termination signal received, waiting for the current process to finish..."
        wait
        echo "Process finished. Exiting..."
        exit 0
    fi
    $COMMAND &
    wait $!
done

logic.sh：

#!/bin/bash
sleep 5
date +%s

Dockerfile：

# FROM debian
FROM php:8.3-fpm
ADD loop.sh logic.sh /usr/local/bin/
CMD ["loop.sh"]

compose.yml：

services:
  app:
    build: .
    entrypoint: ''
    init: true

为了测试它，我docker compose up --build在另一个终端中运行 ; docker compose stop。如果您看到Termination signal received, waiting for the current process to finish...时间戳，则表示它正在运行。使用时FROM php:8.3-fpm它没有按预期工作……但使用时FROM debian是。

为什么它的表现不一样？我该如何让它与 一起工作FROM php:...？
谢谢

当我在学习 Linux 命令时，我注意到“grep”命令有这种奇怪的异常行为。在目录中/usr/bin，当我运行：

me@me-desktop:/usr/bin$ ls -l | grep bashb*
-rwxr-xr-x 1 root root        6988 Mar 31  2024 bashbug

这是意料之中的，但如果我在外面做同样的事情/usr/bin

me@me-desktop:~/Code/linux$ ls -l /usr/bin | grep bashb*
-rwxr-xr-x 1 root root     1446024 Mar 31  2024 bash
-rwxr-xr-x 1 root root        6988 Mar 31  2024 bashbug
-rwxr-xr-x 1 root root        4527 Apr 17  2023 dh_bash-completion
lrwxrwxrwx 1 root root           4 Aug 20 23:14 rbash -> bash

正如您所看到的，它现在可以选择忽略最后b一个bashb。

这种情况也发生在许多其他情况下。例如，如果您这样做apt list | grep lib*，那么它也会列出带有的li。

我正在使用 0.10.0 版的 cratemidir在我的 Linux 机器上接收和发送 MIDI 信号。根据其存储库中的示例代码，我创建了一个小示例，其中我只需打开一个输入和一个输出连接。它基本上可以正常工作。然而，在图形配线架应用程序（例如Patchance或qjackctl）中，每个端口都出现在自己的框中。

我尝试了一些其他音乐应用程序。有些由多个框表示，有些由一个带有输入和输出的框表示。SetBFree是后者的一个例子（见下文）。我的应用程序应该接收 MIDI 输入信号，修改它们并将它们发送到其他应用程序。因此，我希望将端口分组到同一个框中，将其输入和输出端口分组在一起。

有可能吗？我如何控制配线架应用程序如何识别我的应用程序？

我已经尝试在MidiInput::new和中使用相同的名称MidiOutput::new，但效果是一样的——只是系统在其名称后附加了一个随机整数。

我将非常感激任何提示，包括示例 C/C++ 代码或其他 MIDI 库，或文档。唯一的条件是它应该在 Linux 上运行。

我的代码（有点快速和肮脏，改编自midir）：

use std::error::Error;
use std::io::{stdin, stdout, Write};

use midir::{Ignore, MidiInput, MidiIO, MidiOutput};

fn main() {
    match run() {
        Ok(_) => (),
        Err(err) => println!("Error: {}", err),
    }
}

fn get_port<M: MidiIO>(midi_io: &M) -> Result<M::Port, Box<dyn Error>> {
    // Get an input port (read from console if multiple are available)
    let in_ports = midi_io.ports();
    let in_port = match in_ports.len() {
        0 => return Err("no input port found".into()),
        1 => {
            println!(
                "Choosing the only available input port: {}",
                midi_io.port_name(&in_ports[0]).unwrap()
            );
            &in_ports[0]
        }
        _ => {
            println!("\nAvailable input ports:");
            for (i, p) in in_ports.iter().enumerate() {
                println!("{}: {}", i, midi_io.port_name(p).unwrap());
            }
            print!("Please select input port: ");
            stdout().flush()?;
            let mut input = String::new();
            stdin().read_line(&mut input)?;
            in_ports
                .get(input.trim().parse::<usize>()?)
                .ok_or("invalid input port selected")?
        }
    };
    Ok(in_port.clone())
}

fn run() -> Result<(), Box<dyn Error>> {
    let mut input = String::new();

    let mut midi_in = MidiInput::new("midir reading input")?;
    let mut midi_out = MidiOutput::new("midir reading output")?;
    midi_in.ignore(Ignore::None);

    let in_port = get_port(&midi_in).unwrap();
    let out_port = get_port(&midi_out).unwrap();

    println!("\nOpening input connection");
    let in_port_name = midi_in.port_name(&in_port)?;

    // _conn_in needs to be a named parameter, because it needs to be kept alive until the end of the scope
    let _conn_in = midi_in.connect(
        &in_port,
        "midir-read-input",
        move |stamp, message, _| {
            println!("{}: {:?} (len = {})", stamp, message, message.len());
        },
        (),
    )?;

    println!("\nOpening output connection");
    let _conn_out = midi_out.connect(
        &out_port,
        "midir-write-output",
    );

    println!(
        "Connection open, reading input from '{}' (press enter to exit) ...",
        in_port_name
    );

    input.clear();
    stdin().read_line(&mut input)?; // wait for next enter key press

    println!("Closing connection");
    Ok(())
}

clock_gettime(clockid_t clockid, struct timespec *tp);

clockid CLOCK_REALTIME_COARSE：更快但精度更低的版本CLOCK_REALTIME。此时钟不可设置。...

但如果我调整，CLOCK_REALTIME是否能CLOCK_REALTIME_COARSE采用这些变化？我的意思是它仍然是一个实时（挂钟）时钟 - 只是速度更快（vdso），但准确性却有所损害，不是吗？

我想开始为 Linux 开发，但 Linux 不是可用的构建目标平台。Windows、Android、macOS 和 iOS 都在 IDE 的列表中。据我所知，缺少的软件包名为“FMXLinux”。

我尝试了以下操作：

1. 在设置 Delphi 12.3 时，我当然选中了“Linux”作为平台
2. GetIt pkg mgr 没有列出“fmxlinux”包，而 99% 的 Google 搜索结果都显示
3. 我使用命令行getitcmd -i=fmxlinux进行手动安装，失败了
4. 我使用了像getitcmd -l=linux和这样的命令行getitcmd -l=fmxlin*，失败了
5. 我清除了包缓存“..\CatalogRepository”，没有变化

在此网站https://getitnow.embarcadero.com/fmxlinux/上，缺少版本 1.78 软件包的下载链接。我还能尝试什么？是否有可供注册用户手动安装的 ZIP？