主页 / user-4132818

Bryan Tan's questions

Martin Hope
Bryan Tan
Asked: 2025-04-22 09:24:35 +0800 CST
  • 5

我一直在阅读https://docs.aws.amazon.com/cli/v1/userguide/cli-usage-filter.html和https://jmespath.org/specification.html上的文档，但它不起作用。

例如，我想使用 starts_with 来查找 DBInstances.DBInstanceIdentifier 以“foo”开头的数据库实例。

aws rds describe-db-instances --query 'DBInstances.DBInstanceIdentifier[?starts_with(@, "foo")]'
null
---
aws rds describe-db-instances --query 'DBInstances[?starts_with("DBInstanceIdentifier", "foo")]'

In function starts_with(), invalid type for value: None, expected one of: ['string'], received: "null"
---
aws rds describe-db-instances --query 'DBInstances[?starts_with(DBInstanceIdentifier, "foo")]'

In function starts_with(), invalid type for value: None, expected one of: ['string'], received: "null"

我还想使用诸如 contains 等函数来做其他事情，但这些函数似乎都不起作用。

我知道我可以通过 jq 传递输出，这是一个简单的解决方案，只是想了解更多工具

aws rds describe-db-instances | jq '.DBInstances[] | select(.DBInstanceIdentifier | startswith("foo"))'
Martin Hope
Bryan Tan
Asked: 2025-04-02 07:34:05 +0800 CST
  • 8

我有一个 bash 脚本，它采用一个简单的属性文件并将值替换到另一个文件中。 (属性文件只是'foo=bar'类型属性的行)

INPUT=`cat $INPUT_FILE`
while read line; do
   PROP_NAME=`echo $line | cut -f1 -d'='`
   PROP_VALUE=`echo $line | cut -f2- -d'=' | sed 's/\$/\\\$/g`
   time INPUT="$(echo "$INPUT" | sed "s\`${PROP_NAME}\b\`${PROP_VALUE}\`g")"
done <<<$(cat "$PROPERTIES_FILE")
# Do more stuff with INPUT

然而，当我的机器负载很高（超过四十）时，我的 sed 会浪费大量时间

real  0m0.169s
user  0m0.001s
sys  0m0.006s

低负载：

real  0m0.011s
user  0m0.002s
sys  0m0.004s

通常情况下，损失 0.1 秒并不是什么大问题，但属性文件和输入文件都有数百/数千行长，而这 0.1 秒加起来就浪费了一个多小时的时间。

我该怎么做才能解决这个问题？我只需要更多 CPU 吗？

示例属性（行以特殊字符开头，以创建一种方式来指示输入中的某些内容正在尝试访问某个属性）

$foo=bar
$hello=world
^hello=goodbye

示例输入

This is a story about $hello. It starts at a $foo and ends in a park.

Bob said to Sally "^hello, see you soon"

预期结果

This is a story about world. It starts at a bar and ends in a park.

Bob said to Sally "goodbye, see you soon"
linux
Martin Hope
Bryan Tan
Asked: 2024-09-05 10:26:47 +0800 CST
  • 5

我创建了以下脚本

import groovy.json.*

pipeline {
    agent { node { label 'mycomputer' } }
    stages {
        stage ( 'Test') {
            steps{
                script {
                    StringJoiner a = new StringJoiner(",");
                    a.add("a").add("b").add("c")
                    env.out = a.toString()
                    echo env.out
                    datas = readYaml file: "/home/cloud-user/test.yaml"
                }
            }
        }
    }
}

输出结果如下：

[管道] { [管道] 阶段 [管道] { (测试) [管道] 脚本 [管道] { [管道] echo a,b,c [管道] readYaml [管道] } [管道] // 脚本 [管道] } [管道] // 阶段 [管道] } [管道] // 节点 [管道] 管道结束发生异常：在字段 com.cloudbees.groovy.cps.impl.BlockScopeEnv.locals 中，在对象 com.cloudbees.groovy.cps.impl.BlockScopeEnv@7bb36fb8 中，在字段 com.cloudbees.groovy.cps.impl.CallEnv.caller 中，在对象 com.cloudbees.groovy.cps.impl.FunctionCallEnv@636cffca 中com.cloudbees.groovy.cps.Continuable.e 在对象 org.jenkinsci.plugins.workflow.cps.SandboxContinuable@2664c301 中的字段 org.jenkinsci.plugins.workflow.cps.CpsThread.program 中 在对象 org.jenkinsci.plugins.workflow.cps.CpsThread@1339b8f9 中的字段 org.jenkinsci.plugins.workflow.cps.CpsThreadGroup.threads 中 在对象 org.jenkinsci.plugins.workflow.cps.CpsThreadGroup@146a9a96 中的字段 org.jenkinsci.plugins.workflow.cps.CpsThreadGroup@146a9a96 中 另外：org.jenkinsci.plugins.workflow.actions.ErrorAction$ErrorId： 16a49acb-27b5-4869-b5ae-bfdb1ca5e058 导致：java.io.NotSerializableException：java.util.StringJoiner 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject（RiverMarshaller.java:278） 在 org.jboss.marshalling.river.BlockMarshaller.doWriteObject（BlockMarshaller.java:65） 在 org.jboss.marshalling.river.BlockMarshaller.writeObject（BlockMarshaller.java:56） 在 org.jboss.marshalling.MarshallerObjectOutputStream.writeObjectOverride（MarshallerObjectOutputStream.java:50） org.jboss.marshalling.river.RiverObjectOutputStream.writeObjectOverride(RiverObjectOutputStream.java:179) at java.base/java.io.ObjectOutputStream.writeObject(ObjectOutputStream.java:341) at java.base/java.util.HashMap.internalWriteEntries(HashMap.java:1858) at java.base/java.util.HashMap.writeObject(HashMap.java:1412) at org.jboss.marshalling.reflect.JDKSpecific$SerMethods.callWriteObject(JDKSpecific.java:134) at org.jboss.marshalling.reflect.SerializableClass.callWriteObject(SerializableClass.java:231) at org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1128) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteFields(RiverMarshaller.java:1182) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1140) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) 在org.jboss.marshalling.river.RiverMarshaller.doWriteFields(RiverMarshaller.java:1182) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1140) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1119) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteFields(RiverMarshaller.java:1182) 在 org.jboss.marshalling.river.RiverMarshaller。doWriteSerializableObject(RiverMarshaller.java:1140) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1119) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteFields(RiverMarshaller.java:1182) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1140) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) org.jboss.marshalling.river.BlockMarshaller.doWriteObject(BlockMarshaller.java:65) 在 org.jboss.marshalling.river.BlockMarshaller.writeObject(BlockMarshaller.java:56) 在 org.jboss.marshalling.MarshallerObjectOutputStream.writeObjectOverride(MarshallerObjectOutputStream.java:50) 在 org.jboss.marshalling.river.RiverObjectOutputStream.writeObjectOverride(RiverObjectOutputStream.java:179) 在 java.base/java.io.ObjectOutputStream.writeObject(ObjectOutputStream.java:341) 在 java.base/java.util.HashMap.internalWriteEntries(HashMap.java:1858) 在java.base/java.util.HashMap.writeObject(HashMap.java:1412) 在 org.jboss.marshalling.reflect.JDKSpecific$SerMethods.callWriteObject(JDKSpecific.java:134) 在 org.jboss.marshalling.reflect.SerializableClass.callWriteObject(SerializableClass.java:231) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1128) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteFields(RiverMarshaller.java:1182) org.jboss.marshalling.river.RiverMarshaller.doWriteSerializableObject(RiverMarshaller.java:1140) 在 org.jboss.marshalling.river.RiverMarshaller.doWriteObject(RiverMarshaller.java:271) 在 org.jboss.marshalling.AbstractObjectOutput.writeObject(AbstractObjectOutput.java:58) 在 org.jboss.marshalling.AbstractMarshaller.writeObject(AbstractMarshaller.java:116) 在 org.jenkinsci.plugins.workflow.support.pickles.serialization.RiverWriter.lambda$writeObject$1(RiverWriter.java:144) 在org.jenkinsci.plugins.scriptsecurity.sandbox.groovy.GroovySandbox.runInSandbox(GroovySandbox.java:331) at org.jenkinsci.plugins.workflow.support.pickles.serialization.RiverWriter.writeObject(RiverWriter.java:143) at org.jenkinsci.plugins.workflow.cps.CpsThreadGroup.saveProgram(CpsThreadGroup.java:580) at org.jenkinsci.plugins.workflow.cps.CpsThreadGroup.saveProgram(CpsThreadGroup.java:557) at org.jenkinsci.plugins.workflow.cps.CpsThreadGroup.saveProgramIfPossible(CpsThreadGroup.java:540) at org.jenkinsci.plugins.workflow.cps.CpsThreadGroup.run(CpsThreadGroup.java:464) 在 org.jenkinsci.plugins.workflow.cps.CpsThreadGroup$2.call(CpsThreadGroup.java:331) 在 org.jenkinsci.plugins.workflow.cps.CpsThreadGroup$2.call(CpsThreadGroup.java:295) 在 org.jenkinsci.plugins.workflow.cps.CpsVmExecutorService$2.call(CpsVmExecutorService.java:97) 在 java.base/java.util.concurrent.FutureTask.run(FutureTask.java:264) 在 hudson.remoting。SingleLaneExecutorService$1.run(SingleLaneExecutorService.java:139) 在 jenkins.util.ContextResettingExecutorService$1.run(ContextResettingExecutorService.java:28) 在 jenkins.security.ImpersonatingExecutorService$1.run(ImpersonatingExecutorService.java:68) 在 jenkins.util.ErrorLoggingExecutorService.lambda$wrap$0(ErrorLoggingExecutorService.java:51) 在 java.base/java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:515) 在 java.base/java.util.concurrent.FutureTask.run(FutureTask.java:264) 在 java.base/java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1128) 在java.base/java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:628) at java.base/java.lang.Thread.run(Thread.java:829) 完成：失败

删除 readyaml 命令会导致错误消失。这对我来说毫无意义，为什么它会尝试在无关的 readyaml 调用中序列化 StringJoiner？

Yaml 内容

---
HELLO: "WORLD"