AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题

问题[sed](unix)

Martin Hope
Ricardo Albear
Asked: 2025-04-22 00:48:33 +0800 CST

使用正则表达式时,makefile 中的 sed 无法按预期工作

  • 6

得到一个带有此命令的 makefile,该命令将文件夹名称./cmd/从snake_case转换为PascalCase

test:
    @for f in $(shell ls ./cmd/); do \
        echo $${f}; \
        echo $${f} | sed -r 's/(^|_)([a-z])/\U\2/g'; \
     done

当我运行它时,我得到的是带有前缀大写字母的U:

api_get_manual
UapiUgetUmanual

我期望得到什么:

ApiGetManual
sed
  • 2 个回答
  • 379 Views
Martin Hope
metablaster
Asked: 2025-03-16 05:58:55 +0800 CST

使用 sed 删除单词表中的空格和数字

  • 5

我有一个包含以下示例内容的文件:

  2 jordyt
  2 dawder
  2 LOL12345
  2 2251084185
  2 123456789
  1 canada
  1 buddy123
  1 bagdad
  1 baba01
  1 124050
  1 123windi
  1 123456789m
  1 123321

目的是删除开头的空格和数字,以便只留下密码,如下所示:

jordyt
dawder
LOL12345
2251084185
123456789
canada
buddy123
bagdad
baba01
124050
123windi
123456789m
123321

我已经使用过这个命令,但是它没有按照我想要的方式工作:

cat file.txt | sed 's/^\s+\d+\s+//g'

sed如果有更好的方法就不一定了,处理性能很重要,因为我有千兆字节的文件。

顺便问一下,为什么我的命令不起作用?

sed
  • 1 个回答
  • 43 Views
Martin Hope
Roberto
Asked: 2025-03-16 05:14:32 +0800 CST

sed 删除单词后的所有内容

  • 7

我是 sed 新手,我有一个字符串

lightdm --session-child 14 21

这两个数字可能会改变,我会删除 lightdm 之后的所有内容

我尝试了各种方法,但都没有用

sed 's/ --session-child*//'
sed 's/\ --session-child*//'
sed 's/ --session-child*$//'

和其他方法,但都不起作用,哪里出了问题?

sed
  • 1 个回答
  • 214 Views
Martin Hope
grandMehrshad
Asked: 2024-12-30 03:07:58 +0800 CST

如何在 sed 中使用 nthprime 命令

  • 7

我想用第 n 个素数替换文本文件中的数字,我有一个可执行文件计算第 n 个素数,如何使用该命令sed将前面的每个数字替换##为其nthprime

./nthprime 46

199

sed -e 's/46##/199#/g'

文本文件包括如下内容:

(3505948*51##+331)/56439692311
(2608338*52##+401)/2357853732775
(47723079*50##+773)/7419068507
(67##/16##-1)/40446657668663868225798856758

期望输出:

(3505948*233#+331)/56439692311
(2608338*239#+401)/2357853732775
(47723079*229#+773)/7419068507
(331#/53#-1)/40446657668663868225798856758
sed
  • 1 个回答
  • 80 Views
Martin Hope
learninglinux12345
Asked: 2024-12-24 10:59:14 +0800 CST

使用 sed 在文件中的字符串后添加一行

  • 7

我想在文件中查找一个字符串:

例子

https://google.com/first/second/45683

我想重写它并保留原来的行:

https://google.com/first/second/45683
https://yahoo.com/third/fourth/45683

我尝试过几次

sed -r 's@https://google.com/first/second/([a-Z0-9]+)@yahoo.com/third/fourth/\1@' 文件.txt

输出:

yahoo.com/third/fourth/45683

它进行了重写,但没有保留原始行。

另一次尝试

sed -r 'a\s@https://google.com/first/second/([a-Z0-9]+)@yahoo.com/third/fourth/\1@' 文件.txt

输出:

https://google.com/first/second/45683
https://google.com/first/second/([a-Z0-9]+)@yahoo.com/third/fourth/1@

它附加两行但不会重写第二行。

sed
  • 5 个回答
  • 160 Views
Martin Hope
PRouleau
Asked: 2024-10-31 22:17:55 +0800 CST

将正则表达式捕获的数字替换为 sed 中使用该数字的命令的输出

  • 8

我想要翻译:

  • "a b c syscall=257 success=yes"

改为:

  • "a b c syscall=openat success=yes"

我喜欢使用sed组捕获正则表达式和替换,并结合使用 ausyscall 应用于正则表达式组提取的数字。

我在 Linux/bash 下尝试了以下操作:

echo "a b c  syscall=257 success=yes" |
   sed -e "s:syscall=\([0-9]*\):SYSCALL="$(ausyscall 257)":"

它打印:a b c SYSCALL=openat success=yes正如预期的那样。

然后我尝试使用捕获组 #1 作为 的参数ausyscall。像这样:

echo "a b c  syscall=257 success=yes" | 
   sed -e "s:syscall=\([0-9]*\):SYSCALL="$(ausyscall \1)":"

这将调用ausyscall 1which 打印write。这不是捕获的组 #1(其值为 257)。

因此我尝试使用\\1,但也失败了:

echo "a b c  syscall=257 success=yes" | 
   sed -e "s:syscall=\([0-9]*\):SYSCALL="$(ausyscall \\1)":"

这将调用失败,在 stderr( )ausyscall \1上打印错误并在 stdout 上打印。Unknown syscall \1 using x86_64 lookup tablea b c SYSCALL= success=yes

无法将捕获的值传递给 ausyscall。我尝试使用单引号,但无法调用 ausyscall。

可以这样使用sed吗?

  • 我只想知道是否能够用sed来做到这一点。
  • 我知道可以通过其他方式(perl、python 脚本、gawk 等)来完成,但我想看看是否可以用 sed 来完成,以及问题是否与引用或类似的东西有关。

使用sed可以实现吗?如果可以,我遗漏了什么?

sed
  • 5 个回答
  • 359 Views
Martin Hope
ranjit abraham
Asked: 2024-10-10 22:45:52 +0800 CST

Sed 命令不匹配并替换多行 xml 上的模式

  • 7

我有许多如下所示的 XML 文件,我想用新字符串替换其中的字符串。我似乎无法让 sed 命令在 xml 文件上工作。

<form version="1.1" theme="dark">
  <label>Forcepoint DLP Dashboard - LongTerm</label>
  <description>Activity for those with Long-Term Exceptions</description>
  <fieldset submitButton="false" autoRun="false">
    <input type="time" token="TimeFrame" searchWhenChanged="true">
      <label>Timeframe</label>
      <default>
        <earliest>-48h@h</earliest>
        <latest>now</latest>
      </default>
    </input>
  </fieldset>
  <row>
    <panel>
      <html>
        <p>Macros In Use:</p>
        <p>`ForcepointApprovedUSB` = Known Approved USB Devices</p>
        <p>`ForcepointKnownCDDVD` = Known CD/DVD Drives</p>
        <p>`ForcepointKnownMultiFunction` = Known Multi-Function Devices</p>
      </html>
    </panel>
  </row>
  <row>
    <panel>
      <title>Exception Info</title>
      <table>
        <search>
          <query>index=restricted_security 
sourcetype=forcepoint 
| rex field=_raw "(.*act=(?&lt;Action&gt;.*?)\s.*)"
| rex field=_raw "(.*duser=(?&lt;Device&gt;.*?)(:\s\d|;|\sfname=).*)"
| rex field=_raw "(.*duser=.*?;\s(?&lt;Serial&gt;.*?)\sfname=)"
| rex field=_raw "(.*fname=(?&lt;Filename&gt;.*?)\smsg=.*)"
| rex field=_raw "(.*fname=.:\\\(?&lt;RawFilename&gt;.*)(?:\s-\s.*)\smsg=.*)"
| rex field=_raw "(.*suser=(?&lt;Name&gt;.*)\scat=.*)"
| rex field=_raw "(.*loginName=.*\\\\(?&lt;Username&gt;.*)\ssourceIp=.*)"
| rex field=_raw "(.*sourceIp=(?&lt;IP&gt;.*)\sseverityType=.*)"
| rex field=_raw "(.*sourceHost=(?&lt;Source&gt;.*)\sproductVersion=.*)"
| rex field=_raw "(.*sourceServiceName=(?&lt;AlertType&gt;.*)\sanalyzedBy=.*)"
| eval Username=lower(Username)
| eval Action=if(isnull(Action),"-",Action)
| eval Serial=if(isnull(Serial),"-",Serial)
| eval EnumDeviceType=case(
    (`ForcepointApprovedUSB`),"ApprovedUSB",
    (`ForcepointKnownCDDVD`),"CDDVD",
    (`ForcepointKnownMultiFunction`),"MultiFunction",
    AlertType="Endpoint Applications" AND Device="Bluetooth","Bluetooth",
    AlertType="Endpoint Removable Media" AND Device="Windows Portable Device (WPD)","WPD",
    AlertType="Endpoint Removable Media" AND 
        Device!="Windows Portable Device (WPD)" AND NOT 
        (`ForcepointApprovedUSB`) AND NOT 
        (`ForcepointKnownCDDVD`) AND NOT 
        (`ForcepointKnownMultiFunction`),"UnApprovedUSB")
| join type=inner Username
[
    search
    index=restricted_security
    sourcetype=dlp_lt
    | rename UserID as Username
    | eval Check = "Yes"
    | fields Username,Check,Justification,Type,ExpireDate
]
| where isnotnull(EnumDeviceType) AND Check="Yes"
| eval Time=strftime(_time, "%B %d, %Y %H:%M %Z")
| dedup Username
| table Time Username Name Justification Type ExpireDate
| sort Name</query>
          <earliest>$TimeFrame.earliest$</earliest>
          <latest>$TimeFrame.latest$</latest>
        </search>
        <option name="drilldown">none</option>
        <option name="refresh.display">progressbar</option>
      </table>
    </panel>
  </row>
  <row>
    <panel>
      <title>Transfers By Those With Long-Term Exceptions</title>
      <table>
        <search>
          <query>index=restricted_security 
sourcetype=forcepoint 
| rex field=_raw "(.*act=(?&lt;Action&gt;.*?)\s.*)"
| rex field=_raw "(.*duser=(?&lt;Device&gt;.*?)(:\s\d|;|\sfname=).*)"
| rex field=_raw "(.*duser=.*?;\s(?&lt;Serial&gt;.*?)\sfname=)"
| rex field=_raw "(.*fname=(?&lt;Filename&gt;.*?)\smsg=.*)"
| rex field=_raw "(.*fname=.:\\\(?&lt;RawFilename&gt;.*)(?:\s-\s.*)\smsg=.*)"
| rex field=_raw "(.*suser=(?&lt;Name&gt;.*)\scat=.*)"
| rex field=_raw "(.*loginName=.*\\\\(?&lt;Username&gt;.*)\ssourceIp=.*)"
| rex field=_raw "(.*sourceIp=(?&lt;IP&gt;.*)\sseverityType=.*)"
| rex field=_raw "(.*sourceHost=(?&lt;Source&gt;.*)\sproductVersion=.*)"
| rex field=_raw "(.*sourceServiceName=(?&lt;AlertType&gt;.*)\sanalyzedBy=.*)"
| eval Username=lower(Username)
| eval Action=if(isnull(Action),"-",Action)
| eval Serial=if(isnull(Serial),"-",Serial)
| eval EnumDeviceType=case(
    (`ForcepointApprovedUSB`),"ApprovedUSB",
    (`ForcepointKnownCDDVD`),"CDDVD",
    (`ForcepointKnownMultiFunction`),"MultiFunction",
    AlertType="Endpoint Applications" AND Device="Bluetooth","Bluetooth",
    AlertType="Endpoint Removable Media" AND Device="Windows Portable Device (WPD)","WPD",
    AlertType="Endpoint Removable Media" AND 
        Device!="Windows Portable Device (WPD)" AND NOT 
        (`ForcepointApprovedUSB`) AND NOT 
        (`ForcepointKnownCDDVD`) AND NOT 
        (`ForcepointKnownMultiFunction`),"UnApprovedUSB")
| join type=inner Username
[
    search
    index=restricted_emn_security
    sourcetype=dlp_lt
    | rename UserID as Username
    | eval Check = "Yes"
    | dedup Username
    | fields Username, Check
]
| where isnotnull(EnumDeviceType) AND Check="Yes"
| eval Time=strftime(_time, "%B %d, %Y %H:%M %Z")
| table Time Username Name Action Source Filename Device Serial EnumDeviceType
| sort -Time</query>
          <earliest>$TimeFrame.earliest$</earliest>
          <latest>$TimeFrame.latest$</latest>
        </search>
        <option name="count">30</option>
        <option name="drilldown">none</option>
      </table>
    </panel>
  </row>
</form>

我想要替换的模式是

index=restricted_security sourcetype=forcepoint

和

index=newname
sourcetype=forcepoint

因此任何模式

index=restricted_security
sourcetype=forcepoint

应被新值替换。

XML 文件有很多组合,例如

index=restricted_security
sourcetype=someother value, index=someindex sourcetype=forcepoint

等等,但它们不需要被替换。

我已经尝试了像下面这样的许多模式和许多 sed 的组合,但似乎不起作用

sed 's/index=restricted_security\s\nsourcetype=forcepoint/index=restricted_security sourcetype=forcepoint/g'

有人能指出如何替换它吗?

sed
  • 3 个回答
  • 180 Views
Martin Hope
Mister Smith
Asked: 2024-08-11 06:26:46 +0800 CST

sed(或 awk):如果不存在则打印捕获的组或占位符

  • 8

因此,自从 GitHub 删除了非高级帐户的洞察选项卡后,我便尝试每天在本地列出我的 git 存储库中的插入和删除内容。

我想出了这种打印我想要的内容的方法:

git log --pretty="@%ad" --date=short --shortstat |  tr "\n" " " | tr "@" "\n"

这会产生这种输出:

2024-06-13   7 files changed, 400 insertions(+), 406 deletions(-) 
2024-06-12   3 files changed, 145 insertions(+) 
2024-06-12   5 files changed, 638 deletions(-) 
2024-06-12   1 file changed, 1 insertion(+), 1 deletion(-) 

注意文件、插入和删除中的复数形式。另一个问题是提交可能没有插入或删除(或两者兼有,但我们忽略这种情况)。

我已经快完成了,我只需要提取日期、插入和删除并按日期分组。这将生成某种“每天完成的工作”图表。

我制作了这个正则表达式来捕获处理所有可选项的字段:

/^([0-9]{4}-[0-9]{2}-[0-9]{2})\s{3}[0-9]+\sfile(s)?\schanged,\s(([0-9]+)\sinsertion(s)?\(\+\))?(,\s)?(([0-9]+)\sdeletion(s)?\(\-\))?\s$/gm

现在我需要获取第 1、第 4 和第 8 组,例如sed:

echo "2024-06-13   7 files changed, 400 insertions(+), 406 deletions(-) " |
    sed -r 's/^([0-9]{4}-[0-9]{2}-[0-9]{2})\s{3}[0-9]+\sfile(s)?\schanged,\s(([0-9]+)\sinsertion(s)?\(\+\))?(,\s)?(([0-9]+)\sdeletion(s)?\(\-\))?\s$/\1 \4 \8/gm'

这样就能产生正确的输出:

2024-06-13 400 406

但是如果输入字符串没有插入或删除,sed 就不会为该捕获组打印任何内容。例如:

2024-06-13 400

我无法判断单个数字是插入还是删除。

有没有办法从每一行中提取组,但如果组不存在则打印“0”作为占位符?(不一定单独使用 sed,也不一定在单个命令中)。

sed
  • 7 个回答
  • 333 Views
Martin Hope
liginity
Asked: 2024-07-01 22:42:50 +0800 CST

在 makefile 中的 sed 正则表达式中 '\($*\)' 是什么意思?

  • 7

我在手册中遇到了以下sed命令。make

sed 's,\($*\)\.o[ :]*,\1.o $@ : ,g'

并且有以下效果(这是手册中的一个例子):

main.o : main.c defs.h
# is turned into:
main.o main.d : main.c defs.h

在我看来,'\($*\)\.o' 是为了匹配文件名filename.o,但我不明白如何'\($*\)'实现这一点。我知道$在正则表达式中, 位于行尾是特殊的,但这不适用于此处。

那么'\($*\)'这里的意思是什么?


完整代码:

%.d: %.c
        @set -e; rm -f $@; \
         $(CC) -M $(CPPFLAGS) $< > $@.$$$$; \
         sed 's,\($*\)\.o[ :]*,\1.o $@ : ,g' < $@.$$$$ > $@; \
         rm -f $@.$$$$
sed
  • 2 个回答
  • 826 Views
Martin Hope
ranjit abraham
Asked: 2024-06-28 08:20:35 +0800 CST

Sed 命令列出模式之间的所有行,包括最后一行

  • 7

我有一个类似下面的文件。

[object_category=file]
filesystem = enabled
[object_category=registry]
registry = enabled
[privilege_id=SeAuditPrivilege]
audit = enabled
[privilege_id=SeSecurityPrivilege]
audit = enabled
[selinux=disabled]
insecure = enabled
[shell=%2Fbin%2Fbash]
interactive = enabled
[shell=%2Fbin%2Fsh]

我正在尝试模式匹配,以便我的输出只有以下几行。

[selinux=disabled]
insecure = enabled

我正在使用的命令是

sed -n '/\[selinux=disabled\]/,/\[/p' myfilename

但该命令提供的输出如下

[selinux=disabled]
insecure = enabled
[shell=%2Fbin%2Fbash]

我不想要最后一行,即 [shell=%2Fbin%2Fbash] 。但不知何故,SED 命令也捕获了该行。最简单的选项是什么,可以仅列出我需要的内容,即如下所示?

[selinux=disabled]
insecure = enabled
sed
  • 1 个回答
  • 59 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve