主页 / computer / 问题 / 1834324
Accepted
Hashim Aziz
Asked: 2024-03-09 07:55:54 +0800 CST

用逗号替换 X 换行符并删除每 N 个换行符

  • 772

我在文本文件中记录了以下格式的记录：

Record1
Record1
Record1
Record1

Record2
Record2
Record2
Record2

...

我需要将此文件转换为 CSV，方法是用逗号替换前 3 个换行符并删除第 4 个换行符，结果如下所示：

Record1,Record1,Record1,Record1
Record2,Record2,Record2,Record2

...

在 Bash 中执行此操作的最佳方法是什么，其中最好的方法更多的是健壮性而不是性能 - 该任务不会经常完成，但确实需要允许值包含除空格和换行符之外的几乎任何字符。

bash

3 个回答

  1. Best Answer

    我会为此使用 awk

    awk 'BEGIN {FS = "\n"; RS = ""; OFS = ","} {$1 = $1; print}' file

    将 RS 设置为空字符串意味着 2 个或更多换行符分隔记录。
    字段分隔符是单个换行符。

    $1 = $1是强制 awk 使用输出字段分隔符重写当前记录的惯用方法。

    • 1

  2. 只是为了好玩，用 python one-liner[1] 来创建预期的结果：

    $ 蟒蛇-c“\
导入 sys;eol='END\n';\
lines=[line.strip()+',' if len(line)>1 else eol for line in sys.stdin];\
print(''.join(lines)+eol)" \
<记录

    线路：

    1. 使用文字字符串启动 python
    2. 访问 sys.stdin，设置行结束常量
    3. 使用列表理解从 stdin 读取行，同时检查空行，将其替换为 eol 标记
    4. 创建行列表后，连接行，打印它们
    5. 从哪里读取行（命令行重定向）

    当您将上面的文本（不带前导 $）粘贴到（bash）终端时，您将得到这个...

    记录1,记录1,记录1,记录1,结束
记录2,记录2,记录2,记录2,结束
记录1,记录1,记录1,记录1,结束
记录2,记录2,记录2,记录2,结束
记录1,记录1,记录1,记录1,结束
记录2,记录2,记录2,记录2,结束

    ...当从包含示例文本的“记录”中读取时（重复）...

    只需一个简单的步骤即可删除所有那些“,END”；例如，将其全部通过管道传输到 sed 中；
    附加| sed -re "s/,END$//"到最后一行。

    [1] 上面的内容最好在一行中输入，只需跳过\'s，这些是为了更好的可读性而添加的。

    • 0

  3. 使用米勒并运行

    mlr --n2t --headerless-tsv-output --from input.txt \
put '$id=$1' then skip-trivial-records then \
nest --ivar "," -f 1 then \
cut -x -f id

    你得到

    Record1,Record1,Record1,Record1
Record2,Record2,Record2,Record2

    一些注意事项：

    • skip-trivial-records删除空行；
    • nest --ivar "," -f 1合并记录值，将它们分开,
    • 0

相关问题