AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 506506
Accepted
user1032531
user1032531
Asked: 2019-03-16 05:04:53 +0800 CST2019-03-16 05:04:53 +0800 CST 2019-03-16 05:04:53 +0800 CST

递归地将 Windows 文件转换为 Unix 文件

  • 772

我有一个 PHP 应用程序,它位于 Linux 上,有多个目录(和子目录)和许多 PHP、JS、HTML、CSS 等文件。许多文件都有 Windows EOL 控制字符,我还担心有些文件可能不是 UTF-8 编码,但可能是 ISO-8859-1、Windows-1252 等。我希望使用 LF 将所有文件转换为 UTF-8只要。

看起来我可能有几个步骤。

dos2unix man 提供了这个解决方案:

find . -name *.txt |xargs dos2unix

https://stackoverflow.com/a/11929475提供了这个解决方案:

find . -type f -print0 | xargs -0 dos2unix

https://stackoverflow.com/a/7068241提供了这个解决方案:

find ./ -type f -exec dos2unix {} \;

我认识到第一个只会转换不是我想要的 txt 文件,但我可以轻松更改为使用-type f. 话虽如此,一种解决方案是否比另一种解决方案“更好”?如果是这样,为什么?是否可以在不更改文件的情况下判断哪些文件将被更改?当我最终更改它们时,我不想更改日期,并打算使用 dos2unix 的--keepdate标志。是否应该使用任何其他选项?

接下来,我需要处理编码。 https://stackoverflow.com/a/805474/1032531推荐enca(或其姊妹命令encov)和https://stackoverflow.com/a/64889/1032531推荐iconv。它似乎也file可能适用。同样,应该使用哪一个(或者可能是其他所有东西)?我安装enca并执行时enca --list languages,它列出了几种语言,但没有列出英语(也许选择“无”?),我的问题是适用性。 iconv已经安装了,但是,它没有手册页(至少man iconv没有手册页)。这如何用于递归检查和转换编码?

请确认/更正我提出的解决方案或提供完整的解决方案。

files unicode
  • 1 1 个回答
  • 2045 Views

1 个回答

  • Voted
  1. Best Answer
    Philip Couling
    2019-03-16T17:54:17+08:002019-03-16T17:54:17+08:00

    这里有很多问题合二为一。

    首先,当使用 find 时,我总是使用--exec而不是xargs. 作为一般规则,最好用尽可能少的命令来做事。但前两种方法也将所有文件名写入文本流,以便 xargs 重新解释回文件名。这是一个不必要的步骤,只会增加(当然很小)失败的机会。

    dos2unix将接受多个文件名,所以我会使用:

    find . -type f -exec dos2unix --keepdate {} +
    

    这将堆积一长串文件,然后dos2unix立即开始处理一大堆文件。


    要找出哪些文件将被触摸,只需删除 exec 子句:

    find . -type f
    

    编码变化的问题要大得多。请注意,没有办法可靠地确定任何文本文件的当前编码。有时可以猜到,但这绝不是 100% 可靠的。因此,如果您确定所有文件当前都是相同的编码,则只能批处理编码。

    我建议使用iconv. 这确实是这项工作的默认设置。你可以在这里找到它的手册页:

    https://linux.die.net/man/1/iconv

    这里有一个如何使用iconvwith的工作示例find:

    https://stackoverflow.com/questions/4544669/batch-convert-latin-1-files-to-utf-8-using-iconv

    • 1

相关问题

  • 删除文件名后缀最小的文件

  • 列出根据特定内容行排序的文件

  • 如何提前知道 .zip 内部是否有父目录

  • 如何找到特定的文件类型并将它们 tar?

  • du/df 和 ls 报告不同的磁盘使用情况

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve