AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 411043
Accepted
Betta
Betta
Asked: 2017-12-16 03:51:33 +0800 CST2017-12-16 03:51:33 +0800 CST 2017-12-16 03:51:33 +0800 CST

scp 远程文件并附加到本地文件

  • 772

我有多个文件要从远程服务器中提取。为了进一步处理本地服务器中的文件,我需要将它们合并(连接)到单个文件中,但这不能在远程文件中完成。

我不确定scp内部是如何工作的,但为了获得最佳性能,我认为与其将这些文件写入本地目录然后合并,我觉得我应该即时合并它们然后写入单个文件。您能否让我知道是否可以在scp从远程文件到本地文件期间即时合并(附加)文件?

如果没有更好的主意?

ssh scp
  • 3 3 个回答
  • 11547 Views

3 个回答

  • Voted
  1. Best Answer
    muru
    2017-12-16T04:04:33+08:002017-12-16T04:04:33+08:00

    直接使用 SSH 而不是 scp 并运行cat. 你会在哪里做:

    scp remote:{file1,file2...} local-dir
    

    而是这样做:

    ssh remote cat file1 file2 ... > locale-file
    
    • 6
  2. ilkkachu
    2017-12-16T05:17:27+08:002017-12-16T05:17:27+08:00

    这很愚蠢,但似乎您实际上可以scp通过将远程文件复制到本地 fifo 并将它们从其中导出来执行此操作:

    $ mkfifo p
    $ while :; do cat p >> output ; done  &
    $ scp somehost:test/\* p
    bar       100%    4    10.9KB/s   00:00    
    doo       100%    4     8.6KB/s   00:00    
    foo       100%    4    13.6KB/s   00:00  
    $ kill %1
    # output contains the files concatenated
    

    (在 Debian 上使用 OpenSSH 7.4p1-10+deb9u2 测试)

    • 1
  3. Praveen Kumar BS
    2017-12-16T05:06:05+08:002017-12-16T05:06:05+08:00

    以下步骤仅在本地服务器中执行

    我测试了两个步骤都很好

    第一步


    ssh username@remoteserverip "cat file1 file2 file3 >> /remoteserverpath/Mergedfile"
    

    第二步您正在将合并的文件从远程服务器复制到本地服务器您可以通过 rsync 或 scp 执行此操作


    我更喜欢rsync

    rsync -avzh username@remoteserverip:/remoteserverpath/Mergedfile localserverpath_where_you_want_to_save
    

    • 0

相关问题

  • Auto-SSH 手动工作,但不在后台工作

  • 远程运行 X 应用程序,在远程主机上运行 GUI [关闭]

  • rsync 端口 22 和 873 使用

  • SCP突然中止:管道损坏,消息验证码不正确

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    JSON数组使用jq来bash变量

    • 4 个回答
  • Marko Smith

    日期可以为 GMT 时区格式化当前时间吗?[复制]

    • 2 个回答
  • Marko Smith

    bash + 通过 bash 脚本从文件中读取变量和值

    • 4 个回答
  • Marko Smith

    如何复制目录并在同一命令中重命名它?

    • 4 个回答
  • Marko Smith

    ssh 连接。X11 连接因身份验证错误而被拒绝

    • 3 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Marko Smith

    systemctl 命令在 RHEL 6 中不起作用

    • 3 个回答
  • Marko Smith

    rsync 端口 22 和 873 使用

    • 2 个回答
  • Marko Smith

    以 100% 的利用率捕捉 /dev/loop -- 没有可用空间

    • 1 个回答
  • Marko Smith

    jq 打印子对象中所有的键和值

    • 2 个回答
  • Martin Hope
    EHerman JSON数组使用jq来bash变量 2017-12-31 14:50:58 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST
  • Martin Hope
    Drux 日期可以为 GMT 时区格式化当前时间吗?[复制] 2017-12-26 11:35:07 +0800 CST
  • Martin Hope
    AllisonC 如何复制目录并在同一命令中重命名它? 2017-12-22 05:28:06 +0800 CST
  • Martin Hope
    Steve “root”用户的文件权限如何工作? 2017-12-22 02:46:01 +0800 CST
  • Martin Hope
    Bagas Sanjaya 为什么 Linux 使用 LF 作为换行符? 2017-12-20 05:48:21 +0800 CST
  • Martin Hope
    Cbhihe 将默认编辑器更改为 vim for _ sudo systemctl edit [unit-file] _ 2017-12-03 10:11:38 +0800 CST
  • Martin Hope
    showkey 如何下载软件包而不是使用 apt-get 命令安装它? 2017-12-03 02:15:02 +0800 CST
  • Martin Hope
    youxiao 为什么目录 /home、/usr、/var 等都具有相同的 inode 编号 (2)? 2017-12-02 05:33:41 +0800 CST
  • Martin Hope
    user223600 gpg —list-keys 命令在将私钥导入全新安装后输出 uid [未知] 2017-11-26 18:26:02 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve