我需要定期从 ftp 服务器中提取文件，并且发现我可以使用 wget 轻松获取文件
wget -m --user=yyy --password=xxxx ftps://host.com.au
这真的很好用。问题是，它显然将文件留在了远程服务器上，下次我运行脚本时，它会再次获取它们。
我看到 wget 有一个 --delete-after 标志，乍一看似乎很理想，但是，正如手册页所说，它只删除本地文件而不是远程文件。
有没有办法达到这个目的？不幸的是，它需要通过 ftp，因为我没有对远程服务器的 shell 访问或 rsync 访问。我应该看wget以外的东西吗？
我想首先说我对我所做的一切都非常缺乏经验，所以请放轻松。
我有 4 台计算机，每台都安装了 Red hat Enterprise Linux server 7.8，它们都连接到运行子网管理器的 Voltaire 网格控制器 4036 infiniband 交换机。为简单起见，我将计算机称为 s1-s4。我希望 s2、s3 和 s4 能够在不使用 IP 的情况下从 s1 访问和下载文件，因为我已经读过删除 IP 的使用可以将性能提高多达 20%（如果我错了，请纠正我） . 甚至可以在不使用 IP 的情况下进行文件传输吗？
另外，由于我是这个网站的新手，请随时告诉我是否应该提供更多信息或不清楚某些事情。如果您认为我误解了某些内容，那么您也可以随时纠正我。
谢谢
Azure 中 Hyper-V 来宾和主机/其他远程计算机之间的文件传输速度较慢 (~300kB/s)
我看到来宾 VM 和主机 VM 之间或直接从来宾 VM 到另一个远程 VM 的文件传输速度极慢。
以下是一些配置细节：
要求是从来宾 VM 快速传输 1.5TB 的大文件。目前使用 rsync 并且不介意从客户 VM 中获取文件的替代方法。
任何建议将不胜感激
背景：
几台生产机器生成文本文件，其中包含我们想要集中汇总的各种信息。
这些机器运行所有版本的 WinXP、7、10。
这些机器紧紧地锁定在分段网络上。他们无权访问 Windows 或 Samba 共享。
这些文件本身每天大约有几百 kiB。
目标：
我想设置一个中央工具，可以定期从每台机器上获取这些文本文件。
必须从服务器端进行提取。
这些文件每隔几分钟就会附加到每台机器上，因此文件复制机制可以处理锁定写入的文件并且不会丢失数据等，这一点很重要。
每台机器的文件必须本地存储在每台机器上，因为应用程序本身过于敏感，无法直接存储在网络共享上（它失败、崩溃或丢失数据）。
可以安装某种守护程序或服务器（sftp、ftp、..），但服务器软件必须非常稳定且重量轻。
服务器端可以是 Linux 或 Windows
应记录失败的连接、失败的传输，并可能通过电子邮件发送。
旁注：很多年前，我记得我使用了一个可以做到这一点的 Windows 文件同步软件；从多个来源获取/同步，检查文件锁定状态，发送到多个目标，包括版本控制，以及在传输成功或失败时运行各种命令。但我不记得那是什么了。
出于安全原因，我必须限制/禁用通过 RDP（端口 3389）与远程计算机（Windows 10）之间的文件传输。文件传输是通过端口 3389 进行的，还是可以通过阻止端口 139/445 SMB 来安全地阻止文件传输？在这一点上，GPO 对我来说太不确定了。
通过 samba 将文件从 MacOS 系统复制到 Windows 共享后，我得到的文件名如下：
Сђ•вл
К†в†ЂЃ¶≠л• Ђ®бвл.pdf
П†бѓЃав.doc
通常它们应该看起来像：
Сметы
Каталожные листы.pdf
Паспорт.doc
在某些情况下，我还在名称末尾得到 U+F028 符号：
Новые
有没有办法在 Windows 机器上自动确定和转换此类文件？
我只想rsync在 Ubuntu 14.04 上传输更改的文件和新文件。我不想每次都转移一切。我不担心检查文件的内容是否真的改变了。存在类似的帖子，但我不确定，因为文档与这些帖子中所说的不一致。
中的文档rsync说：
-u, --update这会强制 rsync 跳过目标文件已存在且日期晚于源文件的任何文件。
http://ss64.com/bash/rsync_options.html
编辑：找到另一个（可能更官方的）文档页面。它说：
-u, --update跳过接收器上较新的文件
https://download.samba.org/pub/rsync/rsync.html
我觉得这些措辞不好。首先，第一个说“日期”。我认为它实际上意味着“时间戳”。其次，更重要的是，这似乎意味着源和目标中具有相同时间戳的文件将被重新传输。文档明确指出，它只会在目标文件的时间戳（T_d）比源文件时间戳（T_s源文件：跳过传输 ifT_d > T_s意味着它在T_d <= T_s.
这对我来说是一个重要的问题，因为如果您想以尽可能少的工作（网络/io/cpu/时间）将所有新的和更改的文件从源文件夹传输到目标文件夹，更新标志可能只是重新传输每次的一切。
或者也许我错过了什么，或者误解了什么？
（由于题外话，这篇文章被 stackoverflow.com 拒绝。添加它和答案，以防将来可能对人们有所帮助。）
短版：相当于scp -3 http://user:pass@example.org/somefile ftp://user:pass@ftpserver/my/path
详细版：
+------+ +-------+ +-------------+
| HTTP +---------------> linux +-------------> FTP server |
+------+ WWW +-------+ LAN +-------------+
我想通过 linux 主机将 HTTP 文件传输到 FTP 服务器。无需将整个文件存储在 linux 主机上，仅充当端点之间的缓冲区
这样做的简单方法是什么？
谢谢
这可能看起来像一个重复的问题，但我做了我的搜索，但找不到任何解决方案。
我创建了一个 tftp 服务器，当从本地 tftp 客户端访问该服务器时，通过环回获取并放置文件就好了。当我尝试通过外部客户端访问服务器时，请求超时。连接已建立。我可以看到连接在 tftp 客户端中已连接，那里没有问题。文件传输未开始。
客户端通过以太网电缆直接连接到主机，我创建了一个 2 设备 LAN。ping 在它们之间起作用。
我最初认为这是一个防火墙问题，现在我禁用了防火墙，允许在 iptables 中配置的端口 69 上输入和输出。端口 69 上也允许使用 udp。
我也没有运行 tftpd-hpa 服务器的多个实例，它作为守护进程运行，而netstat -aup只运行一个 tftp 服务器。
客户给出了正确的请求，我可以在wireshark中看到它们，但没有任何响应。
并且失败总是超时。
**firewall disabled**
**ports allow connection **
**file transfer fails**
** outgoing tftp request as a client to other tftp servers is alos blocked **
更新2：
我不太确定防火墙的事情，因为这台笔记本电脑是由我的雇主发行的，我怀疑他们不会允许禁用防火墙。阅读/var/log/syslog并没有给出任何提示，因此尝试查看内核打印信息以了解是否有任何 kmodules 做任何可疑的事情，我看到了这些。
[10989.915231] FIREWALL: IN=eth1 OUT= MAC=50:7b:9d:f9:44:5d:68:9e:19:99:9e:e4:08:00 SRC=10.42.0.89 DST=10.42.0.1 LEN=65 TOS=0x00 PREC=0x00 TTL=255 ID=117 DF PROTO=UDP SPT=2495 DPT=69 LEN=45
SRC、DESTT 、DPT、PROTO MAC 地址都与我的tftp 客户端匹配。
我无法真正说出这里发生了什么，所以如果有人能给我提示以寻找一些日志或其他东西，那将非常有帮助。
在此之后，我安装了gufw来管理防火墙并允许所有传入和传出流量。我仍然会超时，这就是我现在在 syslog 上看到的。
Sep 5 16:16:01 arun-TP kernel: [13836.201853] [UFW AUDIT] IN= OUT=eth1 SRC=10.42.0.1 DST=10.42.0.255 LEN=184 TOS=0x00 PREC=0x00 TTL=64 ID=12630 DF PROTO=UDP SPT=17500 DPT=17500 LEN=164
Sep 5 16:16:01 arun-TP kernel: [13836.201870] [UFW ALLOW] IN= OUT=eth1 SRC=10.42.0.1 DST=10.42.0.255 LEN=184 TOS=0x00 PREC=0x00 TTL=64 ID=12630 DF PROTO=UDP SPT=17500 DPT=17500 LEN=164
这次DST没有意义，客户端位于10.42.0.89而不是10.42.0.255。
更新1：
/etc/default/tftpd-hpa
TFTP_USERNAME="tftp"
TFTP_DIRECTORY="/tftpboot"
TFTP_ADDRESS="0.0.0.0:69"
TFTP_OPTIONS="--secure --create -s"
RUN_DAEMON="YES"
ls -lrt /
drwxr-xr-x 2 tftp nogroup 4096 Sep 5 03:30 tftpboot
网络统计-aup
Active Internet connections (servers and established)
Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name
udp 0 0 *:mdns *:* 739/avahi-daemon: r
udp 0 0 *:50694 *:* 2514/rpc.mountd
udp 0 0 *:55107 *:* 2514/rpc.mountd
udp 0 0 *:nfs *:* -
udp 0 0 *:3471 *:* 8567/dhclient
udp 0 0 *:56776 *:* 739/avahi-daemon: r
udp 0 0 10.42.0.1:domain *:* 5403/dnsmasq
udp 0 0 127.0.1.1:domain *:* 3025/dnsmasq
udp 0 0 *:bootps *:* 5403/dnsmasq
udp 0 0 *:bootpc *:* 8567/dhclient
udp 0 0 *:tftp *:* 4316/in.tftpd
udp 0 0 *:sunrpc *:* 966/rpcbind
udp 0 0 *:ipp *:* 1476/cups-browsed
udp 0 0 *:707 *:* 966/rpcbind
udp 0 0 *:33526 *:* 2514/rpc.mountd
udp 0 0 *:49935 *:* -
udp 0 0 localhost:796 *:* 1044/rpc.statd
udp 0 0 *:54194 *:* 1044/rpc.statd
udp 0 0 *:17500 *:* 3785/dropbox
udp6 0 0 [::]:mdns [::]:* 739/avahi-daemon: r
udp6 0 0 [::]:42779 [::]:* -
udp6 0 0 [::]:59279 [::]:* 1044/rpc.statd
udp6 0 0 [::]:nfs [::]:* -
udp6 0 0 [::]:60007 [::]:* 2514/rpc.mountd
udp6 0 0 [::]:52311 [::]:* 2254/BESClient
udp6 0 0 [::]:11656 [::]:* 8567/dhclient
udp6 0 0 [::]:sunrpc [::]:* 966/rpcbind
udp6 0 0 [::]:45289 [::]:* 739/avahi-daemon: r
udp6 0 0 [::]:57589 [::]:* 2514/rpc.mountd
udp6 0 0 [::]:707 [::]:* 966/rpcbind
udp6 0 0 [::]:37709 [::]:* 2514/rpc.mountd
/etc/xinetd.d/中没有 tftp 配置文件
防火墙被禁用。ufw 状态 = 不活动
iptables -L -v
Chain INPUT (policy DROP 0 packets, 0 bytes) pkts bytes target prot opt in out source destination
2 656 ACCEPT udp -- eth1 any anywhere anywhere udp dpt:bootps
0 0 ACCEPT tcp -- eth1 any anywhere anywhere tcp dpt:bootps
0 0 ACCEPT udp -- eth1 any anywhere anywhere udp dpt:domain
0 0 ACCEPT tcp -- eth1 any anywhere anywhere tcp dpt:domain
36569 3800K ACCEPT all -- lo any anywhere anywhere
30392 20M ACCEPT tcp -- any any anywhere anywhere state RELATED,ESTABLISHED
2704 679K ACCEPT udp -- any any anywhere anywhere state RELATED,ESTABLISHED
0 0 ACCEPT 254 -- ipsec+ any anywhere anywhere
0 0 ACCEPT esp -- any any anywhere anywhere
0 0 ACCEPT ah -- any any anywhere anywhere
0 0 ACCEPT udp -- any any anywhere anywhere udp dpt:isakmp
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:ssh
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:cfengine
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:5900
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:5901
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:12080
0 0 REJECT tcp -- any any anywhere anywhere tcp dpt:auth reject-with icmp-port-unreachable
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:https
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:5656
0 0 ACCEPT udp -- any any anywhere anywhere udp dpts:5004:5005
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpts:5004:5005
0 0 ACCEPT udp -- any any anywhere anywhere udp dpt:20830
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:20830
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpts:sip:5062
0 0 ACCEPT udp -- any any anywhere anywhere udp dpts:sip:5062
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:21100
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:2001
0 0 ACCEPT gre -- any any anywhere anywhere
0 0 ACCEPT icmp -- any any anywhere anywhere icmp destination-unreachable
0 0 ACCEPT icmp -- any any anywhere anywhere icmp source-quench
689 56460 ACCEPT icmp -- any any anywhere anywhere icmp time-exceeded
0 0 ACCEPT icmp -- any any anywhere anywhere icmp parameter-problem
0 0 ACCEPT icmp -- any any anywhere anywhere icmp router-advertisement
0 0 ACCEPT icmp -- any any anywhere anywhere icmp echo-request
13 832 ACCEPT icmp -- any any anywhere anywhere icmp echo-reply
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:tproxy
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:1533
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpts:30000:30005
0 0 DROP tcp -- any any anywhere anywhere tcp dpts:bootps:bootpc
6 1968 DROP udp -- any any anywhere anywhere udp dpts:bootps:bootpc
0 0 DROP tcp -- any any anywhere anywhere tcp dpt:netbios-ns
0 0 DROP udp -- any any anywhere anywhere udp dpt:netbios-ns
0 0 DROP tcp -- any any anywhere anywhere tcp dpt:netbios-dgm
0 0 DROP udp -- any any anywhere anywhere udp dpt:netbios-dgm
0 0 DROP tcp -- any any anywhere anywhere tcp dpt:netbios-ssn
0 0 DROP udp -- any any anywhere anywhere udp dpt:netbios-ssn
0 0 DROP tcp -- any any anywhere anywhere tcp dpts:tcpmux:ftp-data
0 0 DROP tcp -- any any anywhere anywhere tcp dpt:sunrpc
0 0 DROP tcp -- any any anywhere anywhere tcp dpts:snmp:snmp-trap
0 0 DROP tcp -- any any anywhere anywhere tcp dpt:520
0 0 DROP tcp -- any any anywhere anywhere tcp dpts:6348:6349
0 0 DROP tcp -- any any anywhere anywhere tcp dpts:6345:gnutella-rtr
75 3256 LOG tcp -- any any anywhere anywhere limit: avg 3/min burst 5 LOG level debug prefix "FIREWALL: "
1459 263K LOG udp -- any any anywhere anywhere limit: avg 3/min burst 5 LOG level debug prefix "FIREWALL: "
3347 568K DROP all -- any any anywhere anywhere
0 0 ACCEPT udp -- any any anywhere anywhere udp dpt:tftp state NEW,ESTABLISHED
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:69 state NEW,ESTABLISHED
Chain FORWARD (policy DROP 0 packets, 0 bytes) pkts bytes target prot opt in out source destination
0 0 ACCEPT all -- any eth1 anywhere 10.42.0.0/24 state RELATED,ESTABLISHED
0 0 ACCEPT all -- eth1 any 10.42.0.0/24 anywhere
0 0 ACCEPT all -- eth1 eth1 anywhere anywhere
0 0 REJECT all -- any eth1 anywhere anywhere reject-with icmp-port-unreachable
0 0 REJECT all -- eth1 any anywhere anywhere reject-with icmp-port-unreachable
Chain OUTPUT (policy ACCEPT 68593 packets, 6962K bytes) pkts bytes target prot opt in out source destination
0 0 ACCEPT tcp -- any any anywhere anywhere tcp dpt:69 state NEW,ESTABLISHED
1 45 ACCEPT udp -- any any anywhere anywhere udp dpt:tftp state NEW,ESTABLISHED
作为客户端的传出 tftp 请求也被阻止。我的 IP 是 192,168.0.5 尝试连接到 192.168.0.2
tftp 192.168.0.2
tftp> verbose on
Verbose mode on.
tftp> status
Connected to 192.168.0.2.
Mode: netascii Verbose: on Tracing: off Literal: off
Rexmt-interval: 5 seconds, Max-timeout: 25 seconds
tftp> put hello
putting hello to 192.168.0.2:hello [netascii]
Transfer timed out.
我的路由器有问题吗？有没有我需要处理的设置，但是即使我使用以太网电缆将客户端直接连接到服务器，这个问题仍然存在。我厌倦了 BeagleBone Black、MACbook 和我的 Android 手机作为 tftp 客户端向服务器提出请求。
客户端：10.42.0.89（BeagleBlack，在 u-boot）服务器：10.42.0.1
我现在用wireshark嗅探以太网数据包。
ARP：
32 927.886269000 10.42.0.89 Broadcast ARP 60 Who has 10.42.0.1? Tell 10.42.0.89
33 927.886320000 50:7b:9d:f9:44:5d 10.42.0.89 ARP 42 10.42.0.1 is at 50:7b:9d:f9:44:5d
在此之后，我只看到从客户端启动，没有任何结果。
36 932.887008000 10.42.0.89 10.42.0.1 TFTP 79 Read Request, File: hello, Transfer type: octet, timeout\000=5\000, blksize\000=1468\000
我有大量文件存储在 AWS S3 存储桶中。我需要将这些文件放到另一个用户拥有的另一个 S3 存储桶中，并且位于不同的区域。这些文件存储在我的 S3 存储桶中的不同位置——这些密钥（例如location1& location2）也需要传输过来。两个 S3 存储桶都与 AWS EC2 Ubuntu 服务器相关联。这是我的 S3 存储桶的结构示例：
s3://mybucket/location1/some_file
s3://mybucket/location1/some_file2
s3://mybucket/location2/some_file
etc...
考虑到这些限制，哪种方法将文件从 S3 传输到 S3 最有效？