我有客户将大量数据上传到我的 FTP 服务器(一台 Ubuntu 9.10 机器)。文件上传后,我需要将它们传输到本地 Droboshare 网络驱动器,以便我们的技术支持人员可以检索它们并分析问题。
在我挂载网络共享后,/media/<sharename>
我手动运行此命令以获取这些文件:
sudo mv /home/ftp/<data_dir>/<file_name> /media/<network_share>/<ftp_user_data>
但这需要很长时间,如果有数十或数百个文件,我实际上无法一遍又一遍地这样做。我认为有一个脚本可以很好地运行 periodaclly 将一组这些文件传输到网络共享。我可以在技术支持人员使用它们时对它们进行分类。
我对 Linux 和编写 shell 脚本仍然很陌生。无论如何要轻松做到这一点?只是为了在此处添加描述,文件可以是ZIP 文件、FASTA 文件、TAR.GZ 文件和/或TXT 文件。此外,如果 ZIP 文件很大,某些压缩程序会将它们转换为ZIP.001、ZIP.002、ZIP.003等......所以这个 FTP 目录中的文件类型可能会非常不同。
我在想我可以识别这些文件的方法是通过简单地传输目录中的所有文件(尽管这可能需要一段时间)或者根据完成的时间或类似的东西来指定其中的一个子集。
我对想法持开放态度。提前致谢。
为什么不直接将 FTP 文件夹作为网络驱动器的实际挂载点?我遇到了一个类似的问题,我不断地将 Linux 机器上的 VirtualMachines 备份到 Windows 网络共享(因为公司的大部分基础设施都是 Windows)。这是我的结构:
/media/windows-share
是我的挂载点为了连续性,我在备份应用程序中创建了一个符号链接:
/opt/backup/mnt
因此,如果将来安装点发生更改,我的程序不需要更新。最后,我使用了一个很酷的小工具,称为
autofs
(sudo apt-get install autofs
) 该指南很不错(并且是最新的)——尽管我在博客上使用了这个稍有不同的方法。在您的情况下,我将创建一个符号链接,其中我的 FTP 保管箱位于 (
/home/ftp/<data_dir>/
) 到相应的网络文件夹/media/<network_share>/<ftp_user_data>
,这样就不会浪费时间跨磁盘传输并且文件立即可用。对于从这里到那里(或从那里到这里)复制文件,rsync是一个瑞士军用电锯,它可能会做你想做的事。
您可以尝试使用诸如 inotify 之类的技术在文件上传到 FTP 后立即对其进行处理。
inoticoming
是您可以使用的工具,请参阅http://manpages.ubuntu.com/manpages/lucid/man1/inoticoming.1.html。