AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 551849
Accepted
lessharm
lessharm
Asked: 2019-11-13 15:03:31 +0800 CST2019-11-13 15:03:31 +0800 CST 2019-11-13 15:03:31 +0800 CST

使用 ratarmount 降低 ram 使用率

  • 772

问题总结:有什么办法可以降低ratarmount的ram使用率吗?哪些因素会影响 ram 的使用(除了 tar 大小)?

编辑/澄清问题:我可以使用什么方法将常驻内存减少到最低限度?

我的情况:

  • 我正在使用 ratarmount 挂载大量 tar 文件(例如,800gb 是我拥有的最大的文件)。
  • 我有一台带有 6x6tb 驱动器、20 个内核和 256gb 内存的服务器。
  • 我安装了大约 20-25tb 的这些类型的 tar 文件
  • 安装了上述数量的 tar 文件后,我刚刚达到了服务器上的最大内存量 ~250gb
  • tar 文件有大量(可能数亿)小文件和文件夹。

我的问题: Ratarmount 现在已经达到了 240gb 的 ram 使用量,并且几乎耗尽了我的服务器 ram。我仍然需要安装另外 5-10tb 的 tar 文件。

它似乎与它使用多少内存有点不一致。例如,第一次挂载时,它最终会使用比从索引文件挂载更多的内存。对我来说,我可以尝试什么来降低效率,这对我来说有点神秘。接受任何想法。我需要将内存使用量减少约 25% 才能完成我的项目。

旁注......我看到这个用户创建了ratarmount。它是一个非常棒的程序,完全救了我,但我不知道如何抓住他,也不知道如何在此处或 github 上联系到某人的既定/可接受的方式

mount
  • 1 1 个回答
  • 149 Views

1 个回答

  • Voted
  1. Best Answer
    Ole Tange
    2019-11-15T00:01:08+08:002019-11-15T00:01:08+08:00

    我刚刚测试ratarmount了一个包含 10M 文件的文件。如果您没有主动stating 所有文件,ratarmount最终将换出。

    因此,一个非常简单的解决方案是为您的服务器添加交换空间。如果您使用zswap,您甚至可以避免接触物理磁盘。

    我还证实了您的观察,即进行索引+挂载比简单地挂载需要更多的内存。这意味着存在内存泄漏ratarmount(可能数据结构被复制并且不需要的副本没有被破坏)。因此,您可以通过 index+mount 将数据使用量降至最低,然后立即 umount 然后再次安装。

    • 2

相关问题

  • 使用 LVM 永久挂载目录

  • 阻止损坏的 NFS 挂载锁定 solaris 11.3 中的目录?

  • 如何在 solaris 11.3 中挂载 zfs 驱动器分区

  • 阻止挂载系统调用

  • 将局域网硬盘挂载到 linux fedora

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve