AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / server / Perguntas / 704443
Accepted
starbeamrainbowlabs
starbeamrainbowlabs
Asked: 2015-07-09 12:03:10 +0800 CST2015-07-09 12:03:10 +0800 CST 2015-07-09 12:03:10 +0800 CST

tar usa muita memória para seu buffer - solução alternativa?

  • 772

Estou tarcompactando e compactando vários arquivos e diretórios no meu Ubuntu Server VPS para um backup. Ele tem apenas 1 GB de RAM e 128 MB de Swap (não posso adicionar mais - a OVH usa o OpenVZ como software de virtualização) e toda vez tarque é executado, ele usa uma tonelada de memória para o buffer, fazendo com que todo o resto seja trocado - mesmo ao usar nice -n 10.

Existe alguma maneira de forçar taro uso de um buffer pequeno e reduzir o uso de memória? Estou preocupado que, quando o backup atingir um determinado tamanho, meu servidor cairá porque tarnão terá memória suficiente para seu buffer.

Estou usando bzip2para compactar e já limitei o uso de memória com a -4opção.

Edit: Aqui está o que htopparece quando eu tarcorri por um tempo:

insira a descrição da imagem aqui

Aqui está um link para o gif completo

Editar 2: Aqui está o comando tar que estou usando:

nice -n 20 tar --exclude "*node_modules*" --exclude "*.git/*" --exclude "/srv/www-mail/rainloop/v*"  -cf archive.tar /home /var/log /var/mail /srv /etc
backup
  • 1 1 respostas
  • 7150 Views

1 respostas

  • Voted
  1. Best Answer
    shodanshok
    2015-07-10T12:14:34+08:002015-07-10T12:14:34+08:00

    Sua imagem mostra exatamente o contrário, na verdade.

    Como você pode ver na coluna RES, taro consumo de memória é bastante baixo. Seu uso de RAM parece aumentar simplesmente porque o Linux está armazenando ativamente os dados lidos pelo comando tar. Isso, por sua vez, causa pressão de memória e write-back de página suja (basicamente, o sistema libera seu cache de gravação para acomodar o maior cache de leitura necessário) e, possivelmente, dados úteis são removidos do cache de E/S.

    Infelizmente, parece que tarele mesmo não pode ser instruído a usar O_DIRECT ou POSIX_FADVISE (ambos podem ser usados ​​para "ignorar" o cache). Então, usar tarthere não é uma solução real aqui...

    • 2

relate perguntas

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Você pode passar usuário/passar para autenticação básica HTTP em parâmetros de URL?

    • 5 respostas
  • Marko Smith

    Ping uma porta específica

    • 18 respostas
  • Marko Smith

    Verifique se a porta está aberta ou fechada em um servidor Linux?

    • 7 respostas
  • Marko Smith

    Como automatizar o login SSH com senha?

    • 10 respostas
  • Marko Smith

    Como posso dizer ao Git para Windows onde encontrar minha chave RSA privada?

    • 30 respostas
  • Marko Smith

    Qual é o nome de usuário/senha de superusuário padrão para postgres após uma nova instalação?

    • 5 respostas
  • Marko Smith

    Qual porta o SFTP usa?

    • 6 respostas
  • Marko Smith

    Linha de comando para listar usuários em um grupo do Windows Active Directory?

    • 9 respostas
  • Marko Smith

    O que é um arquivo Pem e como ele difere de outros formatos de arquivo de chave gerada pelo OpenSSL?

    • 3 respostas
  • Marko Smith

    Como determinar se uma variável bash está vazia?

    • 15 respostas
  • Martin Hope
    Davie Ping uma porta específica 2009-10-09 01:57:50 +0800 CST
  • Martin Hope
    kernel O scp pode copiar diretórios recursivamente? 2011-04-29 20:24:45 +0800 CST
  • Martin Hope
    Robert ssh retorna "Proprietário incorreto ou permissões em ~/.ssh/config" 2011-03-30 10:15:48 +0800 CST
  • Martin Hope
    Eonil Como automatizar o login SSH com senha? 2011-03-02 03:07:12 +0800 CST
  • Martin Hope
    gunwin Como lidar com um servidor comprometido? 2011-01-03 13:31:27 +0800 CST
  • Martin Hope
    Tom Feiner Como posso classificar a saída du -h por tamanho 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich O que é um arquivo Pem e como ele difere de outros formatos de arquivo de chave gerada pelo OpenSSL? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent Como determinar se uma variável bash está vazia? 2009-05-13 09:54:48 +0800 CST

Hot tag

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve