AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / user-24141

Tim's questions

Martin Hope
Tim
Asked: 2019-01-26 20:56:48 +0800 CST

Usando exec 3> para manter um pipe nomeado aberto

  • 7

A leitura do processo de um pipe nomeado normalmente terminará quando a gravação do processo no pipe terminar a gravação (envia um EOF). Em determinadas situações, você pode ter diferentes processos gravando intermitentemente no pipe e deseja que um único processo leia continuamente do pipe. Para fazer isso, você pode configurar um escritor 'fictício' que abre o pipe, mas não grava nele:

$ mkfifo myPipe
$ cat > myPipe &

O gravador fictício mantém o pipe nomeado aberto - sem alimentar dados nele ou nunca fechar. O processo de leitura é, portanto, capaz de receber entrada de todos os (outros) escritores legítimos sem terminar e ter que ser reaparecido.

Eu vi algumas pessoas usarem exec 3>em vez de catcomo uma maneira de manter o pipe nomeado aberto.

$ mkfifo myPipe
$ cat < myPipe &
[1] 10796
$ exec 3> myPipe
$ echo "blah" > myPipe
blah

Essa abordagem parece funcionar, e você não tem um escritor fictício em segundo plano para se preocupar (ou limpar), então eu gosto. O problema é que eu realmente não entendo.

Como está exec 3>realizando a tarefa de manter o pipe nomeado aberto sem um arquivo real a ser executado ou um processo visível (em segundo plano), e existem desvantagens nessa abordagem?

(Sei que, em última análise, deve estar abrindo o descritor de arquivo de entrada do pipe nomeado para gravação, então estou especificamente interessado no que a exec 3parte de exec 3>está fazendo.)

fifo exec
  • 1 respostas
  • 4503 Views
Martin Hope
Tim
Asked: 2018-04-30 14:05:02 +0800 CST

O Duplicity modifica um horário ao fazer backup?

  • 1

Meus dados residem em um SSD e - graças às reescritas e à amplificação de gravação - qualquer modificação de um atime resultará não apenas na modificação do inode, mas em todo o bloco em que ele reside sendo apagado e reescrito. Isso é, obviamente, indesejável, pois causaria uma grande quantidade de desgaste desnecessário na unidade.

Quando o Duplicity faz backup de arquivos, ele modifica o atributo atime dos arquivos de origem no processo?

Se ele modificar o atime, isso será feito no backup inicial (completo), nos backups incrementais ou em ambos?

backup ssd
  • 2 respostas
  • 366 Views
Martin Hope
Tim
Asked: 2018-04-30 00:10:53 +0800 CST

Fazer backup em um SSD local demorando muito mais do que o esperado

  • 1

Em um novo sistema Ubuntu 18.04, decidi dar uma chance ao Deja-Dup. É apenas uma GUI para Duplicity (que usa rsync). Cerca de 850 GB de dados precisavam de backup. O SSD de origem era NVMe. O SSD de destino era SATA. O backup inicial (completo) levou cerca de 7 horas.

No dia seguinte, não fiz nada além de verificar o e-mail e instalar um aplicativo - que adicionou ~ 230 MB - antes de executar o Deja-Dup novamente.

O Deja-Dup funcionou por aproximadamente 39 minutos carregando um único núcleo em 35–70% durante toda a duração.

A duplicidade foi invocada três vezes:

  • A fase de digitalização fixou um núcleo em 100% por 18 minutos.
  • A fase de backup fixou um núcleo em 100% por 16 minutos.
  • A fase de verificação fixou um núcleo em 100% por 5 minutos.

Isso está em um novo computador com bastante RAM. O backup não foi criptografado.

Agora, espero que os backups iniciais (completos) demorem um pouco, e tudo bem. O que eu não espero é que ~ 230 MB de novos dados levem ~ 39 minutos para serem copiados (e consumam mais de uma hora de núcleo coletiva de tempo de CPU).

Algo está errado ou quebrado? Os backups incrementais de algumas centenas de megabytes devem levar tanto tempo para serem executados? Eu esperava algo em menos de 5 minutos, não ~39. Por que demora tanto tempo?

(Se eu tivesse um SSD SATA de 1 TB sobressalente, eu o conectaria e apenas sincronizaria os dados diretamente para ver se isso é visivelmente mais rápido - mas infelizmente não tenho.)

Atualização 1: executei um backup manual após alterações insignificantes (alguns KB de novos e-mails) e o tempo gasto foi o mesmo (~ 39 minutos). Assim, o tempo gasto parece ter pouco a ver com a quantidade de novos dados que precisam ser copiados.

Atualização 2: o monitoramento com iotop revelou que a fase de verificação lê 7,36 GB da unidade. Agora, obviamente, não são todos os 850 GB ... mas não está muito longe do número que você obtém se multiplicar o número de arquivos na unidade de origem (1174000) pelo tamanho do bloco/cluster (4096) - ou seja, 4,81 GB. Não tenho certeza de como contabilizar os 2,5 GB restantes, se esse for o caso.

backup rsync
  • 1 respostas
  • 1441 Views

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve