AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 755655
Accepted
bodqhrohro
bodqhrohro
Asked: 2023-09-04 05:02:33 +0800 CST2023-09-04 05:02:33 +0800 CST 2023-09-04 05:02:33 +0800 CST

Existe algum sistema de arquivos com reparo de dados integrado por meio de somas de verificação?

  • 772

Eu li que o ZFS/BtrFS tem uma verificação de soma de verificação, mas eles não a usam para recuperação de dados, apenas para recuperar dados de uma cópia local completa ou de uma cópia espelhada.

Por outro lado, os arquivos RAR suportam redundância de dados por muito tempo, com quantidade configurável. Quanto maior o valor, maior é a probabilidade de uma recuperação bem-sucedida. O mesmo vale para o Dvdisaster, que é capaz de criar arquivos .ecc com dados de recuperação, mas em uma mídia separada.

Muitas mídias avançadas, como discos ópticos ou discos rígidos, possuem uma verificação ECC de baixo nível implementada em um controlador de unidade, portanto não é tão necessária em níveis mais altos de abstração. Mas outros, como cartões microSD baratos, podem não ter esse recurso e são perceptivelmente não confiáveis.

Portanto, há verificações de ECC no nível de hardware e no nível de aplicativo, mas há algum sistema de arquivos apoiado por ECC?

filesystems
  • 2 2 respostas
  • 45 Views

2 respostas

  • Voted
  1. Marcus Müller
    2023-09-04T23:46:55+08:002023-09-04T23:46:55+08:00

    O Linux possui a camada dm-integrity com a qual você pode adicionar correção de erros a qualquer dispositivo de bloco.

    Infelizmente, será relativamente ruim resolver os problemas que os cartões SD não confiáveis ​​​​representam:

    O modo de falha mais típico é... simplesmente não funcionar mais. Isso normalmente acontece quando a quantidade de nivelamento de desgaste que a memória fisicamente disponível foi capaz de sustentar se esgota. Não há nada que você possa fazer a respeito, a não ser escrever e ler menos. Adicionar informações de codificação de erros é, contra-intuitivamente, prejudicial, porque você amplifica a quantidade de dados que escreve e lê. Mas isso é apenas uma amplificação de 1/r, sendo r a taxa do código.

    Depois que o cartão SD aplica sua correção de erros integrada, os dados que você lê estão corretos ou os erros são locais de bloco e correlacionados. Se precisar corrigi-los, você terá que usar um código cujos blocos abrangem vários blocos lógicos do cartão SD. Novamente, isso significa uma amplificação de leitura e gravação, mas desta vez por um fator inteiro de pelo menos dois. Então, isso é significativamente pior.

    Portanto, com toda a honestidade, se o seu problema for o armazenamento flash não confiável, a resposta apropriada é lidar com isso entre o flash físico e o ponto onde as coisas aparecem como blocos de memória no seu sistema de armazenamento. Em outras palavras, na camada de tradução flash do cartão SD; isso também permitiria aplicar decodificação suave para ganho de codificação adicional e poderia usar códigos projetados para o canal assimétrico (normalmente: um canal Z!!) que a memória flash representa, no nível mais baixo - essas são propriedades perdidas durante a decodificação /decisão e desintercalação acontecendo no próprio FTL. Essa perda será difícil de compensar com os dados obtidos do cartão SD.

    Você escolheria diretamente um código que atendesse aos seus requisitos de confiabilidade. O problema com isso é que quanto pior for a memória flash física e quanto mais confiável você deseja que o armazenamento se comporte, menor será a taxa de código, o que significa que você precisará de mais células flash para um pouco de dados. Essa é exatamente a compensação que torna qualquer dispositivo de armazenamento baseado em flash barato e menos confiável ou caro e mais confiável.

    Portanto, com cartões SD não confiáveis, você basicamente perdeu. Pode haver uma janela em que um pouco de codificação em seu PC possa corrigir erros sem tornar os erros mais prováveis ​​​​do que isso evita, mas você realmente precisaria realizar um grande estudo sobre quanto tempo leva para fazer seu cartão SD falhar antes que você pudesse estabeleça uma taxa para isso. O que não vale a pena - você não está comprando 100.000 cartões da mesma fábrica apenas para descobrir como torná-los 0,1% mais confiáveis. Você apenas compraria ou solicitaria cartões mais confiáveis.

    Desculpe.

    O que você poderia fazer é adicionar redundância verdadeira usando placas independentes em um esquema de paridade ou espelhamento de balanceamento de dados, mas as advertências usuais para qualquer tipo de RAID se aplicam: você precisa ter certeza de que no momento em que precisar restaurar um dos subjacentes volumes dos outros, não é tarde demais e a intensa carga de leitura de recuperação revela ou até causa erros adicionais, infelizmente incorrigíveis. Novamente, cartões SD baratos são a pior escolha comercialmente disponível para isso, porque a qualidade das informações sobre confiabilidade é baixa, assim como a confiabilidade de seus dispositivos individuais.

    Concluindo, não vejo realmente um cenário prático em que você queira criar armazenamento confiável com cartões SD não confiáveis.

    • 2
  2. Best Answer
    Richard T
    2023-09-04T08:40:39+08:002023-09-04T08:40:39+08:00

    Sim, eles são chamados, coletivamente, de "RAID": Redundant Array of Independent Disks.

    O melhor que existe para configurações NÃO-RAID inclui EXT4 no Linux. Acredito que existam outros. Mas isso não os corrige, mas sim detecta erros ao escrever, acredito.

    • 1

relate perguntas

  • Qual sistema de arquivos devo usar em um cartão SD em um NAS?

  • Como saber antecipadamente se um .zip tem um diretório pai dentro

  • Disco alocado dinamicamente do Virtualbox *.vdi continua crescendo

  • du/df e ls relatando diferentes usos de disco

  • Como os desenvolvedores do kernel Linux lidam com seu trabalho com milhões de linhas de código? É um método? [fechado]

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve