AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / server / Perguntas / 870355
Accepted
Franz Kafka
Franz Kafka
Asked: 2017-08-25 13:28:38 +0800 CST2017-08-25 13:28:38 +0800 CST 2017-08-25 13:28:38 +0800 CST

Como comparar o desempenho do XFS com um grande número de arquivos?

  • 772

Eu tenho um único servidor executando algum código que cria milhões de pequenos arquivos em um único diretório. No início, o código é executado extremamente rápido. Depois de um dia ou mais, ele começa a desacelerar um pouco. Estou tentando descobrir se isso é um problema com o código ou se é um problema com o número de arquivos no diretório.

O próprio código cria um arquivo se não existir, então abre o arquivo e grava uma única linha nele. Se o arquivo existir, ele abrirá o arquivo e anexará uma única linha a ele.

Dito isso, tenho feito benchmarking do meu código e feito as alterações necessárias, mas gostaria de fazer benchmarking do XFS também para ver se esse é o gargalo. Minha pergunta é: como faço para comparar o desempenho de leitura/gravação do XFS?

linux
  • 1 1 respostas
  • 564 Views

1 respostas

  • Voted
  1. Best Answer
    John Mahowald
    2017-08-27T02:57:33+08:002017-08-27T02:57:33+08:00

    Comece com seu aplicativo e entenda como ele funciona.

    • Adicione instrumentação ao seu código para que você possa medir quanto tempo as tarefas demoram.
    • Monitore as métricas do sistema operacional do host, como IOPS de CPU e armazenamento.
    • Sistema de arquivos e tempo de resposta do dispositivo de bloco com rastreamento dinâmico como xfsslowerebioslower
    • Capture perfis com ferramentas como perf recordpara que você possa ver o que está em alta na CPU com visualizações de gráfico de chama. Experimente com símbolos de depuração para programas do kernel e do usuário.

    Milhões de arquivos em um diretório geralmente não é uma boa ideia. Mesmo que seja suportado, você obtém metadados de diretório gigantes que levam muito tempo para serem listados. Considere seu aplicativo criando uma estrutura de diretórios que limita os arquivos por diretório a alguns milhares.

    • 1

relate perguntas

  • Como descobrir detalhes sobre hardware na máquina Linux?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Você pode passar usuário/passar para autenticação básica HTTP em parâmetros de URL?

    • 5 respostas
  • Marko Smith

    Ping uma porta específica

    • 18 respostas
  • Marko Smith

    Verifique se a porta está aberta ou fechada em um servidor Linux?

    • 7 respostas
  • Marko Smith

    Como automatizar o login SSH com senha?

    • 10 respostas
  • Marko Smith

    Como posso dizer ao Git para Windows onde encontrar minha chave RSA privada?

    • 30 respostas
  • Marko Smith

    Qual é o nome de usuário/senha de superusuário padrão para postgres após uma nova instalação?

    • 5 respostas
  • Marko Smith

    Qual porta o SFTP usa?

    • 6 respostas
  • Marko Smith

    Linha de comando para listar usuários em um grupo do Windows Active Directory?

    • 9 respostas
  • Marko Smith

    O que é um arquivo Pem e como ele difere de outros formatos de arquivo de chave gerada pelo OpenSSL?

    • 3 respostas
  • Marko Smith

    Como determinar se uma variável bash está vazia?

    • 15 respostas
  • Martin Hope
    Davie Ping uma porta específica 2009-10-09 01:57:50 +0800 CST
  • Martin Hope
    kernel O scp pode copiar diretórios recursivamente? 2011-04-29 20:24:45 +0800 CST
  • Martin Hope
    Robert ssh retorna "Proprietário incorreto ou permissões em ~/.ssh/config" 2011-03-30 10:15:48 +0800 CST
  • Martin Hope
    Eonil Como automatizar o login SSH com senha? 2011-03-02 03:07:12 +0800 CST
  • Martin Hope
    gunwin Como lidar com um servidor comprometido? 2011-01-03 13:31:27 +0800 CST
  • Martin Hope
    Tom Feiner Como posso classificar a saída du -h por tamanho 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich O que é um arquivo Pem e como ele difere de outros formatos de arquivo de chave gerada pelo OpenSSL? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent Como determinar se uma variável bash está vazia? 2009-05-13 09:54:48 +0800 CST

Hot tag

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve