AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 678806
Accepted
Philip Couling
Philip Couling
Asked: 2021-11-24 14:11:20 +0800 CST2021-11-24 14:11:20 +0800 CST 2021-11-24 14:11:20 +0800 CST

Como o kernel decide entre cache de disco e swap?

  • 772

Seguindo os tópicos levantados em outras questões, acredito que quando o Linux Kernel está tentando liberar RAM física, ele toma algum tipo de decisão entre descartar páginas de seu cache de disco ou liberar outras páginas para swap. Não tenho certeza disso, talvez eu tenha entendido mal o mecanismo.

Em qualquer caso, há sinergia entre:

  • o kernel mantendo seu próprio cache de disco interno
  • programas arquivos de mapeamento de memória
  • memória de aplicativo "regular" sendo colocada em um arquivo de troca

Todos os três podem ser usados ​​para liberar RAM física, todos os três dependem de gravar páginas "sujas" no disco ou simplesmente saber que as páginas já estão duplicadas no disco e descartá-las da alocação física de RAM.


Com o espaço de troca, partições e arquivos de troca individuais podem ter prioridade para que dispositivos mais rápidos sejam usados ​​antes de dispositivos mais lentos. Não tenho conhecimento de tais configurações para outros dispositivos que não sejam de troca.

Minha pergunta é: Como o Kernel decide qual RAM liberar?

  • É puramente baseado no último acesso?
  • O Kernel usa todos os três acima igualmente?
    • existe alguma priorização entre eles (e discos individuais)
    • é configurável?

Esta pergunta é impulsionada por experiências semelhantes a esta, mas quero que essa pergunta se concentre no mecanismo subjacente NÃO na solução de um problema específico.

linux memory
  • 1 1 respostas
  • 428 Views

1 respostas

  • Voted
  1. Best Answer
    Stephen Kitt
    2021-12-11T05:35:54+08:002021-12-11T05:35:54+08:00

    O nome dado à tarefa geral de liberar páginas físicas de memória é recuperação e abrange várias tarefas. A recuperação é principalmente impulsionada por alocações de página, com vários níveis de urgência. Em um sistema descarregado, as alocações de página podem ser satisfeitas sem esforço e não acionam nenhuma recuperação. Em sistemas carregados moderadamente, as alocações de página ainda podem ser satisfeitas imediatamente, mas também farão kswapdcom que sejam despertadas para executar a recuperação de segundo plano. Em sistemas carregados em que as alocações de página não podem mais ser atendidas imediatamente, a recuperação é executada de forma síncrona.

    Páginas recuperáveis ​​são páginas que armazenam conteúdo que pode ser encontrado ou disponibilizado em outro lugar. É aqui que entra em jogo o típico ato de equilíbrio: memória cujo conteúdo também está em arquivos (ou deveria terminar em arquivos), v. memória cujo conteúdo não está (e precisa ser trocado). As primeiras são armazenadas no cache de página, as últimas não, razão pela qual as explicações de balanceamento geralmente falam sobre cache de página vs. swap.

    A decisão de favorecer um sobre o outro é determinada em um único local no kernel, get_scan_count, controlado pelas configurações em struct scan_control. A finalidade desta função é descrita a seguir:

    Determine com que agressividade as listas de LRU de arquivo e anon devem ser verificadas. O valor relativo de cada conjunto de listas LRU é determinado observando a fração das páginas digitalizadas que giramos de volta para a lista ativa em vez de despejar.

    Talvez surpreendentemente para uma função chamada get_..., isso não usa um valor de retorno; em vez disso, ele preenche a matriz apontada pelo unsigned long *nrponteiro, com quatro entradas correspondentes a páginas inativas anônimas (páginas sem suporte, não usadas recentemente), páginas ativas anônimas (páginas sem suporte, usadas recentemente), arquivo inativo páginas (páginas não usadas recentemente no cache de página) e páginas ativas de arquivo (páginas usadas recentemente no cache de página).

    get_scan_countcomeça recuperando o valor de “swappiness” apropriado, de mem_cgroup_swappiness. Se o cgroup de memória atual for um cgroup v1 não-root habilitado, sua configuração de swappiness é usada; caso contrário, é o infame /proc/sys/vm/swappiness. Ambas as configurações compartilham o mesmo propósito ; eles dizem ao kernel

    o custo de IO relativo de trazer de volta uma página anônima trocada versus recarregar uma página do sistema de arquivos

    Antes de realmente usar esse valor, get_scan_countdetermina a estratégia geral que deve ser aplicada:

    • se não houver troca, ou páginas anônimas não puderem ser recuperadas no contexto atual, ele irá atrás apenas de páginas com suporte de arquivo;
    • se o cgroup de memória desabilita totalmente a troca, ele irá somente após as páginas com suporte de arquivo;
    • se o swappiness não estiver desabilitado (definido como 0) e o sistema estiver quase sem memória, ele seguirá todas as páginas igualmente;
    • se o sistema estiver quase sem páginas de arquivo, ele irá atrás apenas de páginas anônimas;
    • se houver cache de página inativa suficiente, ele irá atrás apenas de páginas com backup de arquivo;
    • em todos os outros casos, ajusta o “peso” dado às várias LRUs dependendo do custo de I/O correspondente.

    Depois de determinar a estratégia, ele itera sobre todas as LRUs elimináveis ​​(anônimas inativas, anônimas ativas, apoiadas por arquivos inativos, apoiadas por arquivos ativos, nessa ordem) para determinar quantas páginas de cada uma devem ser verificadas; Vou ignorar v1 cgroups:

    • se a estratégia for “ir atrás de todas as páginas igualmente”, todas as páginas em todas as LRUs são passíveis de serem digitalizadas, até o tamanho determinado pelo fator scan_controlde deslocamento de ;priority
    • se a estratégia for “ir atrás somente de páginas com suporte de arquivo” ou “ir atrás somente de páginas anônimas”, todas as páginas nas LRUs correspondentes são candidatas (novamente, deslocadas por priority), nenhuma nas outras LRUs;
    • caso contrário, os valores são ajustados de acordo com a swappiness.

    A varredura de página real é conduzida por shrink_lruvec, que usa os comprimentos de varredura determinados acima e reduz repetidamente as LRUs até que os destinos sejam alcançados (ajustando os destinos à medida que avança de várias maneiras). Feito isso, as LRUs ativas/inativas são reequilibradas.

    Voltando às suas perguntas:

    • o cache de página e os arquivos mapeados na memória são tratados igualmente;
    • a recuperação de página não se baseia puramente no último acesso (não expliquei como as LRUs são usadas ou como funciona o rebalanceamento; leia o capítulo correspondente em Entendendo o Gerenciador de Memória Virtual Linux de Mel Gorman para obter detalhes);
    • o kernel não os usa igualmente; eles são priorizados de forma diferente com base nas circunstâncias e podem ser configurados por meio de vários controles ( swappiness, cgroups, limites de marca d'água baixos...).

    A prioridade de troca só determina para onde uma página vai depois que for decidido trocá-la. (Aliás, a swappinessdocumentação e as explicações acima devem deixar claro que não há granularidade suficiente no custo de E/S para lidar bem com configurações mistas de troca de ZRAM/disco...)

    Há muito mais para explicar, incluindo como scan_controlé configurado, mas suspeito que isso já seja muito longo! Se você deseja rastrear o custo de recuperação, pode vê-lo na contabilidade de atraso de tarefa (consulte também struct taskstats).

    • 4

relate perguntas

  • Inicie/pare o serviço systemd usando o atalho de teclado [fechado]

  • Necessidade de algumas chamadas de sistema

  • Um processo pode alocar memória cache de forma que o kernel possa aproveitá-la quando necessário?

  • astyle não altera a formatação do arquivo de origem

  • Passe o sistema de arquivos raiz por rótulo para o kernel do Linux

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve