AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 319437
Accepted
padjee
padjee
Asked: 2022-11-10 22:20:51 +0800 CST2022-11-10 22:20:51 +0800 CST 2022-11-10 22:20:51 +0800 CST

WALs aumentam por algum motivo

  • 772

Isso é novo para mim. Já procurei na net mas sem resultado.

Eu tenho um servidor, Servidor A , que está funcionando há algumas semanas, é um novo servidor. Eu configurei o FDW para este servidor acessar todas as tabelas de um publicesquema de 2 bancos de dados ( db B1 e db B2 ), vamos chamá-lo de Servidor B. Todas as tabelas são "armazenadas" em um esquema específico no servidor A em 3 bancos de dados diferentes (db A1, A2, A3). Existe também streaming replicationentre este servidor e o Servidor C

Aqui está o resumo do FDW que eu faço:

  • Configure o servidor B : adicione entrada pg_hbapara aceitar todas as conexões create user fdwuser, recarregue o arquivo de configuração

  • Configure o Servidor A :

  1. Crie esses esquemas no banco de dados A1, A2, A3 para armazenar os dados do servidor B :

     CREATE SCHEMA reference;
     CREATE SCHEMA profile;
     GRANT USAGE ON SCHEMA profile TO jhon, bon;
     GRANT USAGE ON SCHEMA reference TO jhon, bon;
    
  2. Crie a extensão FDW para cada banco de dados no banco de dados A1, A2, A3:

    CREATE EXTENSION IF NOT EXISTS postgres_fdw;
    
  3. Criar servidores estrangeiros:

    CREATE SERVER foreign_profile 
      FOREIGN DATA WRAPPER postgres_fdw OPTIONS (host '10.10.8.40', port '5432', dbname 'db_profile'); ` 
    
    CREATE SERVER foreign_referensi 
      FOREIGN DATA WRAPPER postgres_fdw OPTIONS (host     '10.10.8.40', port '5432', dbname 'db_reference');` 
    
  4. Criar mapeamento de usuário:

    CREATE USER MAPPING FOR jhon SERVER foreign_reference OPTIONS (user fdwuser, password        
    'secret');  
    CREATE USER MAPPING FOR bon SERVER foreign_profile OPTIONS (user fdwuser, password 
    'secret'); 
    CREATE USER MAPPING FOR jhon SERVER foreign_reference OPTIONS (user fdwuser, password        
    'secret');  
    CREATE USER MAPPING FOR bon SERVER foreign_profile OPTIONS (user fdwuser, password 
    'secret');  
    CREATE USER MAPPING FOR jhon SERVER foreign_reference OPTIONS (user fdwuser, password 
    'secret');  
    CREATE USER MAPPING FOR bon SERVER foreign_profile OPTIONS (user referensi, password 
    'secret'); 
    
  5. Importe os esquemas externos para o banco de dados A1, A2, A3:

    IMPORT FOREIGN SCHEMA public FROM SERVER foreign_profile INTO profile;  
    IMPORT FOREIGN SCHEMA public FROM SERVER foreign_referencd INTO reference; 
    

Todo o processo é um sucesso. Posso acessar a tabela externa no Servidor B do Servidor A . Tudo bem, sem problemas.

Agora, verifico os arquivos WAL usando SELECT COUNT(*) FROM pg_ls_dir('pg_wal') WHERE pg_ls_dir ~ '^[0-9A-F]{24}';. Ele mostra mais de 2100 arquivos . Isso é preocupante.

Aqui está a configuração no servidor A:

archive_command cd .
archive_mode    on
checkpoint_completion_target    0.9
checkpoint_flush_after  32
checkpoint_timeout  300
wal_level   replica
wal_keep_segments   8
max_wal_senders 10
max_wal_size    8192
hot_standby on

Então eu faço algumas verificações:

  1. select * from pg_catalog.pg_stat_activity

    Existem 250 entradas, dominadas por backend_type= parallel workerouclient backend

  2. select * from pg_catalog.pg_stat_archiver

    Failed_count = 0;
    Archived_count = 71; 
    
  3. Depois de alguns minutos, corro select * from pg_catalog.pg_stat_archivernovamente. Agora diz:

    Failed_count = 0;
    Archived_count = 3; -- it seems to be reset for some reasons
    
  4. Verifique a replicação: select * from pg_catalog.pg_stat_replication. Resultados :

    state = streaming

    sync_state = async

Este servidor parece estar ocupado, eu acho.

Perguntas:

  1. Por que os WALs continuam aumentando? Isso é normal? Se não, devo reduzi-los?
  2. Por que o archived_countreset?
  3. O que esse comando faz: archive_command cd .?
postgresql
  • 1 1 respostas
  • 34 Views

1 respostas

  • Voted
  1. Best Answer
    jjanes
    2022-11-11T07:29:39+08:002022-11-11T07:29:39+08:00

    A importação de esquemas estrangeiros precisa gerar WAL, pois precisa inserir as descrições dessas tabelas nos catálogos do sistema. Mas não deve gerar grandes quantidades de WAL, a menos que esses esquemas estrangeiros tenham um grande número de tabelas (é o número de tabelas e colunas que importa, não o número de linhas nas tabelas. Porque apenas a descrição das tabelas é registrada , não o conteúdo).

    Portanto, provavelmente, o FDW não tem nada a ver com isso. É outra coisa que está gerando esse WAL e outra coisa (provavelmente slots de replicação) que está fazendo com que o WAL seja retido.

    Você pode executar pg_waldumpno WAL retido para tentar descobrir o que está causando tanto isso. Isso não é fácil de interpretar, então provavelmente seria melhor apenas pensar sobre o que seu sistema está fazendo além do FDW para criar teorias primeiro.

    • 1

relate perguntas

  • Posso ativar o PITR depois que o banco de dados foi usado

  • Práticas recomendadas para executar a replicação atrasada do deslocamento de tempo

  • Os procedimentos armazenados impedem a injeção de SQL?

  • Sequências Biológicas do UniProt no PostgreSQL

  • Qual é a diferença entre a replicação do PostgreSQL 9.0 e o Slony-I?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve