AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 269834
Accepted
Cerin
Cerin
Asked: 2020-06-25 14:56:07 +0800 CST2020-06-25 14:56:07 +0800 CST 2020-06-25 14:56:07 +0800 CST

Desempenho de consulta degradado após atualizar o Postgres

  • 772

Eu tenho uma tabela com vários milhões de registros em um banco de dados PostgreSQL 12 e, após uma atualização de 11 para 12, algumas consultas começaram a ter um desempenho horrível. Eles passaram de ~ 1 segundo para ~ 5 minutos. Tentei reconstruir todos os índices, aspirar e todas as frutas comuns do Postgres, mas o desempenho ainda é terrível.

Esta é a consulta:

SELECT id, activity_count
FROM user
WHERE (search_index) @@ (to_tsquery('pg_catalog.english', '''1234567890'':*') AND active = true
ORDER BY activity_count DESC LIMIT 101

Em outras palavras, encontre todos os usuários ativos correspondentes ao número de conta fornecido e classifique do mais ativo para o menos.

Essa consulta leva cerca de 5 minutos para retornar apenas 2 registros. Alguma coisa não está certa.

A coluna search_indexé um tsvector que armazena todas as palavras-chave dos vários campos de texto da tabela (apenas coisas como account_number, name, etc).

Eu tenho um índice GIN criado para esta coluna com:

CREATE INDEX user_search_index_gin
    ON public.user USING gin
    (search_index)
    TABLESPACE pg_default;

Eu também tenho um índice para a activecoluna com:

CREATE INDEX user_active
    ON public.user USING btree
    (active ASC NULLS LAST)
    TABLESPACE pg_default;

E eu tenho um índice ordenado para o activity_countcom:

CREATE INDEX user_activity_count
    ON public.user USING btree
    (activity_count ASC NULLS LAST)
    TABLESPACE pg_default;

No entanto, quando executo EXPLAIN, recebo:

"Limit  (cost=0.56..11443.66 rows=101 width=1552)"
"  ->  Index Scan Backward using user_activity_count on user  (cost=0.56..36010185.91 rows=317836 width=1552)"
"        Filter: (active AND (search_index @@ '''1234567890'':*'::tsquery))"

Por que está usando apenas o índice user_activity_count e não o índice GIN mais eficiente? Como faço para corrigir isso?

postgresql query-performance
  • 1 1 respostas
  • 1583 Views

1 respostas

  • Voted
  1. Best Answer
    Erwin Brandstetter
    2020-06-25T17:18:14+08:002020-06-25T17:18:14+08:00

    Qual índice usar?

    Embora suas WHEREcondições não sejam muito seletivas, o plano de consulta atual faz muito sentido com o ORDER BY activity_count DESC LIMIT 101. Ver:

    • Como pesquisar uma tabela com 80 milhões de registros mais rápido?

    No entanto, seus predicados me parecem bastante seletivos:

    WHERE (search_index) @@ (to_tsquery('pg_catalog.english', '''1234567890'':*') AND active = true
    

    Isso é, a menos que seu exemplo '1234567890'seja enganoso. (Tem certeza de que deseja as aspas simples no termo de pesquisa?) Obviamente, não é a consulta real que você usou. Parênteses sem correspondência. De qualquer forma, você provavelmente deseja a configuração de pesquisa de texto "simples" (além de algumas melhorias):

    WHERE  search_index @@ to_tsquery('pg_catalog.simple', '''1234567890'':*')
    AND    active
    

    Ver:

    • Obter correspondência parcial da coluna TSVECTOR indexada por GIN

    Estatisticas

    Portanto, parece que suas estatísticas não estão atualizadas.

    após uma atualização de 11 para 12, algumas consultas começaram a ter um desempenho horrível. Eles passaram de ~ 1 segundo para ~ 5 minutos. Tentei reconstruir todos os índices, aspirar e todas as frutas comuns do Postgres, mas o desempenho ainda é terrível.

    Por que está usando apenas o índice user_activity_count e não o índice GIN mais eficiente?

    Você também adicionou ANALYZEà sua cesta todas as frutas comuns do Postgres ? Você certamente não mencionou isso. Considere as instruções do manual :

    1. Estatisticas

      Como as estatísticas do otimizador não são transferidas pelo pg_upgrade, você será instruído a executar um comando para gerar novamente essas informações no final da atualização. Pode ser necessário definir parâmetros de conexão para corresponder ao seu novo cluster.

    Se o seu banco de dados for grande , você pode estar interessado na vacuumdbopção --analyze-in-stages. (Esse navio pode ter navegado para o caso em questão.) O manual:

    Essa opção é útil para analisar um banco de dados recém-preenchido de um dump restaurado ou por arquivos pg_upgrade. Esta opção tentará criar algumas estatísticas o mais rápido possível, para tornar o banco de dados utilizável e, em seguida, produzir estatísticas completas nas etapas subsequentes.

    Relacionado:

    • Otimizando o desempenho lento da consulta SELECT simples
    • 4

relate perguntas

  • Posso ativar o PITR depois que o banco de dados foi usado

  • Práticas recomendadas para executar a replicação atrasada do deslocamento de tempo

  • Os procedimentos armazenados impedem a injeção de SQL?

  • Sequências Biológicas do UniProt no PostgreSQL

  • Qual é a diferença entre a replicação do PostgreSQL 9.0 e o Slony-I?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve