AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 339642
Accepted
orchid
orchid
Asked: 2024-05-20 20:42:53 +0800 CST2024-05-20 20:42:53 +0800 CST 2024-05-20 20:42:53 +0800 CST

Problemas de desempenho com verificação de intervalo de tempo

  • 772

Estou executando a seguinte consulta do Postgres, na qual associo o uso de um consumidor ao custo do serviço para esse intervalo com base em quando ele usou o serviço da tabela de serviços. A consulta abaixo é uma versão truncada, algumas vezes tenho que fazer até 12 ou mais junções. O problema é que leva 2,5 minutos para executar uma consulta. Como posso reduzir esse tempo? Estou adotando a abordagem correta?

select 
  c.consumption, 
  c.interval_start, 
  c.interval_end, 
  s1.value_exc_vat as service1_price, 
  s2.value_exc_vat as service2_price 
from 
  consumer as c 
  left join service1 as s1 on c.interval_start >= timestamp '2023-03-18T00:00:00Z' 
  and c.interval_start < timestamp '2024-02-15T00:00:00Z' 
  and (
    s1.payment_method is null 
    or s1.payment_method = 'DIRECT_DEBIT'
  ) 
  and c.interval_start >= s1.valid_from 
  and (
    c.interval_start < s1.valid_to 
    or s1.valid_to is null
  ) 
  left join service2 as s2 on c.interval_start >= timestamp '2024-02-15T00:00:00Z' 
  and c.interval_start < timestamp '2025-02-15T00:00:00Z' 
  and (
    s2.payment_method is null 
    or s2.payment_method = 'DIRECT_DEBIT'
  ) 
  and c.interval_start >= s2.valid_from 
  and (
    c.interval_start < s2.valid_to 
    or s2.valid_to is null
  ) 
order by 
  c.interval_start desc

Isolei o problema nesta seção da consulta em cada junção:

and c.interval_start >= s1.valid_from 
  and (
    c.interval_start < s1.valid_to 
    or s1.valid_to is null
  ) 

Parece que encontrar o intervalo certo para entrar na mesa leva muito tempo. Os períodos de tempo podem variar de 30 minutos de intervalo até alguns meses ou anos para as tabelas de consumo e de serviço, por isso não posso fazer uma simplesc.interval_start = s1.valid_from and c.interval_end = s1.valid_to

Aqui está um EXPLAIN (ANALYZE, BUFFERS):

"QUERY PLAN"
"Sort  (cost=5523752586.99..5549030615.96 rows=10111211585 width=28) (actual time=140588.278..140589.028 rows=20593 loops=1)"
"  Sort Key: c.interval_start DESC"
"  Sort Method: quicksort  Memory: 2216kB"
"  Buffers: shared hit=396"
"  ->  Nested Loop Left Join  (cost=0.00..2633916836.23 rows=10111211585 width=28) (actual time=12.169..140546.307 rows=20593 loops=1)"
"        Join Filter: ((c.interval_start >= '2023-03-18 00:00:00'::timestamp without time zone) AND (c.interval_start < '2024-02-15 00:00:00'::timestamp without time zone) AND (c.interval_start >= s1.valid_from) AND ((c.interval_start < s1.valid_to) OR (s1.valid_to IS NULL)))"
"        Rows Removed by Join Filter: 559372220"
"        Buffers: shared hit=396"
"        ->  Nested Loop Left Join  (cost=0.00..3979716.14 rows=4302977 width=24) (actual time=0.058..27617.147 rows=20593 loops=1)"
"              Join Filter: ((c.interval_start >= '2024-02-15 00:00:00'::timestamp without time zone) AND (c.interval_start < '2025-02-15 00:00:00'::timestamp without time zone) AND (c.interval_start >= s2.valid_from) AND ((c.interval_start < s2.valid_to) OR (s2.valid_to IS NULL)))"
"              Rows Removed by Join Filter: 176848172"
"              Buffers: shared hit=196"
"              ->  Seq Scan on consumer c  (cost=0.00..337.93 rows=20593 width=20) (actual time=0.007..21.813 rows=20593 loops=1)"
"                    Buffers: shared hit=132"
"              ->  Materialize  (cost=0.00..214.29 rows=8588 width=20) (actual time=0.000..0.272 rows=8588 loops=20593)"
"                    Buffers: shared hit=64"
"                    ->  Seq Scan on service2 s2  (cost=0.00..171.35 rows=8588 width=20) (actual time=0.006..0.891 rows=8588 loops=1)"
"                          Filter: ((payment_method IS NULL) OR (payment_method = 'DIRECT_DEBIT'::bpchar))"
"                          Buffers: shared hit=64"
"        ->  Materialize  (cost=0.00..675.37 rows=27164 width=20) (actual time=0.000..0.896 rows=27164 loops=20593)"
"              Buffers: shared hit=200"
"              ->  Seq Scan on service1 s1  (cost=0.00..539.55 rows=27164 width=20) (actual time=0.002..2.830 rows=27164 loops=1)"
"                    Filter: ((payment_method IS NULL) OR (payment_method = 'DIRECT_DEBIT'::bpchar))"
"                    Buffers: shared hit=200"
"Planning Time: 0.107 ms"
"Execution Time: 140590.312 ms"
postgresql
  • 1 1 respostas
  • 31 Views

1 respostas

  • Voted
  1. Best Answer
    jjanes
    2024-05-21T01:47:09+08:002024-05-21T01:47:09+08:00

    Eu acho que você poderia substituir

      and c.interval_start >= s1.valid_from 
      and (
        c.interval_start < s1.valid_to 
        or s1.valid_to is null
      ) 
    

    com

    and c.interval_start <@ tstzrange(s1.valid_from,s1.valid_to)
    

    Que poderia então usar um índice

    create index on service1 using gist (tstzrange(valid_from,valid_to))
    

    Ao usar um índice funcional, você não precisaria refatorar a tabela

    • 0

relate perguntas

  • Posso ativar o PITR depois que o banco de dados foi usado

  • Práticas recomendadas para executar a replicação atrasada do deslocamento de tempo

  • Os procedimentos armazenados impedem a injeção de SQL?

  • Sequências Biológicas do UniProt no PostgreSQL

  • Qual é a diferença entre a replicação do PostgreSQL 9.0 e o Slony-I?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve