AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 176296
Accepted
Kevin3NF
Kevin3NF
Asked: 2017-06-15 09:48:05 +0800 CST2017-06-15 09:48:05 +0800 CST 2017-06-15 09:48:05 +0800 CST

Otimização T-SQL

  • 772

Se a resposta for 'não', tudo bem...

Estou olhando para ver se isso pode ser otimizado... é parte de um proc armazenado muito maior. CGCodeé varchar(50), Yeare Monthsão smallint, FEINéchar(9)

select max(id)
from Table
where 1=1
    and cgcode = 123
    and datefromparts(cast(year as char(4)),cast(month as char(2)),'01') < getdate()
    and totalcount > 0 
group by cgcode, year, month, fein

Leituras lógicas do plano de execução real: 1.566.473

Dados brutos da tabela de origem mais de 32 milhões de registros

Linhas estimadas: 640K, 55K reais, antes do Group By entrar em ação

Avisos de conversão implícitos ativados Year/Month/CGCode(entra como bigint)

Tempo de execução de aproximadamente 7,5 segundos, fazendo uma busca de índice não clusterizado:

insira a descrição da imagem aqui

O conjunto de resultados finais é de 114 linhas (para isso CGCode, testamos com... outros variam)

O desempenho é praticamente o mesmo no Prod em hardware significativamente melhor do que na caixa Dev. Isso só vai piorar com o tempo, pois está puxando tudo mais antigo que o mês atual, para preencher um gráfico de histórico em uma interface do usuário.

Que outras informações posso fornecer?

Cole o plano

O índice que está sendo usado atualmente:

CREATE NONCLUSTERED INDEX [COIX_Table_TotalCount] ON [dbo].[Table]
(
    [TotalCount] ASC
)
INCLUDE (   [ID],
    [CGCode],
    [Year],
    [Month],
    [FEIN]) 
WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, SORT_IN_TEMPDB = OFF, DROP_EXISTING = OFF, 
        ONLINE = OFF, ALLOW_ROW_LOCKS = ON, ALLOW_PAGE_LOCKS = ON) ON [PRIMARY]
GO

CGCodelimita os dados mais... 281 valores. yearé apenas 3-4 anos de dados, monthapenas 12 opções, é claro. TotalCounté um bigint, 17K valores distintos em 32 milhões de registros. Não faço ideia de qual é o propósito da TotalCountcoluna.

sql-server sql-server-2014
  • 3 3 respostas
  • 161 Views

3 respostas

  • Voted
  1. Best Answer
    ypercubeᵀᴹ
    2017-06-15T10:06:25+08:002017-06-15T10:06:25+08:00

    Em primeiro lugar, eu reescreveria essa condição. Como está, não pode usar nenhum índice de forma eficaz.:

    datefromparts(cast(year as char(4)),cast(month as char(2)),'01') < getdate()
    

    Reescreva-o para que não haja funções ou cálculos aplicados às colunas:

     ( year < year(getdate()) 
    or year = year(getdate()) and month <= month(getdate())
     )
    

    A reescrita permitiria a utilização de um índice on (cgcode, year, month)- ou melhor ainda (cgcode, year, month, fein), considerando as GROUP BYpartes.

    Em seguida, se totalcountsempre fizer parte da WHEREcláusula ou se a totalcount > 0condição específica for sempre usada, você poderá obter ainda mais eficiência adicionando-a à INCLUDEparte ou com um índice filtrado e mais direcionado:

    -- option A
    index (cgcode, year, month, fein, id) 
          include (totalcount)
    
    -- option B
    index (cgcode, year, month, fein, id)
          where (totalcount > 0)
    
    • 8
  2. KumarHarsh
    2017-06-16T01:49:40+08:002017-06-16T01:49:40+08:00

    Vou remover o cgcode do Group By, pois sei o que é cgcode e não é range.

    Então, se eu estiver correto, meu índice também mudará.

    Use Variable no lugar de getdate()

    declare @CurDate date=getdate()
    declare @yr int=year(@CurDate ) 
    declare @month tinyint=month(@CurDate )
    declare @cg varchar(60)='123'
    
    select @cg cgcode,max(id)
    from Table
    where  cgcode = @cg
        ( year < @yr  
    or [year] = @yr and [month] <= @month
     )
        and totalcount > 0 
    group by year, month, fein
    

    Também tecnicamente porque totalcount will be covering indexna opção AI não entendo, por essa lógica deve estar dentro do grupo de índices ou option Bestá correto.

    • 0
  3. Kevin3NF
    2017-06-21T05:28:13+08:002017-06-21T05:28:13+08:00

    Encontrei :)

    O clientid está sendo passado como INT... causando uma conversão implícita para varchar para o campo CGCode.

    select max(id)
    from Table
    where 1=1
        and cgcode = CAST(123 as varchar(50))  ---this fixed it
        and datefromparts(cast(year as char(4)),cast(month as char(2)),'01') < getdate()
        and totalcount > 0 
    group by cgcode, year, month, fein
    

    De 7-30 segundos a 100ms. Eu vou levar isso.

    • 0

relate perguntas

  • SQL Server - Como as páginas de dados são armazenadas ao usar um índice clusterizado

  • Preciso de índices separados para cada tipo de consulta ou um índice de várias colunas funcionará?

  • Quando devo usar uma restrição exclusiva em vez de um índice exclusivo?

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve