AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 295468
Accepted
Avi
Avi
Asked: 2021-07-10 07:08:43 +0800 CST2021-07-10 07:08:43 +0800 CST 2021-07-10 07:08:43 +0800 CST

Dimensão eficiente e junção de fatos

  • 772

Eu tenho uma tabela de fatos grande e uma tabela de dimensões muito menor em um esquema em estrela simples:

--1.
CREATE TABLE dbo.Dim
(
Id INT NOT NULL IDENTITY PRIMARY KEY CLUSTERED,
CustomerName VARCHAR(2000)
)
--index
CREATE UNIQUE NONCLUSTERED INDEX uniqueindex1 ON Dim(CustomerName);


--2. 
CREATE TABLE dbo.Fact
(
...
PurchaseDate DATE 
CustomerNameId INT CONSTRAINT fk1 FOREIGN KEY (CustomerNameId) REFERENCES dbo.Dim(Id)
...
)
--index
CREATE CLUSTERED COLUMNSTORE INDEX ccs ON dbo.Fact;

Executando a seguinte consulta simples, que filtra na tabela de fatos e une na dimensão:

SELECT sd.CustomerName,f.*
FROM dbo.Fact f
INNER JOIN dbo.Dim sd ON sd.Id = f.CustomerNameId
WHERE f.PurchaseDate IN (
'20000506',
'20000507',
'20000508',
'20000509',
'20000501',
'20000502',
'20000503'
)

Obtemos o seguinte plano de consulta feio: insira a descrição da imagem aqui

Curiosamente, a tabela de dimensões tende a varrer TODAS as suas 500.000 linhas em 4 iterações, mas no final apenas alguns milhares são necessários nesse intervalo de datas da tabela de fatos.

Isso é muito ineficiente com tabelas de dimensões maiores, basicamente todas as linhas verificadas o tempo todo, como os índices da tabela de pesquisa nem estão lá.

O esperado seria que o sql server primeiro limitasse a tabela de fatos no intervalo de datas e, em seguida, usando esse intervalo limitado de CustomerKeyId, ele procurasse o CustomerName da tabela de dimensão pequena usando uma busca de índice.

  1. Isso é realmente o quão ineficiente é o esquema em estrela ou há algo que sinto falta aqui?
  2. Em outras palavras, como eu poderia forçar o sql server a preparar a tabela CustomerKeyId limitada e pesquisar apenas aquelas? (com CTE de alguma forma?)
index-tuning sql-server-2017
  • 1 1 respostas
  • 56 Views

1 respostas

  • Voted
  1. Best Answer
    David Browne - Microsoft
    2021-07-10T08:57:28+08:002021-07-10T08:57:28+08:00

    Aqui está uma amostra para brincar:

    --1.
    CREATE TABLE dbo.Dim
    (
    Id INT NOT NULL IDENTITY PRIMARY KEY CLUSTERED,
    CustomerName VARCHAR(2000)
    )
    --index
    CREATE UNIQUE NONCLUSTERED INDEX uniqueindex1 ON Dim(CustomerName);
    
    with q as
    (
       select top 100000 row_number() over (order by (select null)) rn
       from sys.messages m, sys.objects o
    )
    insert into dim(CustomerName) 
    select concat('CustomerName',rn)
    from q
    
    --2. 
    
    CREATE TABLE dbo.Fact
    (
    PurchaseDate DATE,
    CustomerNameId INT CONSTRAINT fk1 FOREIGN KEY (CustomerNameId) REFERENCES dbo.Dim(Id)
    )
    --index
    CREATE CLUSTERED COLUMNSTORE INDEX ccs ON dbo.Fact;
    
    
    with q as
    (
       select top 10000000 row_number() over (order by (select null)) rn
       from sys.messages m, sys.objects o
    )
    insert into Fact(PurchaseDate,CustomerNameId) 
    select dateadd(day,rn%1000,'20000101'), 1+rn%100000
    from q
    
    
    SELECT sd.CustomerName,f.*
    FROM dbo.Fact f
    INNER JOIN dbo.Dim sd ON sd.Id = f.CustomerNameId
    WHERE f.PurchaseDate IN (
    '20000506',
    '20000507',
    '20000508',
    '20000509',
    '20000501',
    '20000502',
    '20000503'
    )
    
    
    SELECT sd.CustomerName,f.*
    FROM dbo.Fact f
    INNER LOOP JOIN dbo.Dim sd ON sd.Id = f.CustomerNameId
    WHERE f.PurchaseDate IN (
    '20000506',
    '20000507',
    '20000508',
    '20000509',
    '20000501',
    '20000502',
    '20000503'
    )
    

    O plano está aqui .

    Você verá que a junção de loop com a busca de índice é mais cara do que varrer a dimensão em cada thread da execução paralela e fazer uma junção de hash:

    (70000 rows affected)
    
     SQL Server Execution Times:
       CPU time = 62 ms,  elapsed time = 64 ms.
    
    (70000 rows affected)
    
     SQL Server Execution Times:
       CPU time = 108 ms,  elapsed time = 90 ms.
    
    • 1

relate perguntas

  • Quais fatores entram na seleção do índice agrupado de uma exibição indexada?

  • O índice baseado em função Oracle não é usado na consulta

  • Chaves estrangeiras de indexação do servidor SQL, abrangendo índices incluídos nas colunas

  • Qual é a diferença entre ALTER INDEX e DBCC DBREINDEX?

  • Limite de atualização de estatísticas de índice filtrado

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve