AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 295468
Accepted
Avi
Avi
Asked: 2021-07-10 07:08:43 +0800 CST2021-07-10 07:08:43 +0800 CST 2021-07-10 07:08:43 +0800 CST

高效的维度和事实连接

  • 772

我有一个大的事实表和一个简单星型模式中的小得多的维度表:

--1.
CREATE TABLE dbo.Dim
(
Id INT NOT NULL IDENTITY PRIMARY KEY CLUSTERED,
CustomerName VARCHAR(2000)
)
--index
CREATE UNIQUE NONCLUSTERED INDEX uniqueindex1 ON Dim(CustomerName);


--2. 
CREATE TABLE dbo.Fact
(
...
PurchaseDate DATE 
CustomerNameId INT CONSTRAINT fk1 FOREIGN KEY (CustomerNameId) REFERENCES dbo.Dim(Id)
...
)
--index
CREATE CLUSTERED COLUMNSTORE INDEX ccs ON dbo.Fact;

运行以下简单查询,过滤事实表并加入维度:

SELECT sd.CustomerName,f.*
FROM dbo.Fact f
INNER JOIN dbo.Dim sd ON sd.Id = f.CustomerNameId
WHERE f.PurchaseDate IN (
'20000506',
'20000507',
'20000508',
'20000509',
'20000501',
'20000502',
'20000503'
)

我们得到以下丑陋的查询计划: 在此处输入图像描述

有趣的是,维度表倾向于在 4 次迭代中扫描所有 500 000 行,但最终在事实表的该日期范围内只需要几千行。

这对于较大的维度表来说是非常低效的,基本上所有的行都是一直扫描的,就像查找表索引甚至不存在一样。

预期的事情是sql server首先将事实表限制在日期范围内,然后使用这个有限的CustomerKeyId范围,它使用索引查找从小维度表中查找CustomerName。

  1. 这真的是星型模式的效率低下,还是我在这里想念什么?
  2. 换句话说,我怎么能强制 sql server 准备有限的 CustomerKeyId 表并只查找那些?(不知何故有CTE?)
index-tuning sql-server-2017
  • 1 1 个回答
  • 56 Views

1 个回答

  • Voted
  1. Best Answer
    David Browne - Microsoft
    2021-07-10T08:57:28+08:002021-07-10T08:57:28+08:00

    这是一个可以玩的示例:

    --1.
    CREATE TABLE dbo.Dim
    (
    Id INT NOT NULL IDENTITY PRIMARY KEY CLUSTERED,
    CustomerName VARCHAR(2000)
    )
    --index
    CREATE UNIQUE NONCLUSTERED INDEX uniqueindex1 ON Dim(CustomerName);
    
    with q as
    (
       select top 100000 row_number() over (order by (select null)) rn
       from sys.messages m, sys.objects o
    )
    insert into dim(CustomerName) 
    select concat('CustomerName',rn)
    from q
    
    --2. 
    
    CREATE TABLE dbo.Fact
    (
    PurchaseDate DATE,
    CustomerNameId INT CONSTRAINT fk1 FOREIGN KEY (CustomerNameId) REFERENCES dbo.Dim(Id)
    )
    --index
    CREATE CLUSTERED COLUMNSTORE INDEX ccs ON dbo.Fact;
    
    
    with q as
    (
       select top 10000000 row_number() over (order by (select null)) rn
       from sys.messages m, sys.objects o
    )
    insert into Fact(PurchaseDate,CustomerNameId) 
    select dateadd(day,rn%1000,'20000101'), 1+rn%100000
    from q
    
    
    SELECT sd.CustomerName,f.*
    FROM dbo.Fact f
    INNER JOIN dbo.Dim sd ON sd.Id = f.CustomerNameId
    WHERE f.PurchaseDate IN (
    '20000506',
    '20000507',
    '20000508',
    '20000509',
    '20000501',
    '20000502',
    '20000503'
    )
    
    
    SELECT sd.CustomerName,f.*
    FROM dbo.Fact f
    INNER LOOP JOIN dbo.Dim sd ON sd.Id = f.CustomerNameId
    WHERE f.PurchaseDate IN (
    '20000506',
    '20000507',
    '20000508',
    '20000509',
    '20000501',
    '20000502',
    '20000503'
    )
    

    计划在这里。

    您会看到使用索引查找的循环连接比扫描并行执行的每个线程上的维度并执行哈希连接更昂贵:

    (70000 rows affected)
    
     SQL Server Execution Times:
       CPU time = 62 ms,  elapsed time = 64 ms.
    
    (70000 rows affected)
    
     SQL Server Execution Times:
       CPU time = 108 ms,  elapsed time = 90 ms.
    
    • 1

相关问题

  • 选择索引视图的聚集索引有哪些因素?

  • 查询中未使用基于 Oracle 函数的索引

  • SQL server 索引外键,覆盖索引包含的列

  • ALTER INDEX 和 DBCC DBREINDEX 有什么区别?

  • 筛选索引统计刷新阈值

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve