AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 20178
Accepted
SqlRyan
SqlRyan
Asked: 2012-06-30 12:08:33 +0800 CST2012-06-30 12:08:33 +0800 CST 2012-06-30 12:08:33 +0800 CST

T-SQL 查询使用完全不同的计划,具体取决于我正在更新的行数

  • 772

我有一个带有“TOP (X)”子句的 SQL UPDATE 语句,我正在更新值的行有大约 40 亿行。当我使用“TOP (10)”时,我得到一个几乎立即执行的执行计划,但是当我使用“TOP (50)”或更大时,查询永远不会(至少在我等待时不会)完成,并且它使用完全不同的执行计划。较小的查询使用一个非常简单的计划,其中包含一对索引查找和一个嵌套循环连接,其中完全相同的查询(在 UPDATE 语句的 TOP 子句中具有不同的行数)使用一个涉及两个不同索引查找的计划、表假脱机、并行性和一堆其他复杂性。

我使用“OPTION (USE PLAN...)”来强制它使用由较小查询生成的执行计划——当我这样做时,我可以在几秒钟内更新多达 100,000 行。我知道查询计划很好,但是 SQL Server 只会在只涉及少量行时自行选择该计划 - 我的更新中任何相当大的行数都会导致次优计划。

我认为并行性可能是罪魁祸首,所以我设置MAXDOP 1了查询,但没有效果 - 这一步已经消失,但糟糕的选择/性能没有。我今天早上也跑sp_updatestats了,以确保这不是原因。

我附上了两个执行计划——越短的也越快。此外,这是有问题的查询(值得注意的是,我包含的 SELECT 在小行数和大行数的情况下似乎都很快):

    update top (10000) FactSubscriberUsage3
               set AccountID = sma.CustomerID
    --select top 50 f.AccountID, sma.CustomerID
      from FactSubscriberUsage3 f
      join dimTime t
        on f.TimeID = t.TimeID
      join #mac sma
        on f.macid = sma.macid
       and t.TimeValue between sma.StartDate and sma.enddate 
     where f.AccountID = 0 --There's a filtered index on the table for this

这是快速计划: 快速执行计划

这是较慢的一个: 慢执行计划

在我设置查询的方式或在提供的执行计划中是否有任何明显的东西会导致查询引擎做出错误的选择?如有必要,我还可以包括所涉及的表定义和在它们上定义的索引。

对于那些要求仅统计版本的数据库对象的人: 我什至没有意识到您可以做到这一点,但它完全有道理!我尝试为仅统计数据库生成脚本,以便其他人可以自己测试执行计划,但我可以在我的过滤索引上生成生成统计/直方图(脚本中似乎存在语法错误),所以我运气不好。我尝试删除过滤器,查询计划很接近,但不完全相同,我不想让任何人去追逐。

更新和一些更完整的执行计划: 首先,SQL Sentry 的计划资源管理器是一个令人难以置信的工具。在查看此站点上的其他查询计划问题之前,我什至不知道它的存在,并且它对我的查询如何执行有很多话要说。虽然我不确定如何解决这个问题,但他们清楚地表明了问题所在。

这是 10、100 和 1000 行的摘要 - 您可以看到 1000 行查询与其他查询不符: 报表摘要

你可以看到第三个查询有一个荒谬的读取次数,所以它显然做了一些完全不同的事情。这是估计的执行计划,带有行数。 1000行预估执行计划: 1000 行估计执行计划

这是执行计划的实际结果(顺便说一句,“永远不会完成”,原来我的意思是“在一小时内完成”)。 1000行实际执行计划 1000行实际执行计划

我注意到的第一件事是,它并没有像预期的那样从 dimTime 表中提取 60K 行,而是实际提取了 16 亿行,并带有 B。查看我的查询,我不确定它是如何从 dimTime 表中拉回这么多行的。我使用的 BETWEEN 运算符只是确保我根据 Fact 表中的时间记录从#mac 中提取正确的记录。但是,当我在 WHERE 子句中添加一行时,我将 t.TimeValue(或 t.TimeID)过滤为单个值,我可以在几秒钟内成功更新 100,000 行。因此,正如我在执行计划中所明确指出的那样,很明显问题出在我的时间表上,但我不确定如何更改连接标准以解决此问题并保持准确性. 有什么想法吗?

作为参考,这里是 100 行更新的计划(带有行数)。您可以看到它达到了相同的索引,并且仍然有大量的行,但远没有达到相同程度的问题。 具有行数的 100 行执行: 在此处输入图像描述

sql-server performance
  • 2 2 个回答
  • 2512 Views

2 个回答

  • Voted
  1. Best Answer
    william_a_dba
    2012-06-30T14:55:35+08:002012-06-30T14:55:35+08:00

    dimTime 上的索引正在发生变化。更快的计划是使用 _dta 索引。首先,确保它没有被标记为 sys.indexes 中的假设索引。

    认为您可以通过使用#mac 表进行过滤来绕过一些参数化,而不是像这样在@StartDate 和@enddate 之间提供像这样的WHERE t.TimeValue 的开始/结束日期。摆脱那个临时表。

    • 3
  2. usr
    2012-07-01T02:33:10+08:002012-07-01T02:33:10+08:00

    如果没有关于计划中行数的更多信息,我的初步建议是在查询中安排正确的连接顺序并强制使用OPTION (FORCE ORDER). 强制执行第一个计划的加入顺序。

    • 1

相关问题

  • 死锁的主要原因是什么,可以预防吗?

  • 如何确定是否需要或需要索引

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何查看 Oracle 中的数据库列表?

    • 8 个回答
  • Marko Smith

    mysql innodb_buffer_pool_size 应该有多大?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    从 .frm 和 .ibd 文件恢复表?

    • 10 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    如何选择每组的第一行?

    • 6 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    pedrosanta 使用 psql 列出数据库权限 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    bernd_k 什么时候应该使用唯一约束而不是唯一索引? 2011-01-05 02:32:27 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve