AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 3311
Accepted
JNK
JNK
Asked: 2011-06-15 09:44:13 +0800 CST2011-06-15 09:44:13 +0800 CST 2011-06-15 09:44:13 +0800 CST

查询计划中操作员成本高得离谱的迹象?

  • 772

我有一个每月的 ETL 过程,这里太复杂了,无法解释,但基本上我们会获得大量客户数据,将其批量加载到各种表中,然后运行一系列构建过程。

总数据量很大,我们每月添加25-30m条记录到最大的表中,总共有大约700m条记录。每个也有 2m-300m 记录的支持表。该集合的总数据约为 3.5TB。

本月,某些流程所花的时间比平时长得多。一个例子是一个通常在 30 分钟内完成的过程在我杀死它之前花了大约 40 个小时(它仍然没有完成)。

并非所有流程都受到影响,有些流程甚至比平时运行得更快。

显然,根本原因超出了我在这里可以问的范围,但有些事情困扰着我:

我们有以数百万百分比显示的各个运营商的实际查询计划。

就像针对 的聚集索引扫描、针对791,358,704%的合并连接75,566,494%等。这发生在多个查询计划中,这些计划取自sys.dm_exec_query_plan。

这些查询计划是否指示其他一些更大的问题?

我可以肯定地知道问题不是过时的统计数据——我们对所有主要表运行了全扫描,并且我手动重建了最大的表和数据库,并预先调整大小以消除碎片。

sql-server sql-server-2008
  • 1 1 个回答
  • 1108 Views

1 个回答

  • Voted
  1. Best Answer
    Sankar Reddy
    2011-06-18T07:22:57+08:002011-06-18T07:22:57+08:00

    JNK,

    你的意思是这样的?

    http://sankarreddy.com/wp-content/uploads/2011/03/CropperCapture2.jpg

    这是根据客户端工具的统计数据生成的估计执行计划,请注意这不是引擎问题。如果您希望 MSFT 解决此问题,请为该连接项目投票。

    https://connect.microsoft.com/SQLServer/feedback/details/436184/huge-operator-cost-in-estimated-execution-plan

    由于您提到了 SQL Server 2008,我建议您在作业运行时查看 WAIT STATS 信息。查看为什么执行没有进展并找出瓶颈。

    http://blogs.technet.com/b/sqlos/archive/2008/07/18/debugging-slow-response-times-in-sql-server-2008.aspx

    此外,查看 sys.virtualfilestats 信息,看看是否存在明显的 IO 滞后以及内存使用情况。

    HTH

    • 5

相关问题

  • 死锁的主要原因是什么,可以预防吗?

  • 我在索引上放了多少“填充”?

  • 是否有开发人员遵循数据库更改的“最佳实践”类型流程?

  • 如何确定是否需要或需要索引

  • 从 SQL Server 2008 降级到 2005

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    您如何显示在 Oracle 数据库上执行的 SQL?

    • 2 个回答
  • Marko Smith

    如何选择每组的第一行?

    • 6 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    我可以查看在 SQL Server 数据库上运行的历史查询吗?

    • 6 个回答
  • Marko Smith

    如何在 PostgreSQL 中使用 currval() 来获取最后插入的 id?

    • 10 个回答
  • Marko Smith

    如何在 Mac OS X 上运行 psql?

    • 11 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Marko Smith

    将数组参数传递给存储过程

    • 12 个回答
  • Martin Hope
    Manuel Leduc PostgreSQL 多列唯一约束和 NULL 值 2011-12-28 01:10:21 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Stuart Blackler 什么时候应该将主键声明为非聚集的? 2011-11-11 13:31:59 +0800 CST
  • Martin Hope
    pedrosanta 使用 psql 列出数据库权限 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    BrunoLM Guid vs INT - 哪个更好作为主键? 2011-01-05 23:46:34 +0800 CST
  • Martin Hope
    bernd_k 什么时候应该使用唯一约束而不是唯一索引? 2011-01-05 02:32:27 +0800 CST
  • Martin Hope
    Patrick 如何优化大型数据库的 mysqldump? 2011-01-04 13:13:48 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve