AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 338107
Accepted
Codemonkey
Codemonkey
Asked: 2024-03-27 20:26:52 +0800 CST2024-03-27 20:26:52 +0800 CST 2024-03-27 20:26:52 +0800 CST

额外的 JOIN 会使查询性能急剧下降 - 我可以通过调整参数来解决这个问题吗?

  • 772

运行 10.8.8-MariaDB-log

我对比较网站有一个非常复杂的查询。

本质上

SELECT <columns> FROM <tables>
                 JOIN <derived table 1 for first comparison>
                 JOIN <derived table 2 for first comparison>
                 JOIN <derived table 1 for second comparison>
                 JOIN <derived table 2 for second comparison>

运行时间 < 0.1 秒

如果我把它改成

SELECT <columns> FROM <tables>
                 JOIN <derived table 1 for first comparison>
                 JOIN <derived table 2 for first comparison>
                 JOIN <derived table 1 for second comparison>
                 JOIN <derived table 2 for second comparison>
                 JOIN <derived table 1 for third comparison>
                 JOIN <derived table 2 for third comparison>

需要10多秒

索引是可靠的,除了 ID 参数值之外,每次比较创建派生表的 sql 都是相同的。唯一改变的是它们的数量。

我怀疑有一些缓冲区/缓存需要增加一点?🤷‍♂️

是的,我可以完全重写页面/sql,通过一种非常不同的机制来完成它,但如果我可以通过简单的配置更改来解决这个问题,那么考虑到机器上的可用资源,我更愿意这样做。时间很短。

我知道这可能是一个 x/y 问题,但我希望这里有一个容易实现的目标,经验丰富的人能够立即识别出来。

FWIW - 在黑暗中拍摄 - 我尝试将这三个的大小增加四倍,但没有什么区别:

join_buffer_size      = 32M (to 128M)
sort_buffer_size      = 4M  (to 16M)
read_rnd_buffer_size  = 4M  (to 16M)

谢谢

mariadb
  • 2 2 个回答
  • 38 Views

2 个回答

  • Voted
  1. Best Answer
    Codemonkey
    2024-03-28T03:46:35+08:002024-03-28T03:46:35+08:00

    直到大约STRAIGHT_JOIN。

    STRAIGHT_JOIN类似JOIN,只是它告诉查询优化器按照您创建查询的方式运行查询。

    为什么这很重要?基本上,阶乘。

    优化器知道许多巧妙的技巧来最好地猜测最佳执行计划,但本质上,执行计划的复杂性遵循阶乘模式。

    • 1桌?1 个选项
    • 2桌?2 个选项
    • 3桌?6 个选项
    • 4桌?24 个选项
    • 5桌?120 个选项

    在我原来问题的例子中,我有 14 个表。870 亿个选项

    然后是16张桌子。2万亿个选项

    就像我说的,优化器并不那么愚蠢,它可以修剪很多并采取很多捷径,但我认为这些数字确实说明了查询中大量表的问题。问题不在于查询运行需要多长时间,而在于优化器需要多长时间来确定如何运行它。

    举个例子。我现在正在测试/摆弄一个查询,其中有 18 个表。

    除了将我所有的s 替换为s之外,我实际上什么也没做。JOINSTRAIGHT_JOIN

    结果?我的查询时间从 1.65s 下降到0.002s。

    • 1
  2. Rick James
    2024-03-28T04:53:58+08:002024-03-28T04:53:58+08:00

    这种构造对性能来说非常糟糕,因为所有“派生表”都没有索引:

    FROM ( SELECT ... ) a
    JOIN ( SELECT ... ) b  ON ...
    ...
    

    所以,是的,添加更多JOIN对性能来说是很糟糕的。

    不,你无法调整自己的方式来解决问题。(调整可能会有所帮助,但这不是真正的解决方案。)

    让我们SELECT一起看一个更完整的SHOW CREATE TABLEs;我们也许能够提供一些建设性的建议。

    • 0

相关问题

  • MariaDB 标头错误

  • 错误 1046 Mariadb:未选择数据库

  • 你还在使用 MyISAM 还是更喜欢 Aria 存储引擎?

  • 从星期四或一周中的任何其他日子开始,如何通过每周结果改进我的 SQL 语句?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve