AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-132183

Codemonkey's questions

Martin Hope
Codemonkey
Asked: 2024-03-27 20:26:52 +0800 CST

额外的 JOIN 会使查询性能急剧下降 - 我可以通过调整参数来解决这个问题吗?

  • 6

运行 10.8.8-MariaDB-log

我对比较网站有一个非常复杂的查询。

本质上

SELECT <columns> FROM <tables>
                 JOIN <derived table 1 for first comparison>
                 JOIN <derived table 2 for first comparison>
                 JOIN <derived table 1 for second comparison>
                 JOIN <derived table 2 for second comparison>

运行时间 < 0.1 秒

如果我把它改成

SELECT <columns> FROM <tables>
                 JOIN <derived table 1 for first comparison>
                 JOIN <derived table 2 for first comparison>
                 JOIN <derived table 1 for second comparison>
                 JOIN <derived table 2 for second comparison>
                 JOIN <derived table 1 for third comparison>
                 JOIN <derived table 2 for third comparison>

需要10多秒

索引是可靠的,除了 ID 参数值之外,每次比较创建派生表的 sql 都是相同的。唯一改变的是它们的数量。

我怀疑有一些缓冲区/缓存需要增加一点?🤷‍♂️

是的,我可以完全重写页面/sql,通过一种非常不同的机制来完成它,但如果我可以通过简单的配置更改来解决这个问题,那么考虑到机器上的可用资源,我更愿意这样做。时间很短。

我知道这可能是一个 x/y 问题,但我希望这里有一个容易实现的目标,经验丰富的人能够立即识别出来。

FWIW - 在黑暗中拍摄 - 我尝试将这三个的大小增加四倍,但没有什么区别:

join_buffer_size      = 32M (to 128M)
sort_buffer_size      = 4M  (to 16M)
read_rnd_buffer_size  = 4M  (to 16M)

谢谢

mariadb
  • 2 个回答
  • 38 Views
Martin Hope
Codemonkey
Asked: 2021-09-21 04:56:09 +0800 CST

是否可以计算每行中的非空列?

  • 2

假设这个数据:

id      firstname     surname     val1      val2      val3
1       joe           blogs       1         (null)    (null)
2       jane          doe         (null)    2         5
3       bobby         tables      (null)    (null)    (null)

我想要一个返回的查询:

id     count_non_null_vals
1      1
2      2
3      0

COUNT并且SUM显然不起作用(如果他们这样做,请教育我!),虽然我们有GREATESTand作为/LEAST的行内类似物,但我找不到类似的东西.MAXMINCOUNT

我可以制作一个可怕的嵌套IFs 等庞然大物,但在我的真实世界遗留示例中有 30 个这样的列,所以我宁愿能够做COL_COUNT(val1, val2, val3...等

谢谢!

mysql count
  • 1 个回答
  • 1827 Views
Martin Hope
Codemonkey
Asked: 2020-11-25 00:34:06 +0800 CST

我应该为 mariadb.sys@localhost 设置密码吗?

  • 1

我不清楚这个用户的用途,但 mysqltuner 建议我为它创建一个密码。我不清楚这是否真的是一种好习惯,或者这是否是 mysqltuner 的一个限制,仅仅是因为它看到了一个不熟悉的用户,没有为异常编码?

运行 MariaDB 10.5.8

谢谢

mariadb
  • 1 个回答
  • 3581 Views
Martin Hope
Codemonkey
Asked: 2017-08-08 05:29:48 +0800 CST

为 32GB 混合 nginx/php/mysql 服务器优化 Percona 5.7 my.cnf

  • 0

我有一个专用服务器,我从中运行我的网站。它有 32GB 内存、Xeon E5-1650 3.2Ghz(6 核、12 HT)和 RAID 1 中的两个 3TB 驱动器。

我正在运行 Percona 5.7.18

我 99% 的表都是 InnoDB

我的 ibdata1 文件是 500MB。

它主要是 SELECT 查询,但也有一些非常复杂的连接/查询。不过也有一定比例的 INSERT/UPDATE。

服务器花费一些时间来调整用户上传的 JPEG 文件的大小,因此在分配内存等时我需要注意这一点。

我还有什么可以告诉你的吗?

我确实计划在某个时候实现一些像样的 webapp 级缓存,但同时希望改进 mysql 配置。

该网站在交通正常的日子里运行得很好,但在繁忙的日子里(比如今天......)可能会有点挣扎

我是一个单独的开发人员,所以全栈而且分布很薄,并且很乐意承认我的 DBA 技能相当差。我可以写一个像样的查询,但我对服务器设置一无所知。我的 my.cnf 中的内容是多年来从各种不同来源拼凑而成的,我猜它远非最佳!

[client]
default-character-set           = utf8mb4


[mysql]
default-character-set           = utf8mb4


[mysqld]
user                            = mysql
default-storage-engine          = InnoDB
socket                          = /var/lib/mysql/mysql.sock
pid-file                        = /var/run/mysqld/mysqld.pid

datadir                         = /var/lib/mysql

skip-name-resolve

max-allowed-packet              = 16M
max-connect-errors              = 1000000

# is this a silly thing to do..?
tmpdir                          = /dev/shm

# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links                  = 0

character-set-client-handshake  = FALSE
character_set_server            = utf8mb4
collation_server                = utf8mb4_unicode_ci

ft_min_word_len                 = 2
group_concat_max_len            = 4096


max_connections                 = 500

tmp-table-size                 = 32M
max-heap-table-size            = 32M
thread-cache-size              = 50
open-files-limit               = 65535
table-definition-cache         = 1024
table-open-cache               = 2048

join_buffer_size                = 2M
sort_buffer_size                = 2M
read_rnd_buffer_size            = 2M

slow-query-log                  = 1
long-query-time                 = 1
slow-query-log-file             = /var/lib/mysql/slow_log

log-error                       = /var/lib/mysql/mysite.err

max_allowed_packet              = 256M

query_cache_size                = 268435456
query_cache_limit               = 1048576
query_cache_type                = 1

innodb_buffer_pool_size         = 12G
innodb_buffer_pool_instances    = 12
innodb_read_io_threads          = 12
innodb_write_io_threads         = 12
thread_pool_size                = 24

sql_mode                        = ""




[mysqld_safe]
log-error=/var/lib/mysql/mysite.err
pid-file=/var/run/mysqld/mysqld.pid

任何帮助/指导将不胜感激,我喜欢学习,更重要的是我需要学习!

谢谢!

mysql configuration
  • 1 个回答
  • 944 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve