AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 103370
Accepted
mpen
mpen
Asked: 2015-06-06 12:35:59 +0800 CST2015-06-06 12:35:59 +0800 CST 2015-06-06 12:35:59 +0800 CST

TEXT 字段是否与 MySQL-ISAM 中的行分开存储?

  • 772

我们有一个“笔记”表,即使我们没有搜索笔记内容,一些查询也会变得非常慢。我们想知道将笔记内容移动到单独的表格中是否会加快速度?

我认为分离内容并不重要——TEXT 字段本质上不只是指向磁盘上其他位置的指针吗?还是桌子大小很重要?

InnoDB 能更好地处理这个问题吗?

mysql performance
  • 3 3 个回答
  • 1683 Views

3 个回答

  • Voted
  1. akuzminsky
    2015-06-06T13:09:12+08:002015-06-06T13:09:12+08:00

    在 MyISAM 中,记录存储在块中。有大约 20 种不同的块类型,其中一些可能非常大。这些用于 BLOB/TEXT 值。我从未见过 MyISAM 记录存储指向 BLOB 的指针(但我不会坚持)。

    在 InnoDB 中,BLOB/TEXT 值也是记录的一部分,并存储在页面中,只要总记录大小不超过 ~7k。否则 768 个第一个字节存储在页中,其余部分存储在外部页中。(在梭子鱼格式中,它只存储一个指向外部页面的 20 字节指针)。

    • 3
  2. RolandoMySQLDBA
    2015-06-06T13:05:00+08:002015-06-06T13:05:00+08:00

    TEXT 字段具有 MySQL 文档(压缩 BLOB、VARCHAR 和 TEXT 列)所称的“列外存储”

    在聚集索引中,不属于主键的 BLOB、VARCHAR 和 TEXT 列可能存储在单独分配(“溢出”)的页面上。我们将这些称为“页外列”,其值存储在溢出页的单链表中。

    该链接包含有关使用压缩的更多信息。Percona 也是如此。

    我有一些关于 InnoDB Storage 的帖子,与 PostgreSQL 的做法相比

    • Aug 26, 2014:提案:MySQL blob 处理修订
    • May 01, 2012:什么比longblob大?
    • Mar 21, 2012:在 mysql InnoDB 中有很多 NULL 列有害吗?

    在 MyISAM 方面,你必须使用ROW_FORMAT=COMPRESSED来提高存储使用率

    • 1
  3. Best Answer
    Rick James
    2015-06-10T11:26:48+08:002015-06-10T11:26:48+08:00

    MyISAM only——通常一条记录是.MYD文件中连续的字节流。这包括TEXT和BLOB列。索引具有指向 .MYD 文件的字节偏移量(或记录号)。

    行后DELETEd,.MYD 中可能有孔。MyISAM 更喜欢在附加到 .MYD 之前填充漏洞。然而,孔可能不够大。在这种情况下,记录的一部分存储在第一个孔中,并且链接(字节偏移量)存储到记录的下一部分。只要有必要,这种链接就会持续下去。

    因此,如果表中有很多“流失”(删除+插入等),那么新的INSERTs存储可能会非常低效。也就是说,它们可能是支离破碎的和分散的。OPTIMIZE TABLE这是对 MyISAM 表有用的少数情况之一。将OPTIMIZE通过有效地读取每一行并将其重写为新的 (tmp) .tmd 来重建表,稍后将重命名为 .MYD。这会对行进行碎片整理并消除任何剩余的间隙。

    .MYD 没有“块”结构。相比之下,.MYI 保存所有索引,包括PRIMARY KEY1KB BTree 块中的 .

    数据的唯一缓存是操作系统提供的。这往往是 4GB 块,与表中行的记录边界的相关性为零。

    什么时候有并行表——问题真的是关于这个。(但我需要先说上述内容。)

    很难明确指出何时手动按列拆分表是有用的。

    案例 1:您在表格中进行了大量搜索,但没有触及 TEXT 字段。在其他地方拥有大的 TEXT 字段可以避免踩到那些大奶牛稻田。JOIN获取一行的 TEXT 并不那么昂贵。

    案例 2:你总是LIKE在 TEXT 字段上做。然后垂直分区会减慢速度。

    我在几个项目中完成了案例 1。

    案例 1 可以通过这个技巧进一步增强:

    SELECT a.stuff, b.text
        FROM ( SELECT ... FROM main_table ... LIMIT 1 ) a
        JOIN text_table b USING (id);
    

    笔记:

    • 子查询命中很多行,但随后决定了一些行(通过LIMIT或GROUP BY,或...);
    • 任何 tmp 表都不大(因为 TEXT 不在其中);
    • 只需对并行表进行 1 次探测。

    另一个技巧是压缩文本字段(并将其放入 BLOB)。

    • 在客户端而不是服务器中进行压缩
    • 3:1 收缩是文本的典型比例
    • 如果您有一个大表,则空间节省(因此 I/O 节省)可能足以补偿压缩中的 CPU 时间。

    (这两个“技巧”可以应用于 InnoDB。)

    • 1

相关问题

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

  • 组如何跟踪数据库架构更改?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve