主页 / dba / 问题 / 51437
Accepted
Michał Herman
Asked: 2013-10-14 04:04:26 +0800 CST

MySQL 集群 - 从 NDB 得到错误 1601 'Out extents, tablespace full'

  • 772

我正在尝试对 MySQL Cluster 进行一些测试。
我正在使用以下命令创建我的数据库：

CREATE DATABASE test1;
use test1;
CREATE LOGFILE GROUP lg1
ADD UNDOFILE 'undofile.dat'
ENGINE = NDB;
CREATE TABLESPACE ts1
ADD DATAFILE 'datafile.dat'
USE LOGFILE GROUP lg1
ENGINE = NDB;
CREATE TABLE `dane` (
  `id` int(11) NOT NULL,
  `data` blob NOT NULL,
  PRIMARY KEY (`id`)
)
TABLESPACE ts1 STORAGE DISK
engine=ndb;

然后我用一些数据和每个 50KB 的随机 blob 填充表。但我收到以下错误：

mysql> INSERT INTO dane(id, data) VALUES(3790, randomBlob(51200));
ERROR 1114 (HY000): The table 'dane' is full
mysql> show warnings;
+---------+------+--------------------------------------------------------+
| Level   | Code | Message                                                |
+---------+------+--------------------------------------------------------+
| Warning | 1296 | Got error 1601 'Out extents, tablespace full' from NDB |
| Error   | 1114 | The table 'dane' is full                               |
+---------+------+--------------------------------------------------------+
2 rows in set (0,00 sec)

mysql> select count(*) from dane;
+----------+
| count(*) |
+----------+
|     2507 |
+----------+
1 row in set (0,03 sec)

这不是集群内存使用问题：

ndb_mgm> ALL REPORT MEMORYUSAGE
Connected to Management Server at: localhost:1186
Node 3: Data usage is 6%(164 32K pages of total 2560)
Node 3: Index usage is 7%(178 8K pages of total 2432)

2500*50KB ~= 1GB
每当我尝试插入超过 1GB 的 blob 时都会出现此错误。
如何扩展此表空间的大小？

mysql mysql-cluster

2 个回答

  1. Best Answer

    第一个 2500*50kB ~= 128MB。然后，如果您检查CREATE TABLESPACE语法，则数据文件的默认 INITIAL_SIZE 为 128MB！

    因此，如果您想存储更多数据，您可以在创建表空间时指定所需的 INITIAL_SIZE ，也可以ALTER TABLESPACE ADD DATAFILE。

    通过STORAGE DISK在 CREATE TABLE 语句中指定，您声明要在磁盘表上而不是在内存中。使用这样的表ALL REPORT MEMORYUSAGE显示对该表没有任何意义。

    如果您想要存储在内存中的“经典” NDB 表，只需跳过TABLESPACE ts1 STORAGE DISK修饰符，然后ALL REPORT MEMORYUSAGE将显示用于数据和索引的内存量。

    • 3

  2. 该关键字对和INITIAL_SIZE都具有误导性。它表明该文件可能会按需自动扩展，但实际上不是。所以只是.CREATE TABLESPACECREATE LOGFILE GROUPINITIAL_SIZESIZE

    这里没有任何关系ALL REPORT MEMORY USAGE，因为您的表是在磁盘上创建的（因为CREATE TABLE .. TABLESPACE ts1 STORAGE DISK）。只有id您存储在内存中的字段（从 开始 PRIMARY KEY）。我对表空间中的空闲字节感兴趣，请使用INFORMATION_SCHEMA.FILES，例如

    mysql> select FILE_NAME, FREE_EXTENTS*EXTENT_SIZE as bytes_free, extra  from   information_schema.FILES where TABLESPACE_NAME='ts_1' and    FILE_TYPE="DATAFILE";
+-----------+------------+----------------+
| FILE_NAME | bytes_free | extra          |
+-----------+------------+----------------+
| data1     |  132120576 | CLUSTER_NODE=3 |
| data1     |  132120576 | CLUSTER_NODE=4 |
+-----------+------------+----------------+
2 rows in set (0.01 sec)

    注意：DELETE如果你从表中增加 Bytes_free 是不会的。只有在执行OPTIMIZE TABLE之后DELETE或执行时才会回收磁盘空间TRUNCATE TABLE。

    Note2：对于磁盘表 MySQL Cluster 使用固定的行格式，所以VARCHAR(10000)被处理为CHAR(10000). 使用BLOBorTEXT则更复杂：前 256 个字节存储在 the 中DataMemory，其余的被分成 2k 个块，并存储在一个辅助表中。所以在上表中插入 5000 条 1k 记录，结果是这样的

    前：

    +-----------+------------+----------------+------------+
| FILE_NAME | bytes_free | extra          | row_format |
+-----------+------------+----------------+------------+
| data1     |  134217728 | CLUSTER_NODE=4 | FIXED      |
| data1     |  134217728 | CLUSTER_NODE=3 | FIXED      |
+-----------+------------+----------------+------------+

ndb_mgm> all report memory usage;
Node 3: Data usage is 2%(59 32K pages of total 2560)
Node 3: Index usage is 1%(26 8K pages of total 2592)
Node 4: Data usage is 2%(59 32K pages of total 2560)
Node 4: Index usage is 1%(26 8K pages of total 2592)

    后：

    +-----------+------------+----------------+------------+
| FILE_NAME | bytes_free | extra          | row_format |
+-----------+------------+----------------+------------+
| data1     |  123731968 | CLUSTER_NODE=4 | FIXED      |
| data1     |  123731968 | CLUSTER_NODE=3 | FIXED      |
+-----------+------------+----------------+------------+

ndb_mgm> all report memory usage;
Node 3: Data usage is 4%(120 32K pages of total 2560) 
Node 3: Index usage is 1%(42 8K pages of total 2592)
Node 4: Data usage is 4%(120 32K pages of total 2560)
Node 4: Index usage is 1%(42 8K pages of total 2592)

    磁盘使用情况

    $> echo $(((134217728-123731968)/5000))
2097
    • 0

相关问题