MySQL 5.7新支持--------通用表空间实战

1. 背景

  * 一个通用的表空间是一个共享的InnoDB表空间。

* 与系统表空间类似,一般的表空间是共享的表空间,可以存储多个表的数据

* 一般的表空间比文件表的表空间具有潜在的内存优势。

* MySQL 将表空间元数据保存到一个表空间的生命周期中。在更少的一般表空间中,多个表对表空间元数据的内存比在单独的文件表空间表空间中的相同数量的表要少。

* 一般的表空间数据文件可能放在一个相对于MySQL数据目录的目录中,它为您提供了许多文件表空间的数据文件和存储管理功能。与文件表的表空间一样,在MySQL数据目录之外放置数据文件的能力允许您单独管理关键表的性能,为特定的表设置RAID或DRBD,或者将表绑定到特定的磁盘。

* MySQL 5.7开始支持通用表空间管理功能。

2. MySQL 环境

Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 4
Server version: 5.7.18 MySQL Community Server (GPL)

Copyright (c) 2000, 2017, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type ‘help;‘ or ‘\h‘ for help. Type ‘\c‘ to clear the current input statement.

mysql> show variables like ‘version‘;
+---------------+--------+
| Variable_name | Value  |
+---------------+--------+
| version       | 5.7.18 |
+---------------+--------+
1 row in set (0.01 sec)

mysql> show variables like ‘datadir‘;
+---------------+-------------------+
| Variable_name | Value             |
+---------------+-------------------+
| datadir       | /data/mysql_data/ |
+---------------+-------------------+
1 row in set (0.04 sec)

3. 创建通用表空间

  * 创建表空间文件存放目录

[[email protected] mytest]# mkdir -v /mysql_general_data
mkdir: created directory `/mysql_general_data‘

* 查看mysqld 运行用户

[[email protected] mytest]# ps aux | grep mysqld | grep -v grep
root       1468  0.0  0.0 110400  1532 ?        S    16:00   0:00 /bin/sh /usr/local/mysql/bin/mysqld_safe --datadir=/data/mysql_data --pid-file=/data/mysql_data/MySQL.pid
mysql      1614  0.1  5.0 1309380 196656 ?      Sl   16:00   0:06 /usr/local/mysql/bin/mysqld --basedir=/usr/local/mysql --datadir=/data/mysql_data --plugin-dir=/usr/local/mysql/lib/plugin --user=mysql --log-error=/data/mysql_data/error.log --pid-file=/data/mysql_data/MySQL.pid

* 修改表空间文件存放目录所属用户与组为mysql运行用户 [ 此步必须 ]

[[email protected] mytest]# chown -v mysql.mysql /mysql_general_data 
changed ownership of `/mysql_general_data‘ to mysql:mysql

* 创建通用表空间

   ADD datafile: 指定通用表空间文件存放路径

FILE_BLOCK_SIZE: 指定文件块大小,推荐与Innodb_page_size参数大小对应

ENGINE: 指定存储引擎

mysql> CREATE TABLESPACE ts1 ADD datafile ‘/mysql_general_data/ts1.ibd‘ FILE_BLOCK_SIZE=16384  ENGINE=InnoDB;
Query OK, 0 rows affected (0.06 sec)

mysql> show variables like ‘innodb_page_size‘;
+------------------+-------+
| Variable_name    | Value |
+------------------+-------+
| innodb_page_size | 16384 |
+------------------+-------+
1 row in set (0.02 sec)

  * 查看通用表空间文件

mysql> system ls -l /mysql_general_data;
total 64
-rw-r----- 1 mysql mysql 65536 Jul  5 17:15 ts1.ibd

4. 测试通用表空间文件

  * 使用通用表空间作为数据存储创建表

mysql> CREATE TABLE test_general(
    -> id BIGINT PRIMARY KEY NOT NULL AUTO_INCREMENT,
    -> name VARCHAR(64) NOT NULL
    -> )ENGINE=InnoDB TABLESPACE=ts1 DEFAULT CHARSET=utf8mb4;
Query OK, 0 rows affected (0.04 sec)

  * 查看表信息

mysql> show create table test_general;
+--------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| Table        | Create Table                                                                                                                                                                                      |
+--------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
| test_general | CREATE TABLE `test_general` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT,
  `name` varchar(64) NOT NULL,
  PRIMARY KEY (`id`)
) /*!50100 TABLESPACE `ts1` */ ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 |
+--------------+---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------+
1 row in set (0.06 sec)

  * 查看表文件

mysql> select database();
+------------+
| database() |
+------------+
| mytest     |
+------------+
1 row in set (0.01 sec)

mysql> system ls -l /data/mysql_data/mytest;
total 16
-rw-r----- 1 mysql mysql   67 Jul  5 16:30 db.opt
-rw-r----- 1 mysql mysql 8586 Jul  5 17:19 test_general.frm

5. 删除表空间文件

* 有表占用时直接删除

mysql> drop tablespace ts1;
ERROR 1529 (HY000): Failed to drop TABLESPACE ts1

  * 先删除占用表,再删除

mysql> drop table test_general;
Query OK, 0 rows affected (0.04 sec)

mysql> drop tablespace ts1;
Query OK, 0 rows affected (0.03 sec)

6. 总结

以需求驱动技术,技术本身没有优略之分,只有业务之分。

时间: 2024-10-04 22:15:19

MySQL 5.7新支持--------通用表空间实战的相关文章

MySQL 5.7新支持--------Json索引创建实战

1. 背景 * 在MySQL 5.7.8中,MySQL支持由RFC 7159定义的本地JSON数据类型,它支持对JSON(JavaScript对象标记)文档中的数据进行有效访问. * MySQL会对DML JSON数据自动验证.无效的DML JSON数据操作会产生错误. * 优化的存储格式.存储在JSON列中的JSON文档转换为一种内部格式,允许对Json元素进行快速读取访问. * MySQL Json类型支持通过虚拟列方式建立索引,从而增加查询性能提升. 2. Json 索引 * 创建Json

mysql之innodb引擎的共享表空间和独立表空间

对于innodb的数据存储文件,首先要解决两个概念性的问题: 共享表空间以及独占表空间.(innodb引擎与MYISAM引擎的区别很大.特别是它的数据存储方式等.) 1.共享表空间和独占表空间介绍 共享表空间以及独占表空间都是针对数据的存储方式而言的. 共享表空间:  每一个数据库的所有的表数据,索引文件全部放在一个文件中,默认这个共享表空间的文件路径在data目录下. 默认的文件名为:ibdata1  初始化为10M. 独占表空间:  每一个表都将会生成以独立的文件方式来进行存储,每一个表都有

MySQL 5.7新支持--------Json类型实战

1. 背景 * 在MySQL 5.7.8中,MySQL支持由RFC 7159定义的本地JSON数据类型,它支持对JSON(JavaScript对象标记)文档中的数据进行有效访问. * MySQL会对DML JSON数据自动验证.无效的DML JSON数据操作会产生错误. * 优化的存储格式.存储在JSON列中的JSON文档转换为一种内部格式,允许对Json元素进行快速读取访问. * MySQL Json类型支持建立索引增加查询性能提升. 2. Json类型所需的存储空间和值范围 类型 占用字节

浅谈mysql中各种表空间(tablespaces)的概念

mysql中,会涉及到各种表空间的概念,虽然,很多方面这些概念和Oracle有相似性,但也有很多不同的地方,初学者很容易被这些概念弄的晕头转向,从而,混淆这些概念的区别和理解,下面,就简要介绍和说明一下这些表空间的概念. 1.系统表空间(System Tablespace) innodb系统表空间包含innodb数据字典(innodb相关对象的元数据),同时,双写缓冲(doublewrite buffer).改变缓冲(change buffer)和undo日志(undo logs)等也存储于系统

mysql 共享表空间的扩展

innodb表空间的扩展: 在配置共享表空间的情况下,mysql数据目录下会有一个文件ibdata1,而且随着数据的增多,持续增加, 数据库的删除操作并不会缩减ibdata1的容量. 这是由于my.cnf的配置: innodb_data_file_path = ibdata1:10M:autoextend 配置说明,innodb共享表空间文件是ibdata1,并且初始设置10M空间,当表空间不足时自动扩张 这样就会导致一个问题,当越来越多的数据增加的时候,ibdata也会持续膨胀,有的达到几十G

本地管理表空间(LMT)与自动段空间管理(ASSM)概念

创建表空间时,extent management local 定义本地管理表空间(LMT),segment space management auto 定义自动段空间管理(ASSM). extent management local(本地管理表空间)是在表空间的头部用位图区记录extent(区)的使用情况(是否为free).与之相对的是字典管理表空间,用数据字典记录extent使用信息. segment space management auto(段空间自动管理)是在段的头部使用位图管理块(BM

表空间及回收

一. Innodb存储引擎表中所有数据都是存储在表空间中的,表空间又分为系统表空间,以ibdata1来命名,在数据安装初始化时系统会创建一个ibdata1的表空间文件,它会存储所有数据的信息以及回滚段(undo)的信息.在MySQL5.6以后,undo表空间可以通过参数单独设置存储位置了,可从ibdata1中独立出来.Innodb_data_file_path负责定义系统表空间的路径.初始化大小.自动化扩展策略.数据库默认的自动扩展大小是64MB. mysql> show variables l

Oracle bigfile 大文件表空间

Database 是由一个或多个被称为表空间(tablespace)的逻辑存储单位构成.表空间内的逻辑存储单位为段(segment),段又可以继续划分为数据扩展(extent).而数据扩展是由一组连续的数据块(datablock)构成. 大文件表空间 在Oracle中用户可以创建大文件表空间(bigfile tablespace).这样Oracle数据库使用的表空间(tablespace)可以由一个单一的大文件构成,而不是若干个小数据文件.这使Oracle可以发挥64位系统的能力,创建.管理超大

表空间、缓冲池

表空间是数据库系统中数据库逻辑结构与操作系统物理结构之间建立映射的重要存储结构,它作为数据库与实际存放数据的容器之间的中间层,用于指明数据库中数据的物理位置.任何数据库的创建都必须显式或隐式的为其指定表空间,且数据库中的所有数据都位于表空间中. 用户可以根据硬件环境以及成本等需求,通过指定建立在不同容器上的表空间来自由选择数据的物理存储位置.同时由于备份和恢复可以在表空间级别执行,用户能够进行更多粒度的备份恢复控制. 理解表空间前先理解容器. 容器(Container) 容器是物理存储设备,可以