存储引擎

摘要 为了学习研究MySQL数据库在工作原理，深刻理解MySQL在企业运用时如何保证其高效运行。分别从表结构的优化，SQL语句的优化，存储引擎的选择，索引的优化以及现今MySQL的发展与其他企业级数据库的比较。介绍了从编码选择到数据类型的选择以及从整体的角度设计表结构。在SQL语句的选择和使用的介绍的时候，深入介绍了一些基本的使用原则以及在一般在使用过程中我们存在的误区以及如何解决这些问题。着重介绍了MySQL的几个存储引擎MyISAM、InnoDB和NDBCluster的差异以及各自的适用范围。有介绍了MySQL的索引的一些优化的建议以及高屋建瓴地阐述和比较了MySQL的优劣和发展态势。 前言 数据库作为应用作为广泛，地位极为重要的中间件应用，学习和使用数据库管理系统变得越来越重要。为了研究和总结对mysql数据库的学习结果，特别从数据表结构、sql语句优化、存储引擎的选择、索引的应用、以及mysql的比较总结对mysql技术做了一个比较全面升入的介绍。使用mysql的过程中，如何更好地使用与优化越来越重要，在这篇文章中就阐述。 第一章 表结构的优化 数据表是数据库的具体表现形式，设计优良的数据库拥有良好的表结构，者不单单指数据库的表需要满足范式结构，为了更有利于具体操作，表结构还需要实际的可扩展性，以便于做增删改查，又需要根据数据表的具体作用做出调节

目录 1. MySql体系结构 2. MySql存储引擎 2.1 InnoDB存储引擎 2.2 MyISAM存储引擎 2.3 Memory存储引擎 2.4 Archive存储引擎 3. 存储引擎对比整理 4. 参考 MySql数据库最大的特色就是其插件式的存储引擎架构，本文主要介绍MySql常用的存储引擎，为开发时选择合适的存储引擎提供参考。 1. MySql体系结构 在介绍存储引擎之前先来介绍下MySql的体系结构，以便大家知道存储引擎在MySql整个体系中处于什么位置。下图是官方提供的一张架构图： MySQL体系结构图 从上图可以发现，MySQL由以下几部分组成： 连接池组件 管理服务和工具组件 SQL接口组件 查询分析器组件 优化器组件 缓冲（Cache）组件 插件式存储引擎 物理文件 MySQL数据库区别于其他数据库的最重要的一个特点就是其插件式的表存储引擎，从上图中也可以看到，MySql支持很多种存储引擎。需要特别注意的是，存储引擎是基于表的，而不是数据库。 2. MySql存储引擎 插件式存储引擎的好处是：能够根据具体的应用的特点选择不同的存储引擎。下面是几种MySQL常用的存储引擎。 2.1 InnoDB存储引擎 InnoDB存储引擎支持事务，其设计目标主要面向在线事务处理（OLTP）的应用。其特点是行锁设计、支持外键，并支持类似于Oracle的非锁定读

1.索引是什么： 索引用于快速找出在某个列中有某一特定值的行。 2.索引的优缺点： 优点：索引能够有效地提高查询的效率； 缺点：索引过多也会影响应用程序的性能。 3.索引的分类： 按索引包含列的个数可以分为 （1）单列索引（一个索引只包含一个列，但一个表可以有多个单列索引） （2）组合索引（一个组合索引包含两个或者两个以上的列） 只有在查询条件中使用了这些字段的左边字段时，索引才会被使用，使用组合索引时遵循最左前缀集合。 我们创建一张menu表 CREATE TABLE `menu` ( `id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '菜单id', `sid` bigint(20) DEFAULT NULL COMMENT '系统id', `name` varchar(255) DEFAULT NULL COMMENT '菜单名', `pid` bigint(20) DEFAULT NULL COMMENT '父菜单', `type` tinyint(4) DEFAULT NULL COMMENT '类型（1：一级菜单 2：二级菜单）', `url` varchar(255) DEFAULT NULL COMMENT '菜单url', `sort` int(11) DEFAULT NULL COMMENT '排序', PRIMARY

MySQL之存储引擎 1.MySQL存储引擎介绍 MySQL中的数据用各种不同的技术存储在文件（或者内存）中。这些技术中的每一种技术都使用不同的存储机制、索引技巧、锁定水平并且最终提供广泛的不同的功能和能力。通过选择不同的技术，你能够获得额外的速度或者功能，从而改善你的应用的整体功能。 例如，如果你在研究大量的临时数据，你也许需要使用内存存储引擎。内存存储引擎能够在内存中存储所有的表格数据。又或者，你也许需要一个支持事务处理的数据库(以确保事务处理不成功时数据的回退能力)。 这些不同的技术以及配套的相关功能在MySQL中被称作存储引擎(也称作表类型)。 MySQL默认配置了许多不同的存储引擎，可以预先设置或者在MySQL服务器中启用。你可以选择适用于服务器、数据库和表格的存储引擎，以便在选择如何存储你的信息、如何检索这些信息以及你需要你的数据结合什么性能和功能的时候为你提供最大的灵活性。 选择如何存储和检索你的数据的这种灵活性是MySQL为什么如此受欢迎的主要原因。其它数据库系统(包括大多数商业选择)仅支持一种类型的数据存储。 遗憾的是，其它类型的数据库解决方案采取的“一个尺码满足一切需求”的方式意味着你要么就牺牲一些性能，要么你就用几个小时甚至几天的时间详细调整你的数据库。使用MySQL，我们仅需要修改我们使用的存储引擎就可以了 2.MySQL结构 MySQL架构总共四层

ClickHouse 是俄罗斯的Yandex于2016年开源的列式存储数据库（DBMS），主要用于在线分析处理查询（OLAP），能够使用SQL查询实时生成分析数据报告 1 安装前的准备 1.1 CentOS取消打开文件数限制 在/etc/security/limits.conf、/etc/security/limits.d/90-nproc.conf这2个文件的末尾加入一下内容： [root@hadoop101 ~]# vim /etc/security/limits.conf 在文件末尾添加： * soft nofile 65536 * hard nofile 65536 * soft nproc 131072 * hard nproc 131072 [root@hadoop101 ~]# vim /etc/security/limits.d/90-nproc.conf 在文件末尾添加： * soft nofile 65536 * hard nofile 65536 * soft nproc 131072 * hard nproc 131072 重启服务器之后生效，用ulimit -n 或者ulimit -a查看设置结果 [root@hadoop101 ~]# ulimit -n 65536 1.2 CentOS取消SELINUX 修改/etc/selinux

mysql补充 mysql使用流程 开启服务端，mysqld或者net start mysql cmd下键入mysql -u root -p，输入设置好的密码，连接mysql客户端 show databases；展示所有的mysql仓库 创建一个库：create database CRM；然后show databases； 切换数据库使用use + 库名，例如：use crm； 在切换仓库下创建一张表，命令：create table student(id int,name char(10),age int); 再执行show tables;就可以看到有了一个student表 查看一下这个表里的数据select * from student； 接下来正常执行表的增删查改操作即可 mysql目录介绍 总结：其实这些库就是我们电脑上对应的文件夹，在mysql中显示为对应的库，来方便我们管理数据，而文件或者文件夹这种与硬盘打交道的事情就交给mysql了，我们只需要对mysql库中的数据进行操作就可以了 指令补充 show variables like "%char%"; # 查看字符集编码指令 mysql -h 127.0.0.1 -P 3306 -u root -p # MySQL客户端连接服务端时的完整指令 show variables like "storage_engine%";

1.储存引擎解释 首先确定一点，存储引擎的概念是MySQL里面才有的，不是所有的关系型数据库都有存储引擎这个概念，后面我们还会说，但是现在要确定这一点。　　 　　在讲清楚什么是存储引擎之前，我们先来个比喻，我们都知道录制一个视频文件，可以转换成不同的格式，例如mp4，avi，wmv等，而存在我们电脑的磁盘上也会存在于不同类型的文件系统中如windows里常见的ntfs、fat32，存在于linux里常见的ext3，ext4，xfs，但是，给我们或者用户看懂实际视频内容都是一样的。直观区别是，占用系统的空间大小与清晰程度可能不一样。 那么数据库表里的数据存储在数据库里及磁盘上和上述的视频格式及存储磁盘文件的系统格式特征类似，也有很多种存储方式。 　　但是对于用户和应用程序来说同样一张表的数据，无论用什么引擎来存储，用户能够看到的数据是一样的。不同储引擎存取，引擎功能，占用空间大小，读取性能等可能有区别。说白了，存储引擎就是在如何存储数据、提取数据、更新数据等技术方法的实现上，底层的实现方式不同，那么就会呈现出不同存储引擎有着一些自己独有的特点和功能，对应着不同的存取机制。 　　因为在关系数据库中数据的存储是以表的形式存储的，所以存储引擎也可以称为表类型(即：对表的存储、操作等的实现方法不同)，表是什么，表本质上就是磁盘上的文件。 　　其实MySQL支持多种存储引擎

1. 逻辑结构 1) 结构图如下 2) 连接 / 线程处理 : 大多基于网络客户端 / 服务器的工具或服务都有类似的 . 主要用作连接处理 , 授权认证 , 安全等 3) 第二层 : 大多 MySQL 核心服务在此层 , 包括 : 查询解析 , 分析 , 优化 , 缓存 , 内置函数 ( 日期 , 时间 , 数学 , 加密函数 ), 跨存储引擎的功能 ( 存储过程 , 触发器 , 视图等 ) 4) 第三层包含了存储引擎 : a 存储引擎负责数据的存储和提取 b 服务器通过 API 与存储引擎通信 c 存储引擎 API 包含几十个底层函数 , 如开启一个事务 , 根据主键提取一行记录等 d 存储引擎不会解析 SQL(InnoDB 例外 , 它会解析外键 ,MySQL 服务器本身没有实现该功能 ) e 不同存储引擎间不会相互通信 , 只简单响应上层服务器请求 2. 连接管理与安全性 1) 每个客户端连接都会在服务器进程有一个线程 , 这个连接的查询只会在单独的线程中执行 , 该线程只能轮流在某个 CPU 核心或 CPU 中运行 2) MySQL5.5 开始支持线程池插件 , 因此服务器会负责线程缓存 , 也不需要为每个新建连接创建和销户线程 3) 客户端连接服务器是需要认证 a 基于用户名 , 密码 , 原始主机信息认证 b 如使用安全套接字 (SSL) 方式连接 , 可以使用 X

MySQL数据库初识 1.数据库概述 什么是数据? 描述事物的符号记录称为数据.描述事物的符号既可以是数字,也可以是文字,图片,声音,图像等,数据有多种表现形式,他们都可以经过数字化后存入计算机. 什么是数据库(DataBase,简称DB)? 数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，可视为 电子化 的文件柜——存储电子文件的处所，用户可以对文件中的数据进行新增、查询、更新、删除等操作。 数据库的优势: 1.解决了操作文件的效率和便捷问题 2.解决了多个程序同时使用数据的一致性问题 3.解决了安全问题 4.解决了并发问题 什么是数据库管理系统(DataBaseManagementSystem,简称DBMS)? 数据库 管理 系统 (Database Management System)是一种操纵和管理数据库的大型软件，用于建立、使用和维护 数据库 ，简称 DBMS 。它对 数据库 进行统一的管理和 控制 ，以保证 数据库 的安全性和完整性。用户通过 DBMS 访问 数据库 中的数据， 数据库管理员 也通过 dbms 进行数据库的维护工作。它可使多个 应用程序 和用户用不同的方法在同时或不同时刻去建立，修改和询问 数据库 。大部分 DBMS 提供 数据定义语言 DDL （Data Definition Language）和

目录 一 存储引擎解释 二 MySQL存储引擎分类 三 存储引擎的使用 一 存储引擎解释 　　首先确定一点，存储引擎的概念是MySQL里面才有的，不是所有的关系型数据库都有存储引擎这个概念，后面我们还会说，但是现在要确定这一点。　　 　　在讲清楚什么是存储引擎之前，我们先来个比喻，我们都知道录制一个视频文件，可以转换成不同的格式，例如mp4，avi，wmv等，而存在我们电脑的磁盘上也会存在于不同类型的文件系统中如windows里常见的ntfs、fat32，存在于linux里常见的ext3，ext4，xfs，但是，给我们或者用户看懂实际视频内容都是一样的。直观区别是，占用系统的空间大小与清晰程度可能不一样。 那么数据库表里的数据存储在数据库里及磁盘上和上述的视频格式及存储磁盘文件的系统格式特征类似，也有很多种存储方式。 　　但是对于用户和应用程序来说同样一张表的数据，无论用什么引擎来存储，用户能够看到的数据是一样的。不同储引擎存取，引擎功能，占用空间大小，读取性能等可能有区别。说白了，存储引擎就是在如何存储数据、提取数据、更新数据等技术方法的实现上，底层的实现方式不同，那么就会呈现出不同存储引擎有着一些自己独有的特点和功能，对应着不同的存取机制。 　　因为在关系数据库中数据的存储是以表的形式存储的，所以存储引擎也可以称为表类型(即：对表的存储、操作等的实现方法不同)，表是什么