存储引擎

[转载]MySQL的存储引擎 来源： https://www.cnblogs.com/lina1006/archive/2011/04/29/2032894.html 其实这是个只有在MySQL中才存在的问题。 什么是MySql数据库 通常意义上，数据库也就是数据的集合，具体到计算机上数据库可以是存储器上一些文件的集合或者一些内存数据的集合。 存储引擎说白了就是如何存储数据、如何为存储的数据建立索引和如何更新、查询数据等技术的实现方法。因为在关系数据库中数据的存储是以表的形式存储的，所以存储引擎也可以称为表类型（即存储和操作此表的类型）。 在Oracle 和SQL Server等数据库中只有一种存储引擎，所有数据存储管理机制都是一样的。 1 MyISAM： 这种引擎是mysql最早提供的。这种引擎又可以分为静态MyISAM、动态MyISAM 和压缩MyISAM三种： 静态MyISAM： 如果数据表中的各数据列的长度都是预先固定好的，服务器将自动选择这种表类型。因为数据表中每一条记录所占用的空间都是一样的，所以这种表存取和更新的效率非常高。当数据受损时，恢复工作也比较容易做。 动态MyISAM： 如果数据表中出现varchar、xxxtext或xxxBLOB字段时，服务器将自动选择这种表类型。相对于静态MyISAM，这种表存储空间比较小，但由于每条记录的长度不一，所以多次修改数据后

事务是MySQL等关系型数据库区别于NoSQL的重要方面，是保证数据一致性的重要手段。 本文将首先介绍 MySQL 事务相关的基础概念，然后介绍事务的ACID 特性，并分析其实现原理。 MySQL博大精深，文章疏漏之处在所难免，欢迎批评指正。 一、基础概念 事务（Transaction）是访问和更新数据库的程序执行单元；事务中可能包含一个或多个sql语句，这些语句要么都执行，要么都不执行。作为一个关系型数据库，MySQL支持事务，本文介绍基于MySQL5.6。 首先回顾一下MySQL事务的基础知识。 （1）. 逻辑架构和存储引擎 图片来源：https://blog.csdn.net/fuzhongmin05/article/details/70904190 如上图所示，MySQL服务器逻辑架构从上往下可以分为三层： （1）第一层：处理客户端连接、授权认证等。 （2）第二层：服务器层，负责查询语句的解析、优化、缓存以及内置函数的实现、存储过程等。 （3）第三层：存储引擎，负责MySQL中数据的存储和提取。 MySQL 中服务器层不管理事务，事务是由存储引擎实现的。 MySQL支持事务的存储引擎有InnoDB、NDB Cluster等，其中InnoDB的使用最为广泛；其他存储引擎不支持事务，如MyIsam、Memory等。 如无特殊说明，后文中描述的内容都是基于InnoDB。 （2）.

简介 哈希存储引擎 B树(B-tree)存储引擎 LSM树(Log-Structured Merge Tree)存储引擎 存储引擎是存储系统的核心，直接决定了存储系统对外提供的功能和性能。 存储系统基本功能总体上分：写，读。 写又分为：增，删，改。 读又分为：顺序，随机。 存储引擎有：哈希存储引擎，B树(B-tree)存储引 大专栏 存储引擎 擎，LSM树(Log-Structured Merge Tree)存储引擎。 哈希存储引擎 基于哈希表，不支持顺序读，其余基本功能都支持。—常用于键值存储系统中。 B树(B-tree)存储引擎 基于B树，支持所有基本功能。—常用于关系数据库。 LSM树(Log-Structured Merge Tree)存储引擎 支持所有基本功能，通过批量转储技术规避磁盘随机写入问题，广泛应用于互联网后台存储系统。—Google bigtable, LevelDB, Cassandra。 另外，对于某个存储系统，其可以选择任意一种存储引擎，例如，键值存储系统也可使用B树存储引擎。 来源： https://www.cnblogs.com/sanxiandoupi/p/11712886.html

1.MySQL知识普及： MySQL是一个开放源代码的关系数据库管理系统。 MySQL架构可以在多种不同场景中应用并发挥良好作用。主要体现在存储引擎的架构上，插件式的存储引擎架构将查询处理和其它的系统任务以及数据的存储提取相分离。 2.MySQL逻辑架构： 1).Connectors MySQL首先是一个网络程序，其在TCP之上定义了自己的 应用层协议 。所以要使用MySQL，我们可以编写代码，跟MySQL Server建立TCP连接，之后按照其定义好的协议进行交互。当然这样比较麻烦，比较方便的办法是调用SDK，比如Native C API、JDBC、PHP等各语言MySQL Connector，或者通过ODBC。但通过SDK来访问MySQL，本质上还是在TCP连接上通过MySQL协议跟MySQL进行交互。 2).Connection Management 每一个基于TCP的网络服务都需要管理客户端链接，MySQL也不例外。MySQL会为每一个连接绑定一个线程，之后这个连接上的所有查询都在这个线程中执行。为了避免频繁创建和销毁线程带来开销，MySQL通常会缓存线程或者使用线程池，从而避免频繁的创建和销毁线程。 客户端连接到MySQL后，在使用MySQL的功能之前，需要进行认证，认证基于用户名、主机名、密码。如果用了SSL或者TLS的方式进行连接，还会进行证书认证。 3).SQL

MySQL 就是其中之一，它经历了多个版本迭代。数据库锁是 MySQL 数据引擎的一部分，今天我们就一起来学习 MySQL 的数据库锁和它的优化。 MySQL 锁分类 当多个事务或者进程访问同一个资源的时候，为了保证数据的一致性，就需要用到锁机制。 从锁定资源的角度来看，MySQL 中的锁分为： 表级锁 行级锁 页面锁 表级锁：对整张表加锁。开销小，加锁快;不会出现死锁;锁定粒度大，发生锁冲突的概率最高，并发度最低。 行级锁：对某行记录加锁。开销大，加锁慢;会出现死锁;锁定粒度最小，发生锁冲突的概率最低，并发度也最高。 页面锁：开销和加锁时间界于表锁和行锁之间;会出现死锁;锁定粒度界于表锁和行锁之间，并发度一般。 在实际开发过程中，主要会使用到表级锁和行级锁两种。既然锁是针对资源的，那么这些资源就是数据，在 MySQL 提供插件式存储引擎对数据进行存储。 插件式存储引擎的好处是，开发人员可以根据需要选择适合的存储引擎。 在众多的存储引擎中，有两种引擎被比较多的使用，他们分别是： MyISAM 存储引擎，它不支持事务、表锁设计，支持全文索引，主要面向一些在线分析处理(OLAP)数据库应用。说白了主要就是查询数据，对数据的插入，更新操作比较少。 InnoDB 存储引擎，它支持事务，其设计目标主要面向在线事务处理(OLTP)的应用。 其特点是行锁设计、支持外键，并支持类似于 Oracle

存储引擎概念。 MySQL数据库中使用各种不同的技术存储数据到文件系统中，每一种技术都使用不同的存储机制、 索引技巧，锁定水平并最终提供不同的功能和能力，这些不同的技术以及配套的功能在MySQL中称为 存储引擎。 存储引擎就是MySQL将数据存储在文件系统中的存储方式或者存储格式。 目前MySQL常用的两种存储引擎：MylSAM、InnoDB MySQL存储引擎是MySQL数据库服务器中 的组件，负责为数据库执行实际的数据l/O操作，使用特殊存储引擎的主要优点之一在于仅需提供特殊应 用所需的特性，数据库中的系统开销较小，具有更有效和更高的数据库性能。 MySQL系统中，存储引擎处于文件系统之上，在数据保存到数据文件之前会传输到存储引擎，之后 按照各个存储引擎的存储格式进行文件的物理存储。 MySQL日志种类： >错误日志：程序运行，启动类的故障。 >二进制日志：保存数据库变更语句>中继日志：缓存二进制日志数据。 >查询日志：记录查询语句的。 >慢查询日志：记录超时的查询语句。 >事务日志： 一、MyISAM存储引擎。 1、MyISAM概述。 MyISAM存储引擎是MySQl关系数据库系统5.5版本之前默认的存储引擎，前身是ISAM。 ISAM是一个定义明确且经历时间考验的数据表格管理方法，在设计之时就考虑到数据库被查询的次数 要远大于更新的次数。 I5AM的特点

1.查询MySQL中支持的存储引擎 在MySQL中，可以使用SHOW ENGINES语句查询MySQL中支持的存储引擎。其查询语句如下。 SHOW ENGINES； 使用 show engines \g 　　show engines \G 更美观 2.查询默认的存储引擎 SHOW VARIABLES LIKE 'storage_engine%'; InnoDB存储引擎 默认 MyISAM存储引擎 MEMORY存储引擎 MySQL数据类型 数字类型 分成整形和浮点型（INT FLOAT DOUBLE） 字符串类型 （CHAR VARCHAR） 日期和时间类型（DATETIME DATE TIMESTAMP TIME YEAR） 来源： https://www.cnblogs.com/cute9406/p/11678662.html

前言 ELK可以理解为由各种beat或其他类似组件去收集各类型日志通过logstash管道(logstash自身也可以收集日志，同时也可以接收beat发送来的数据)output丢给ElasticSearch存储引擎，再由Kibana获取存储引擎数据成图呈现给用户。 为什么需要ELK？ -- ELK是一套完整的开源解决方案，可帮助在运维工作过程用于快速故障排查、日志审计、综合展示、监控报警、关联统计信息等。 ELK基本组件 　　1、ElasticSearch 基于lucene（信息检索组件）的分布式文件存储，支持横向扩展、自动发现、索引自动分片以及Restfull的全文本搜索引擎，此外，它还是一个分布式实时文档存储，其中每个文档的每个field均是被索引的数据，且可被搜索，还是一个带实时分析功能的分布式引擎，能够扩展至数以百计的节点实时处理PB级数据。 　　2、Logstash 是重量级的，支持多数据获取机制，通过TCP/UDP协议、文件、syslog、windows Eventlogs及STDIN等；获取到数据后，它支持对数据执行过滤、编码、修改等操作。使用JRuby语言，需要JVM下运行。 　　3、Kibana 为日志分析提供一个可视并友好的图形界面，并且可以绝大多数的汇总、分析需求。 　　4、Beat 目前ELK官方提供了比较多元化的beat类型 。 　　　　　

mysql 的逻辑架构分为三层： 最上层的服务大多数基于网络的客户端、服务器的工具或者服务都有类似的架构，比如连接处理，授权认证、安全等 第二层架构：mysql的核心服务功能都在这一层，包括查询解析，分析，优化，缓存以及所有的内置函数，所有跨存储引擎的功能都在这一层实现：存储过程，触发器、视图 第三层：包含存储引擎。负责数据的存储和提取，innoDB是个例外，它会解析外键定义，因为mysql服务器本身没有实现该功能 连接管理与安全性： 当客户端连接到mysql服务器是，服务器需要对其进行认证，认证基于用户名，原始主机信息和密码，一旦客户端连接成功，服务器 会继续验证该客户端是否具有执行某个特定查询的权限 优化与执行： mysql会解析查询，并创建内部数据结构（解析树），然后对其进行各种优化，包括重写查询，决定表的读取顺序，以及选择合适的索引，用户可以通过特殊的关键字提示优化器，影响他的决策过程，也可以请求优化器解释优化过程的各个因素，使yoghurt可以知道服务器是如何进行优化决策的，并提供一个参考基准，便于用户重构查询和修改相关配置，优化查询效率 存储引擎对于优化查询时有影响的 对于select语句，在解析查询之前，服务器会先检查缓存，如果能找到对应的查询，服务器就不会再执行查询解析，优化和执行的整个过程，而是直接返回查询结果 并发控制： 只要有多个查询需要在同一时刻修改数据

一 什么是存储引擎 mysql中建立的库===>文件夹 库中建立的表===>文件 现实生活中我们用来存储数据的文件有不同的类型，每种文件类型对应各自不同的处理机制：比如处理文本用txt类型，处理表格用excel，处理图片用png等 数据库中的表也应该有不同的类型，表的类型不同，会对应mysql不同的存取机制，表类型又称为存储引擎。 存储引擎说白了就是如何存储数据、如何为存储的数据建立索引和如何更新、查询数据等技术的实现方 法。因为在关系数据库中数据的存储是以表的形式存储的，所以存储引擎也可以称为表类型（即存储和 操作此表的类型） 在Oracle 和SQL Server等数据库中只有一种存储引擎，所有数据存储管理机制都是一样的。而MySql 数据库提供了多种存储引擎。用户可以根据不同的需求为数据表选择不同的存储引擎，用户也可以根据 自己的需要编写自己的存储引擎 SQL 解析器、SQL 优化器、缓冲池、存储引擎等组件在每个数据库中都存在,但不是每 个数据库都有这么多存储引擎。MySQL 的插件式存储引擎可以让存储引擎层的开发人员设 计他们希望的存储层,例如,有的应用需要满足事务的要求,有的应用则不需要对事务有这 么强的要求 ;有的希望数据能持久存储,有的只希望放在内存中,临时并快速地提供对数据 的查询。 二 mysql支持的存储引擎 MariaDB [(none)]> show