存储引擎

MySQL 数据库性能优化之缓存参数优化 数据库属于 IO 密集型的应用程序，其主要职责就是数据的管理及存储工作。而我们知道，从内存中读取一个数据库的时间是微秒级别，而从一块普通硬盘上读取一个IO是在毫秒级别，二者相差3个数量级。所以，要优化数据库，首先第一步需要优化的就是 IO，尽可能将磁盘IO转化为内存IO。本文先从 MySQL 数据库IO相关参数(缓存参数)的角度来看看可以通过哪些参数进行IO优化。 query_cache_size/query_cache_type (global) Query cache 作用于整个 MySQL Instance，主要用来缓存 MySQL 中的 ResultSet，也就是一条SQL语句执行的结果集，所以仅仅只能针对select语句。当我们打开了 Query Cache 功能，MySQL在接受到一条select语句的请求后，如果该语句满足Query Cache的要求(未显式说明不允许使用Query Cache，或者已经显式申明需要使用Query Cache)，MySQL 会直接根据预先设定好的HASH算法将接受到的select语句以字符串方式进行hash，然后到Query Cache 中直接查找是否已经缓存。也就是说，如果已经在缓存中，该select请求就会直接将数据返回，从而省略了后面所有的步骤(如 SQL语句的解析

表操作——存储引擎介绍 一、什么是存储引擎 mysql中建立的库===>文件夹 库中建立的表===>文件 现实生活中我们用来存储数据的文件有不同的类型，每种文件类型对应各自不同的处理机制：比如处理文本用txt类型，处理表格用excel，处理图片用png等。 数据库中的表也应该有不同的类型，表的类型不同，会对应mysql不同的存取机制，表类型又称为存储引擎。 存储引擎说白了就是如何存储数据、如何为存储的数据建立索引和如何更新、查询数据等技术的实现方 法。因为在关系数据库中数据的存储是以表的形式存储的，所以存储引擎也可以称为表类型（即存储和 操作此表的类型） 在Oracle 和SQL Server等数据库中只有一种存储引擎，所有数据存储管理机制都是一样的。而MySql 数据库提供了多种存储引擎。用户可以根据不同的需求为数据表选择不同的存储引擎，用户也可以根据 自己的需要编写自己的存储引擎。 SQL 解析器、SQL 优化器、缓冲池、存储引擎等组件在每个数据库中都存在，但不是每个数据库都有这么多存储引擎。MySQL的插件式存储引擎可以让存储引擎层的开发人员设计他们希望的存储层，例如，有的应用需要满足事务的要求；有的应用则不需要对事务有这么强的要求；有的希望数据能持久存储,有的只希望放在内存中，临时并快速地提供对数据的查询。 二、mysql支持的存储引擎 MariaDB [(none)]>

数据库 """ 1、什么是数据库：管理数据的系统 - 安装某种管理数据的系统 - 管理的对象本质是文件 2、存储数据的位置：内存、硬盘 3、什么是系统：运行在硬件基础上，管理其他软件 """ # 数据库的组成 """ 库：存放多张表 - 文件夹 表：包含多条相同结构的记录 - 文件 记录：包含多个key-value键值对的一条数据 - 二进制数据 字段：描述信息 - 信息本身 == key-value - 二进制数据 stu id name age gender 1 Bob 18 男 2 Tom 17 女 ... teacher ... """ 数据库的分类 # 1）关系与非关系 # 关系：数据库中表与表之间有联系 - mysql # 非关系：没有表概念 - redis、mongodb（介于关系与非关系） # 2）内存与硬盘 # 硬盘：数据可以永久存储 - mysql、mongodb # 内存：数据的存取效率极高 - redis、memcache # 3）sql与nosql # sql：数据库操作通过sql语句 # nosql：数据库操作就是key-value形式（value就是一条记录） # stu - {'name': 'Bob', 'age': 18} # stus - [{'name': 'Bob', 'age': 18}, {'name': 'Tom', 'age':

一、MySQL 的主要适用场景 1、Web网站系统 2、日志记录系统 3、数据仓库系统 4、嵌入式系统 二、 MySQL 架构图： 三、 MySQL 存储引擎概述 1 ） MyISAM 存储引擎 MyISAM存储引擎的表在数据库中，每一个表都被存放为三个以表名命名的物理文件。首先肯定会有任何存储引擎都不可缺少的存放表结构定义信息的.frm文件，另外还有.MYD和.MYI文件，分别存放了表的数据（.MYD）和索引数据（.MYI）。每个表都有且仅有这样三个文件做为MyISAM存储类型的表的存储，也就是说不管这个表有多少个索引，都是存放在同一个.MYI文件中。 MyISAM支持以下三种类型的索引： 1、B-Tree索引 B-Tree索引，顾名思义，就是所有的索引节点都按照balancetree的数据结构来存储，所有的索引数据节点都在叶节点。 2、R-Tree索引 R-Tree索引的存储方式和b-tree索引有一些区别，主要设计用于为存储空间和多维数据的字段做索引，所以目前的MySQL版本来说，也仅支持geometry类型的字段作索引。 3、Full-text索引 Full-text索引就是我们长说的全文索引，他的存储结构也是b-tree。主要是为了解决在我们需要用like查询的低效问题。 2 ） Innodb 存储引擎 1、支持事务安装 2、数据多版本读取 3、锁定机制的改进 4

MySQL架构 查询执行流程 查询执行的流程是怎样的： 连接 1.1客户端发起一条Query请求，监听客户端的‘连接管理模块’接收请求 1.2将请求转发到‘连接进/线程模块’ 1.3调用‘用户模块’来进行授权检查 1.4通过检查后，‘连接进/线程模块’从‘线程连接池’中取出空闲的被缓存的连接线程和客户端请求对接，如果失败则创建一个新的连接请求。 处理 2.1先查询缓存，检查Query语句是否完全匹配， 2.2查询缓存失败则转交给‘命令解析器’ 2.3再转交给对应的模块处理 2.4如果是SELECT查询还会经由‘查询优化器’做大量的优化，生成执行计划 2.5模块收到请求后，通过‘访问控制模块’检查所连接的用户是否有访问目标表和目标字段的权限 2.6有则调用‘表管理模块’，先是查看table cache中是否存在，有则直接对应的表和获取锁，否则重新打开表文件 2.8根据表的meta数据，获取表的存储引擎类型等信息，通过接口调用对应的存储引擎处理 2.9上述过程中产生数据变化的时候，若打开日志功能，则会记录到相应二进制日志文件中 结果 3.1Query请求完成后，将结果集返回给‘连接进/线程模块’ 3.2返回的也可以是相应的状态标识，如成功或失败等 3.3‘连接进/线程模块’进行后续的清理工作，并继续等待请求或断开与客户端的连接 什么是优化 合理安排资源、调整系统参数使MySQL运行更快

/*--> */ /*--> */ Python学习day42-数据库的基本操作(1) 表的详细操作及引擎 mysql支持的数据类型 整型 浮点型 字符串 时间类型 枚举与集合 mysql表的约束条件 Python学习day42-数据库的基本操作(1) 表的详细操作及引擎 上文中我们已经了解到创建表的语法,但其实那种写法并不完整,完整的写法应该是下面这种: xxxxxxxxxx 38 1 create table 表名( 2 (属性名1 类型(长度) 约束条件) 3 ... 4 (属性名n 类型(长度) 约束条件) 5 )engine=引擎(InnDB) DEFAULT charset=utf-8 6 ​ 7 # 修改表名 8 alter table 旧表名 rename 新表名; 9 ​ 10 # 修改字段名: 11 alter table 表名 change 旧字段 新字段 新字段数据类型(长度); 12 ​ 13 # 修改字段属性: 14 alter table 表名 modify 字段 新类型(长度); 15 ​ 16 # 查询,注意,数据库查询时候是不区分大小写的,包括修改字段类型时候也不区分大小写 17 ''' 18 我们可以看到,表是可以设定自己的字符编码的,另外一方面,每个表是有自己的引擎(engine)的,所以引擎是基于表的概念,这点非常重要

一:存储引擎 select * from user 显示的表的内容尽管是这样子, Mysql并不是以上图形式对表进行的存储, 表有表结构,表数据,他们是分开存储的,分别以单独的文件形式存在,还有索引,索引和数据放一起是一种存储方式,还有不和数据放一起的存储方式 默认存储引擎InnoDB,在数据库文件夹可以看到表明.frm文件就是存放的表结构,表明.ibd是innodb-data的意思,innodb存储引擎的数据存放在这个文件里面 Mysql提供的存储方式很多,对于Oracle只有一种. show engines;查看支持的所有存储引擎,InnoDB是默认的存储引擎. mysql5.6支持的存储引擎包括InnoDB、MyISAM、MEMORY、CSV、BLACKHOLE、FEDERATED、MRG_MYISAM、ARCHIVE、PERFORMANCE_SCHEMA。其中NDB和InnoDB提供事务安全表，其他存储引擎都是非事务安全表。 不同的存储引擎对应的就是不同的存储方式. InnoDB支持事务(一致性,原子性,隔离性,),外键,行级锁(并发访问同行数据,加了锁),将数据结构,数据分了两个文件存放 memory是内存数据库,重启消失,已被redis代替 myisam将数据结构,数据,索引分了三个文件存放 MySQL中的数据用各种不同的技术存储在文件（或者内存）中

简介 MongoDB是一款为广泛的现代应用程序设计的高性能、可扩展、分布式数据库系统。MongoDB可用于不同规模大小的组织，为那些对系统低延迟、高吞吐量以及可持续性有很高要求的应用提供稳定关键的服务。 尽管MongoDB与传统的关系型数据库的有些特性不一样，但是对于之前部署和操作其他数据库系统的人员来说，MongoDB的很多概念，比如操作、策略、存储过程还是很相似的。公司的DBA和运营团队可以在保持现有系统的前提下，直接把MongoDB集成到生产环境中，并且不需要定制操作流程和工具 本文档为部署和管理MongoDB提供了最佳实践的指导。看本文档的前提需要你熟悉MongoDB的基本架构并理解企业软件部署的相关知识。 关于文档中的涉及到有些话题的更多详情，可以访问MongoDB的在线文档：mongodb.com。本文档也提供了相应的链接。 角色和职责 与其他数据库系统一样，部署在MongoDB的应用需要精心规划以及公司IT团队每个角色的协力合作才能保证稳定的部署。传统数据库中相关的角色以及角色的定位同样适用于MongoDB：数据库管理员、系统管理员、应用开发人员、网络管理员、需求分析人员以及数据架构师。 一般小公司中一个人员可能会担当多个角色，而大公司中，每个角色都是由一个人或者一个团队专门负责的。比如，在大的投资银行中，DBA的职责和系统管理员的职责差别就很大。 DBA

本人免费整理了Java高级资料，涵盖了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo高并发分布式等教程，一共30G，需要自己领取。传送门： https://mp.weixin.qq.com/s/JzddfH-7yNudmkjT0IRL8Q 作为一名开发人员，在日常的工作中会难以避免地接触到数据库，无论是基于文件的 sqlite 还是工程上使用非常广泛的 MySQL、PostgreSQL，但是一直以来也没有对数据库有一个非常清晰并且成体系的认知，所以最近两个月的时间看了几本数据库相关的书籍并且阅读了 MySQL 的官方文档，希望对各位了解数据库的、不了解数据库的有所帮助。 本文中对于数据库的介绍以及研究都是在 MySQL 上进行的，如果涉及到了其他数据库的内容或者实现会在文中单独指出。 数据库的定义 很多开发者在最开始时其实都对数据库有一个比较模糊的认识，觉得数据库就是一堆数据的集合，但是实际却比这复杂的多，数据库领域中有两个词非常容易混淆，也就是 数据库 和 实例 ： 数据库：物理操作文件系统或其他形式文件类型的集合； 实例：MySQL 数据库由后台线程以及一个共享内存区组成； 对于数据库和实例的定义都来自于 MySQL 技术内幕：InnoDB 存储引擎 一书，想要了解 InnoDB 存储引擎的读者可以阅读这本书籍。

序列化与反序列化 序列化用途：方便于对象在网络中的传输和存储 0x01 php反序列化漏洞 在PHP应用中，序列化和反序列化一般用做缓存，比如session缓存，cookie等。 常见的序列化格式： 二进制格式 字节数组 json字符串 xml字符串 序列化就是将对象转换为流，利于储存和传输的格式 反序列化与序列化相反，将流转换为对象 例如：json序列化、XML序列化、二进制序列化、SOAP序列化 而php的序列化和反序列化基本都围绕着 serialize() ， unserialize() 这两个函数 php对象中常见的魔术方法 __construct() // 当一个对象创建时被调用， __destruct() // 当一个对象销毁时被调用， __toString() // 当一个对象被当作一个字符串被调用。 __wakeup() // 使用unserialize()会检查是否存在__wakeup()方法，如果存在则会先调用，预先准备对象需要的资源 __sleep() // 使用serialize()会检查是否存在__wakeup()方法，如果存在则会先调用，预先准备对象需要的资源 __destruct() // 对象被销毁时触发 __call() // 在对象上下文中调用不可访问的方法时触发 __callStatic() // 在静态上下文中调用不可访问的方法时触发 _