数据库服务器

本节就聊聊采用Nginx负载均衡之后碰到的问题： Session问题 文件上传下载 通常解决服务器负载问题，都会通过多服务器分载来解决。常见的解决方案有： 网站入口通过分站链接负载（天空软件站，华军软件园等） DNS轮询 F5物理设备 Nginx等轻量级架构 那我们看看Nginx是如何实现负载均衡的，Nginx的upstream目前支持以下几种方式的分配 1、轮询（默认） 每个请求按时间顺序逐一分配到不同的后端服务器，如果后端服务器down掉，能自动剔除。 2、weight 指定轮询几率，weight和访问比率成正比，用于后端服务器性能不均的情况。 2、ip_hash 每个请求按访问ip的hash结果分配，这样每个访客固定访问一个后端服务器，可以解决session的问题。 3、fair（第三方） 按后端服务器的响应时间来分配请求，响应时间短的优先分配。 4、url_hash（第三方） 按访问url的hash结果来分配请求，使每个url定向到同一个后端服务器，后端服务器为缓存时比较有效。 Upstream配置如何实现负载 http { upstream www.test1.com { ip_hash; server 172.16 . 125.76 : 8066 weight = 10 ; server 172.16 . 125.76 : 8077 down; server 172

1.缓存概述 ​ 缓存是分布式系统中的重要组件，主要解决高并发，大数据场景下，热点数据访问的性能问题。提供高性能的数据快速访问。 1.1.缓存的原理 将数据写入/读取速度更快的存储（设备）； 将数据缓存到离应用最近的位置； 将数据缓存到离用户最近的位置; 1.2.缓存分类 在分布式系统中，缓存的应用非常广泛，从部署角度有以下几个方面的缓存应用： - CDN缓存； - 反向代理缓存； - 分布式Cache； - 本地应用缓存； 1.3.缓存媒介 常用中间件：Varnish，Ngnix，Squid，Memcache，Redis，Ehcache等； 缓存的内容：文件，数据，对象； 缓存的介质：CPU，内存（本地，分布式），磁盘（本地，分布式） 1.4.缓存设计 缓存设计需要解决以下几个问题： 1>缓存什么？哪些数据需要缓存：1.热点数据；2.静态资源。 2>缓存的位置？CDN，反向代理，分布式缓存服务器，本机（内存，硬盘） 3>如何缓存的问题？ - 过期策略 - 固定时间：比如指定缓存的时间是30分钟； - 相对时间：比如最近10分钟内没有访问的数据； - 同步机制 - 实时写入；（推） - 异步刷新；（推拉） 2.CDN缓存 ​ CDN主要解决将数据缓存到离用户最近的位置，一般缓存静态资源文件（页面，脚本，图片，视频，文件等）。国内网络异常复杂，跨运营商的网络访问会很慢

MySQL主从同步 1. 主从同步的定义 　　主从同步使得数据可以从一个数据库服务器复制到其他服务器上，在复制数据时，一个服务器充当主服务器（master），其余的服务器充当从服务器（slave）。 　　因为复制是异步进行的，所以从服务器不需要一直连接着主服务器，从服务器甚至可以通过拨号断断续续地连接主服务器。通过配置文件，可以指定复制所有的数据库，某个数据库，甚至是某个数据库上的某个表。 2.mysql 主从同步作用： 　　1.读写分离 　　2.分流，减轻服务器压力 　　3. 数据备份 　　　　80% 查询，20% 写入， 3.使用主从同步的好处： （1） 通过增加从服务器来 提高数据库的性能 ，在主服务器上执行写入和更新，在从服务器上向外提供读功能，可以动态地调整从服务器的数量，从而调整整个数据库的性能。 （2） 提高数据安全 ，因为数据已复制到从服务器，从服务器可以终止复制进程，所以，可以在从服务器上备份而不破坏主服务器相应数据 （3） 在主服务器上生成实时数据，而在从服务器上分析这些数据，从而 提高主服务器的性能 4. 主从同步的机制 　　Mysql服务器之间的主从同步是基于二进制日志机制，主服务器使用二进制日志来记录数据库的变动情况，从服务器通过读取和执行该日志文件来保持和主服务器的数据一致。 在使用二进制日志时，主服务器的所有操作都会被记录下来

监控MySQL的性能指标 系列 / 数据库 / 度量 / mysql的 / 性能 这个职位是一个3部分组成的系列关于MySQL的第1部分监控。 第二 ​​部分 是关于从MySQL收集度量和 第3部分 解释了如何使用MySQL的Datadog进行监控。 什么是MySQL？ MySQL的 是世界上最流行 ​​的开源关系数据库服务器。 属于Oracle，MySQL是在免费下载的社区版，以及在商业版本添加了功能和支持可用。 最初于1995年发布，MySQL已经催生以来高调叉子竞争性技术，如MariaDB的和Percona的。 重点统计的MySQL 如果你的数据库运行缓慢，或未能提供查询服务以任何理由，你的筹码的每一个部分取决于该数据库上会遇到性能问题也是如此。 为了保持你的数据库运行平稳，你可以主动监测指标涵盖了性能和资源利用四个方面： 查询吞吐量 查询执行性能 连接 缓冲池的使用 MySQL的用户可以访问数据库中的上百个指标，因此在本文中，我们将重点放在关键指标，这将使你获得实时洞察到你的数据库的健康和性能屈指可数。 在 第二部分， 这一系列我们将向你展示如何访问和收集所有这些指标。 本文参考指标术语在介绍 我们的监控101系列 ，它提供了指标收集和警报的框架。 版本和技术之间的兼容性 一些在本系列中讨论的监测策略是特定的MySQL版本5.6和5.7。 这些版本之间的差异将沿途指出。

【编者按】本文作者为 John Matson，主要介绍 mysql 性能监控应该关注的 4 大指标。 文章系国内 ITOM 管理平台 OneAPM 编译呈现。 MySQL 是什么？ MySQL 是现而今最流行的开源关系型数据库服务器。由 Oracle 所有，MySQL 提供了可以免费下载的社区版及包含更多特性与支持的商业版。从 1995 年首发以来，MySQL 衍生出多款备受瞩目的分支，诸如具有相当竞争力的 MariaDB 及 Percona。 关键 MySQL 统计指标 如果你的数据库运行缓慢，或者出于某种原因无法响应查询， 技术栈 中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行，你可以主动监控以下四个与性能及资源利用率相关的指标： 查询吞吐量 查询执行性能 连接情况 缓冲池使用情况 MySQL 用户可以接触到数百个数据库指标，因此，在本文中，笔者将专注于能帮助我们实时了解数据库健康与性能的关键指标。 本文参考了我们在 监控入门系列文章 中介绍的指标术语，后者为指标收集与告警提供了基础框架。 不同版本与技术的兼容性 本系列文章讨论的一些监控策略只适用于 MySQL 5.6 与 5.7 版本。这些版本间的差异将在后文中提及。 本文列出的大多数指标与监控策略同样适用于与 MySQL 兼容的技术，诸如 MariaDB 与 Percona 服务器，不过带有一些明显的差别

1.两台服务器，主服务器，从服务器，两台服务器都安装SQL Server 2008R2并且安装相同表结构的数据库（需要实时同步的数据库） 2.主服务器数据库安装完毕，打开SQL Server 配置管理器，把SQL Server 代理服务打开（已打开请忽略） 3.登录主服务器数据库，从数据库左侧菜单栏找到->复制->本地发布，右击新建发布 4.默认主服务器当作分发服务器 5.快照文件夹最好新建一个目录（需要手动在D盘新建目录），默认目录会有权限问题（对于新手权限问题不好解决） 6.选择需要发布的数据库 7.发布类型选择事务发布（发布类型的区别可自行百度，此处不做叙述） 8.选择需要发布的表（需要同步到从服务器数据库表的数据） 9.筛选表行（意思是表中的哪些字段你不需要同步到从服务器） 10.快照代理，选择->立即创建快照并使快照保持可用状态，以初始化订阅 11.代理安全性，点击安全设置，按照红色框中设置即可 12.向导操作，选择->创建发布->下一步 13.完成该向导，填写一个发布名称，点击完成，到此步骤主服务器本地订阅发布已经完成 14.登录从服务器数据库，从数据库左侧菜单栏找到->复制->本地订阅->右击新建订阅->选择查找SQL Server 发布服务器，数据库服务器名称要是主服务器计算机名称，输入登录名和密码 15.选择刚才主服务器发布的订阅 16.选择运行分发代理的位置

MySQL服务器分发 1.MySQL可用于多个操作系统,包括Linux/Windows/Mac OS X和Oracle Solaris等;本课程仅讲述Linux; 2.MySQL可以作为二进制文件分发和源代码分发的形式提供: - 二进制文件分发:是预编译的,可以运行的程序,可用于Enterprise和Community MySQL Server版本,这些二进制文件是正式的经过Oracle测试的版本; - 源代码分发:不保证与商业代码更新一致,它们也不包括Oracle支持; TIPS:有关可用OS类型的完整列表http://dev.mysql.com/downloads/mysql/; MySQL二进制文件分发 1.用于Linux的二进制文件: - RPM文件可用于基于RPM的Linux分发,例如Oracle Linux;通过使用rpm程序或者通过使用yum等软件包管理器来安装这些文件,每个RPM的安装布局由RPM文件自身内包含的规范文件提供;(使用rpm -qpl 来查看安装时RPM文件内容的位置) - TAR文件可用于多种Linux和UNIX类似系统,要安装这种类型的分发,使用.tar程序在安装目录中解压缩该分发; 2.用于Windows的二进制文件: - 完整分发:包含MySQL安装的所有文件以及配置向导。 - 非安装分发:.zip归档文件,不使用安装或配置向导

一、缓存系统 1、静态web页面： （1）在静态Web程序中，客户端使用Web浏览器（IE、FireFox等）经过网络(Network)连接到服务器上，使用HTTP协议发起一个请求（Request），告诉服务器我现在需要得到哪个页面，所有的请求交给Web服务器，之后WEB服务器根据用户的需要，从文件系统（存放了所有静态页面的磁盘）取出内容。之后通过Web服务器返回给客户端，客户端接收到内容之后经过浏览器渲染解析，得到显示的效果。 （2）为了让静态web页面显示更加好看，使用javascript／VBScript／ajax（AJAX即“Asynchronous Javascript And XML”（异步JavaScript和XML），是指一种创建交互式网页应用的网页开发技术。）但是这些特效都是在客户端上借助于浏览器展现给用户的，所以在服务器上本身并没有任何的变化。 （3）静态web无法连接数据库； （4）静态web资源开发技术：HTML； （5）由于现在的web页面中，大量使用JS，导致浏览器打开页面，就会占用大量的内存，服务端的压力是减轻了，但压力转移到了客户端。 2、动态web页面： （1）动态WEB中，程序依然使用客户端和服务端，客户端依然使用浏览器（IE、FireFox等），通过网络(Network)连接到服务器上，使用HTTP协议发起请求（Request）

MySQL部署文档： Mysql 数据库使用 基础 1. 安装参数说明： ./configure--prefix=/web/mysql 指定安装目录 --without-debug 去除 debug 模式 --with-extra-charsets=gb2312 添加 gb2312 中文字符支持 --with-charsets= 默认中文字符支持 --enable-assembler 使用一些字符函数的汇编版本 --without-isam 去掉 isam 表类型支持 现在很少用了 isam 表是一种依赖平台的表 --without-innodb 去掉 innodb 表支持 innodb 是一种支持事务处理的表 , 适合企业级应用 --with-pthread 强制使用 pthread 库 (posix 线程库 ) --enable-thread-safe-client 以线程方式编译客户端 --with-client-ldflags=-all-static --with-mysqld-ldflags=-all-static 以纯静态方式编译服务端和客户端 --with-tcp-port=3306 端口号 --with-mysqld-user=work 用户 --with-unix-socket-path 将 MYSQL_UNIX_PORT 环境变量设置为 Unix

通过博文 部署Oracle 12c企业版数据库 已经可以部署Oracle数据库了，本篇博文主要介绍Oracle的体系结构，包括存储结构、内存结构和进程结构进行初步了解。对进一步学习Oracle数据库有很大的帮助。 博文大纲： 一、Oracle体系结构 1.Oracle体系结构概述 2.Oracle服务器 3.Oracle存储结构 4.Oracle内存结构 5.Oracle进程结构 二、CDB与PDB的基本操作 三、用户管理 四、数据库权限管理 五、导入测试数据 一、Oracle体系结构 数据库的体系结构是指数据库的组成、工作过程、以及数据库中数据的组织与管理机制，要了解Oracle数据库的体系结构，必须理解Oracle系统的主要组件和重要概念。 1.Oracle体系结构概述 Oracle体系结构包含一系列组件，如图： 图中显示了Oracle体系结构中的主要组件，包括实例、用户进程、服务器进程、数据文件及其他文件，如参数文件、口令文件和归档日志文件等。 从图中可以看出，实例和数据库是Oracle数据库体系结构的核心组成部分，也是最重要的两个概念。 作为一个DBA管理者，维护实例和数据库本身的正常运行是最基本的技能。 （1）实例 Oracle实例是后台进程和内存结构的集合，必须启动实例才能访问数据库中的数据。Oracle实例启动时，将分配一个系统全局区（SGA