数据库服务器

分享一下我老师大神的人工智能教程！零基础，通俗易懂！ http://blog.csdn.net/jiangjunshow 也欢迎大家转载本篇文章。分享知识，造福人民，实现我们中华民族伟大复兴！ 服务器处理性能估算 系统的建设，必须满足未来 5 年业务发展和管理的需求，所以下面对服务器性能指标的估算，将以满足未来 5 年的需要为基准。 1. 数据库服务器 1.1. TPCC 值估算 约定： 系统同时在线用户数为 100 人（ U1 ）； 平均每个用户每分钟发出 2 次业务请求（ N1 ）； 系统发出的业务请求中，更新、查询、统计各占 1/3 ； 平均每次更新业务产生 3 个事务（ T1 ）； 平均每次查询业务产生 8 个事务（ T2 ）； 平均每次统计业务产生 13 个事务（ T3 ）； 一天内忙时的处理量为平均值的 5 倍； 经验系数为 1.6 ； ( 实际工程经验 ) 考虑服务器保留 30 ％的冗余； 服务器需要的处理能力为： TPC-C=U1*N1* （ T1+T2+T3 ） /3*3* 经验系数 / 冗余系数 则数据库服务器的处理性能估算为： TPC-C= 100*2* （ 3+8+13 ） /3*5*1.6/0.7= 18,285 TPM 1.2. 内存估算 该服务器内存主要由操作系统占用内存、数据库系统占用内存、并发连接占用内存等几部分组成。 约定： 操作系统占用约

首先，确认服务器硬件是否足够支持当前的流量。 普通的P4服务器一般最多能支持每天10万独立IP，如果访问量比这个还要大， 那么必须首先配置一台更高性能的专用服务器才能解决问题 ，否则怎么优化都不可能彻底解决性能问题。 其次，优化数据库访问。 前台实现完全的静态化当然最好，可以完全不用访问数据库，不过对于频繁更新的网站， 静态化往往不能满足某些功能。 缓存技术就是另一个解决方案，就是将动态数据存储到缓存文件中，动态网页直接调用这些文件，而不必再访问数据库，WordPress和Z-Blog都大量使用这种缓存技术。 如果确实无法避免对数据库的访问，那么可以尝试优化数据库的查询SQL.避免使用 Select * from这样的语句，每次查询只返回自己需要的结果，避免短时间内的大量SQL查询。 第三，禁止外部的盗链。 外部网站的图片或者文件盗链往往会带来大量的负载压力，因此应该严格限制外部对于自身的图片或者文件盗链，好在目前可以简单地通过refer来控制盗链，Apache自己就可以通过配置来禁止盗链，IIS也有一些第三方的ISAPI可以实现同样的功能。当然，伪造refer也可以通过代码来实现盗链，不过目前蓄意伪造refer盗链的还不多，可以先不去考虑，或者使用非技术手段来解决，比如在图片上增加水印。 第四，控制大文件的下载。 大文件的下载会占用很大的流量，并且对于非SCSI硬盘来说

备份 备份软件 Amanda -客户端-服务器模型备份工具 Bacula - 另一个客户端-服务器模型备份工具 Backupninja -轻量级，可扩展的元数据备份系统 Backuppc -客户端-服务器模型备份工具和文件共享方案。 Burp -网络备份和还原程序 Duplicity -使用rsync算法加密的带宽-效率备份 Lsyncd -监控一个本地目录树的变化,然后产生一个进程去同步变化。默认使用rsync。 Rsnapshot -文件系统快照工具 SafeKeep -使用rdiff-backup，集中的，基于pull的备份 TarSnap - 具有一个开源客户端的安全备份服务 UrBackup -另一个客户端-服务器备份系统 DREBS - AWS EBS支持策略的备份脚本 克隆 克隆软件 Clonezilla -分区和磁盘镜像/克隆程序 Fog - 另一个计算机克隆解决方案 Redo Backup -简单的备份，恢复和还原 云计算 AppScale – 兼容Google App引擎的开源云计算软件. Archipel -使用Libvirt管理和监视虚拟机 CloudStack -创建，管理和部署基础云服务的云计算软件 Cobbler -Cobbler是一个Linux安装服务器，允许快速地构建网络安装环境 Eucalyptus -兼容AWS的开源私有云软件 Mesos

MySQL数据库作为最基础的数据存储服务之一，在整个系统中有着非常重要的地位，因此要求其具备 高可用性 是无可厚非的。有很多解决方案能实现不同的 SLA （服务水平协定），这些方案可以保证 数据库服务器 在硬件或软件出现故障时服务继续可用。 高性能性需要解决的主要有两个问题，即如何实现 数据共享 或同步数据，另一个是如何处理failover，数据共享一般的解决方案是通过SAN（Storage Area Network）来实现，而 数据同步 可以通过 rsync 软件或 DRBD 技术来实现；failover的意思就是当服务器死机或出现错误时可以自动切换到其他备用的服务器，不影响服务器上业务系统的运行。本文重点介绍一下目前比较成熟的Mysql高性能解决方案。 1、主从复制解决方案 这是MySQL自身提供的一种高可用解决方案，数据同步方法采用的是MySQL replication技术。MySQL replication就是一个日志的复制过程，在复制过程中一个服务器充当主服务器，而一个或多个其他服务器充当从服务器，简单说就是从服务器到主服务器拉取二进制日志文件，然后再将日志文件解析成相应的SQL在从服务器上重新执行一遍主服务器的操作，通过这种方式保证数据的一致性。 MySQL replication技术仅仅提供了日志的同步执行功能，而从服务器只能提供读操作，并且当主服务器故障时

数据库的主从复制 MySQL中的复制功能用于将数据变更从一个服务器（Master）复制到一个或多个从属服务器（Slave） 主服务器将更改写入二进制日志（binlog），从服务器请求主服务器的binlog并应用其内容日志文件的格式影响从属服务器应用更改的方式 MySQL支持基于语句的（statment）、基于行的（row）以及混合格式的（mixed）日志格式 在复制过程中主服务器使用基于行（row）的日志格式可以大幅降低主服务器和从属服务器数据不一致的情况发生 从属服务器数量 一个主服务器可以具有的从属服务器数量理论上没有限制 每个额外的从库都会占用主库较少资源，所以在生产环境配置从库时应该仔细斟酌每个从库的必要性 最佳从属服务器数量取决于许多因素：模式大小、写入次数、主服务器和从属服务器的相对性能以及 CPU 和内存可用性等因素 网络故障对主从复制的影响 MySQL中的复制功能在网络故障时暂停工作，在网络故障恢复后复制工作将继续进行 每个从属服务器跟踪其已经处理了多少日志并在网络连接恢复时自动继续处理，此行为是自动的，不需要特殊配置 主库和从库的关系 Master和Slave是一对多的关系（MySQL5.5，5.6版本） 一个Master主服务器可以对应多个Slave从属服务器，一个Slave从属服务器只能有一个Master主服务器

注：SID - 数据库标识 HOME_NAME - Oracle Home名称，如OraHome92、OraHome81 （1）OracleServiceSID 数据库服务，这个服务会自动地启动和停止数据库。如果安装了一个数据库，它的缺省启动类型为自动。服务进程为ORACLE.EXE，参数文件initSID.ora，日志文件SIDALRT.log，控制台SVRMGRL.EXE、SQLPLUS.EXE。 （2）OracleHOME_NAMETNSListener 监听器服务，服务只有在数据库需要远程访问时才需要（无论是通过另外一台主机还是在本地通过 SQL*Net 网络协议都属于远程访问），不用这个服务就可以访问本地数据库，它的缺省启动类型为自动。服务进程为TNSLSNR.EXE，参数文件 Listener.ora，日志文件listener.log，控制台LSNRCTL.EXE，默认端口1521、1526。 （3） OracleHOME_NAMEAgent OEM代理服务，接收和响应来自OEM控制台的任务和事件请求，只有使用OEM管理数据库时才需要，它的缺省启动类型为自动。服务进程为DBSNMP.EXE，参数文件snmp_rw.ora，日志文件nmi.log，控制台LSNRCTL.EXE，默认端口1748。 （4）OracleHOME_NAMEClientCache 名字缓存服务

JavaWeb阶段总结 浏览器部分 MySQL数据库部分 MySQL之单表 MySQL之多表 数据库之JDBC 服务器端技术 JavaWeb阶段总结 在学的web基础阶段的过程中,始终要放着三块内容.第一块是浏览器,第二是服务器,第三是数据库. 浏览器部分 在浏览器部分,已经学习了html,css,JavaScript和bootstrap 其中html提供页面的展示功能,给整个网站提供基础的架构.在学习html中最重要的部分是form表单 Css给页面提供渲染的功能,让网页能够更加的美观漂亮. JavaScript提供了整个网站的灵魂,控制网站的特效展示. 之后在浏览器部分学习了bootstrap,bootstrap这个框架集成了前面提到的html,css,和JavaScript.bootstrap主要是用来做响应式页面的,能够根据当前访问的浏览器屏幕大小,来响应不同格式的页面. MySQL数据库部分 MySQL之单表 学完了浏览器部分,就开始学习数据库部分,在学习mysql 的第一天,都是对单个表进行一些操作 主要是对数据库和数据库表以及表中的记录进行的增删改查. 其中,对数据库和数据库表的操作 用的是sql语句中的DDL数据定义语言. DDL数据定义语句的主要关键词是create , drop 和alter 删除数据库表中的记录,涉及到了 delete和truncate的区别.

推荐！国外程序员整理的系统管理员资源大全 2015-1-19 12:24 发布者: admin 微博分享 受其他程序员汇编 php 资源，kahun 在 Github 发起系统管理员相关的开源资源整理。 内容分类包括：备份/克隆软件、云计算/云存储、协作软件、配置管理、日志管理、监控、项目管理…… 当然也有系统管理员相关书籍。 备份 备份软件 Amanda -客户端-服务器模型备份工具 Bacula - 另一个客户端-服务器模型备份工具 Backupninja -轻量级，可扩展的元数据备份系统 Backuppc -客户端-服务器模型备份工具和文件共享方案。 Burp -网络备份和还原程序 Duplicity -使用rsync算法加密的带宽-效率备份 Lsyncd -监控一个本地目录树的变化,然后产生一个进程去同步变化。默认使用rsync。 Rsnapshot -文件系统快照工具 SafeKeep -使用rdiff-backup，集中的，基于pull的备份 TarSnap - 具有一个开源客户端的安全备份服务 UrBackup -另一个客户端-服务器备份系统 DREBS - AWS EBS支持策略的备份脚本 克隆 克隆软件 Clonezilla -分区和磁盘镜像/克隆程序 Fog - 另一个计算机克隆解决方案 Redo Backup -简单的备份，恢复和还原 云计算 AppScale

补充：负载均衡和读写分离楼主并没有尝试使用过，这里作为学习笔记，有些只是概念性的理解一下，后续补充具体案例及使用方法介绍 负载均衡 概念 多个服务器的数据库完成一个服务器数据库的事 ( 数据库必须保持一致性 ) 利用多台服务器的读写能力，但是数据同步和访问分配交给第三方，读的压力分摊到不同的 服务器，写时多台服务器都得完成，对外只有一个 IP ，使用者是不知道细节的 读写分离 概念 基于二八原则： 80% 的操作都是读， 20%s 写。实现原理：就是把读和写的眼里分开，降低 IO 压力 一主多从，主库写从库读。数据同步，从主库到从库 ( 肯定是有延迟的 ) 四种读写分离方式 1 Link 到主库 + 定时任务 2 日志传送 (sql2005) 实现原理：备份 -- 复制 -- 恢复，简单但是有局限性 ( 局域网，只能文件夹共享 ) 3 镜像 snapshot ：内存拍照 主库，对外提供服务。 从库，通过快照恢复，数据跟主库一致 ( 不对外提供服务 ) 监控转移，负责检查状况，有问题切到从库 4 数据复制 ( 发布订阅 ) 主库 -- 发布服务器 -- 从库 延迟小，配置方便，但是需要程序配合 实现方式参考 ： https://blog.csdn.net/u012861467/article/details/76411216 https://blog.csdn.net/qq

数据库操作语句大全(sql) 一、基础 1、说明：创建数据库 CREATE DATABASE database-name 2、说明：删除数据库 drop database dbname 3、说明：备份sql server --- 创建 备份数据的 device USE master EXEC sp_addumpdevice 'disk', 'testBack', 'c:\mssql7backup\MyNwind_1.dat' --- 开始 备份 BACKUP DATABASE pubs TO testBack 4、说明：创建新表 create table tabname(col1 type1 [not null] [primary key],col2 type2 [not null],..) 根据已有的表创建新表： A：create table tab_new like tab_old (使用旧表创建新表) B：create table tab_new as select col1,col2… from tab_old definition only 5、说明：删除新表 drop table tabname 6、说明：增加一个列 Alter table tabname add column col type 注：列增加后将不能删除。DB2中列加上后数据类型也不能改变