数据库优化设计方案

数据库优化方案设计XX信息管理平台从大型数据库环境四个不同级别的调整分析入手，分析数据库平台的系统结构和工作机理，从九个不同方面设计数据库的优化方案。

对于数据库的数据优化，主要有四个不同的调整级别，第一级调整是操作系统级包括硬件平台，第二级调整是RDBMS级的调整，第三级是数据库设计级的调整，最后一个调整级是SQL级。

通常依此四级调整级别对数据库进行调整、优化，数据库的整体性能会得到很大的改善。

下面从九个不同方面介绍数据库优化设计方案。

一、数据库优化自由结构数据库的逻辑配置对数据库性能有很大的影响。

为此，数据库平台一般对表空间设计提出有相应的优化结构，如ORACLE公司的OFA(Optimal flexible Architecture)，使用这种结构进行设计会大大简化物理设计中的数据管理。

优化自由结构，简单地讲就是在数据库中可以高效自由地分布逻辑数据对象，因此首先要对数据库中的逻辑对象根据他们的使用方式和物理结构对数据库的影响来进行分类，这种分类包括将系统数据和用户数据分开、一般数据和索引数据分开、低活动表和高活动表分开等等。

数据库逻辑设计的结果应当符合下面的准则：（1）把以同样方式使用的段类型存储在一起；（2）按照标准使用来设计系统；（3）存在用于例外的分离区域；（4）最小化表空间冲突；（5）将数据字典分离。

二、充分利用系统全局区域系统全局区域是数据库平台的心脏，如Oracle数据库的SGA（SYSTEM GLOBAL AREA) 。

用户的进程对这个内存区发送事务，并且以这里作为高速缓存读取命中的数据，以实现加速的目的。

正确的SGA大小对数据库的性能至关重要。

SGA包括以下几个部分：1、数据块缓冲区（data block buffer cache）是SGA中的一块高速缓存，占整个数据库大小的1%-2%，用来存储从数据库重读取的数据块（表、索引、簇等），因此采用least recently used (LRU，最近最少使用)的方法进行空间管理。

2、字典缓冲区。

该缓冲区内的信息包括用户账号数据、数据文件名、段名、盘区位置、表说明和权限，它也采用LRU方式管理。

3、重做日志缓冲区。

该缓冲区保存为数据库恢复过程中用于前滚操作。

4、SQL共享池。

保存执行计划和运行数据库的SQL语句的语法分析树。

也采用LRU 算法管理。

如果设置过小，语句将被连续不断地再装入到库缓存，影响系统性能。

另外，SGA还包括大池、JAVA池、多缓冲池。

但是主要是由上面4种缓冲区构成。

对这些内存缓冲区的合理设置，可以大大加快数据查询速度，一个足够大的内存区可以把绝大多数数据存储在内存中，只有那些不怎么频繁使用的数据，才从磁盘读取，这样就可以大大提高内存区的命中率。

三、规范与反规范设计数据库1、规范化范式是符合某一级别的关系模式的集合，根据约束条件的不同，一般有1NF、2NF、3NF三种范式。

规范化理论是围绕这些范式而建立的。

规范化的基本思想是逐步消除数据依赖中不合适的部分，使模式中的各关系模式达到某种程度的“分离”，即采用“一事一地”的模式设计原则，因此，所谓规范化实质上就是概念的单一化。

数据库中数据规范化的优点是减少了数据冗余，节约了存储空间，相应逻辑和物理的I/O次数减少，同时加快了增、删、改的速度。

但是一个完全规范化的设计并不总能生成最优的性能，因为对数据库查询通常需要更多的连接操作，从而影响到查询的速度。

故有时为了提高某些查询或应用的性能而有意破坏规范规则，即反规范化。

2、反规范化⑴反规范的必要性是否规范化的程度越高越好呢？答案是否定的，应根据实际需要来决定，因为“分离”越深，产生的关系越多，结构越复杂。

关系越多，连接操作越频繁，而连接操作是最费时间的，在数据库设计中特别对以查询为主的数据库设计来说，频繁的连接会严重影响查询速度。

所以，在数据库的设计过程中有时故意保留非规范化约束，或者规范化以后又反规范，这样做通常是为了改进数据库的查询性能，加快数据库系统的响应速度。

⑵反规范技术在进行反规范设计之前，要充分考虑数据的存取需求，常用表的大小、特殊的计算、数据的物理存储等。

常用的反规范技术有合理增加冗余列、派生列，或重新组表几种。

反规范化的好处是降低连接操作的需求、降低外码和索引数目，减少表的个数，从而提高查询速度，这对于性能要求相对较高的数据库系统来说，能有效地改善系统的性能，但相应的问题是可能影响数据的完整性，加快查询速度的同时降低修改速度。

3、数据库设计中的优化策略数据应当按两种类别进行组织：频繁访问的数据和频繁修改的数据。

对于频繁访问但是不频繁修改的数据，内部设计应当物理不规范化。

对于频繁修改但并不频繁访问的数据，内部设计应当物理规范化。

比较复杂的方法是将规范化的表作为逻辑数据库设计的基础，然后再根据整个应用系统的需要，物理地非规范化数据。

规范与反规范都是建立在实际的操作基础之上的约束，脱离了实际两者都没有意义。

只有把两者合理地结合在一起，才能相互补充，发挥各自的优点。

四、合理设计和管理表1、利用表分区分区将数据在物理上分隔开，不同分区的数据可以保存在不同磁盘的数据文件里。

这样，当对这个表进行查询时，只需要在表分区中进行扫描，而不必进行FTS(Full Table Scan，全表扫描)，明显缩短了查询时间。

另外处于不同磁盘的分区也将这个表的数据传输分散在不同的磁盘I/O，优化分区可以将数据传输对磁盘I/O竞争均匀地分散开。

2、避免出现行连接和行迁移在建立表时，由于参数pctfree和pctused不正确的设置，数据块中的数据会出现行链接和行迁移，也就是同一行的数据不保存在同一个数据块中。

如果在进行数据查询时遇到了这些数据，那么为了读出这些数据，磁头必须重新定位，这样势必会大大降低数据库执行的速度。

因此，在创建表时，就应该充分估计到将来可能出现的数据变化，正确地设置这两个参数，尽量减少数据库中出现行链接和行迁移。

3、控制碎片碎片(fragmentation)是对一组非邻接的数据库对象的描述。

碎片意味着在执行数据库的功能时要耗费额外的资源（磁盘I/O，磁盘驱动的循环延迟，动态扩展，链接的块等），并浪费大量磁盘空间。

当两个或多个数据对象在相同的表空间中，会发生区间交叉。

在动态增长中，对象的区间之间不再相互邻接。

为了消除区间交叉将静态的或只有小增长的表放置在一个表空间中，而把动态增长的对象分别放在各自的表空间中。

在create table、create index、create tablespace、create cluster时，在storage子句中的参数的合理设置，可以减少碎片的产生。

4、别名的使用别名是大型数据库的应用技巧，就是表名、列名在查询中以一个字母为别名，查询速度要比建连接表快1.5倍。

5、回滚段的交替使用由于数据库配置对应用表具有相对静止的数据字典和极高的事务率特点。

而且数据库的系统索引段、数据段也具有相对静止，并发现在应用中最高的负荷是回滚段表空间。

把回滚段定义为交替引用，这样就达到了循环分配事务对应的回滚段，可以使磁盘负荷很均匀地分布。

五、索引Index的优化设计1、管理组织索引索引可以大大加快数据库的查询速度，索引把表中的逻辑值映射到安全的RowID，因此索引能进行快速定位数据的物理地址。

但是对一个大型表建立的索引，并不能改善数据查询速度，反而会影响整个数据库的性能。

这主要是和SGA的数据管理方式有关。

数据库在进行数据块高速缓存管理时，索引数据比普通数据具有更高的驻留权限，在进行空间竞争时，数据库会先移出普通数据。

对一个建有索引的大型表的查询时，索引数据可能会用完所有的数据块缓存空间，数据库不得不频繁地进行磁盘读写来获取数据，因此在对一个大型表进行分区之后，可以根据相应的分区建立分区索引。

如果对这样大型表的数据查询比较频繁，建议不创建索引。

另外，DBA创建索引时，应尽量保证该索引最可能地被用于where子句中，如果对查询只简单地制定一个索引，并不一定会加快速度，因为索引必须指定一个适合所需的访问路径。

2、聚簇的使用数据库提供了另一种方法来提高查询速度，如Oracle的聚簇（Cluster）。

所谓聚簇，简单地说就是把几个表放在一起，按一定公共属性混合存放。

聚簇根据共同码值将多个表的数据存储在同一个数据库块中，这时检索一组数据库块就同时得到两个表的数据，这样就可以减少需要存储的数据库块，从而提高应用程序的性能。

3、优化设置的索引，就必须充分利用才能加快数据库访问速度。

数据库要使用一个索引，有一些最基本的条件：（1）、where子名中的这个字段，必须是复合索引的第一个字段；（2）、where子名中的这个字段，不应该参与任何形式的计算。

六、多CPU和并行查询PQO(Parallel Query Option)方式的利用1、尽量利用多个CPU处理器来执行事务处理和查询CPU的快速发展使得数据库越来越重视对多CPU的并行技术的应用，一个数据库的访问工作可以用多个CPU相互配合来完成，加上分布式计算已经相当普遍，建议将数据库服务器和应用程序的CPU请求分开，或将CPU请求从一个服务器移到另一个服务器。

对于多CPU系统尽量采用Parallel Query Option(PQO，并行查询选项)方式进行数据库操作。

2、使用Parallel Query Option(PQO，并行查询选择)方式进行数据查询使用PQO方式不仅可以在多个CPU间分配SQL语句的请求处理，当所查询的数据处于不同的磁盘时，一个个独立的进程可以同时进行数据读取。

3、使用SQL*Loader Direct Path选项进行大量数据装载使用该方法进行数据装载时，程序创建格式化数据块直接写入数据文件中，不要求数据库内核的其他I/O。

七、实施系统资源管理分配计划数据库提供了数据库资源管理器来控制用户的资源分配，DBA可以用它分配用户类和作业类的系统资源百分比，如Oracle的DRM（Database Resource Manager）。

在一个OLDP 系统中，可给联机用户分配75%的CPU资源，剩下的25%留给批用户。

另外，还可以进行CPU的多级分配。

除了进行CPU资源分配外，DRM还可以对资源用户组执行并行操作的限制。

八、使用最优的数据库连接和SQL优化方案1、使用直接的OLE DB数据库连接方式。

通过ADO可以使用两种方式连接数据库，一种是传统的ODBC方式，一种是OLE DB 方式。

ADO是建立在OLE DB技术上的，为了支持ODBC，必须建立相应的OLE DB到ODBC的调用转换，而使用直接的OLE DB方式则不需转换，从而提高处理速度。

2、使用Connection Pool机制在数据库处理中，资源花销最大的是建立数据库连接，而且用户还会有一个较长的连接等待时间。