Oracle存储结构
oracle 文件层级概念

oracle 文件层级概念
Oracle的文件层级概念主要涉及物理存储结构和逻辑存储结构两个层面。
1.物理存储结构:
o数据文件:存放数据库中的数据。
o控制文件:记录数据库的物理结构信息。
o临时文件:存放临时数据。
o撤销段:用于执行某些事务时的数据还原,保证事务的原子性和一致性。
o参数文件:包含Oracle数据库实例的配置信息。
2.逻辑存储结构:
o表:存储数据的主要构建单元。
o索引:提高检索效率的数据结构。
o视图:虚拟表,是对表或其他视图的查询结果进行的封装。
o序列:用于生成唯一数字,通常用于主键或唯一索引的值上。
Oracle的存储结构由底层的文件组成,这些文件以特定的方式组织和存储,以支持数据库的高效管理和数据的正确存储、检索和使用。
第2章 Oracle数据库的体系结构

因此,Oracle实例是由内存空间和Oracle 进程两部分组成。
Oracle实例结构图
1.系统全局区SGA
数据缓存区(database buffer cache) :最近 使用过的数据 。 重做日志缓冲区(redo log buffer) :记录了 用户对数据库执行的操作,被循环使用 。 共享池(shared pool) :包含了库缓存区( library cache)、数据字典缓存区(dictionary cache)、并行执行消息缓冲区(buffers for parallel execution messages),以及用于系 统控制的各种内存结构。
数据文件又可以分为以下几种:
系统数据文件 回滚数据文件 临时数据文件 用户数据文件 系统辅助数据文件 示例数据文件
2.1.2 日志文件
日志文件记录了用户对数据库的修改信息( 如增加、删除、修改),名字通常为 REDO*.LOG格式。
日志文件也叫重做日志文件或重演日志文件 (Redo Log Files)。 日志组是日志文件的逻辑组织单元,每个日志 组中有一个或多个日志文件。 同一个日志组中的多个日志文件具有相同的信 息,它们是镜相关系
用户进程和服务进程之间的对应关系是由 Oracle数据库的工作模式决定的。数据库通 常有两种工作模式:
专用服务器模式 共享服务器模式
3.后台进程(background process)
Oracle实例启动时,为了保证该实例的正常使 用,系统将为该实例启动一些后台进程。 这些进程是操作数据库的基础,不管有没有用 户连接数据库,这些进程都会被启动。
oracle 数据库物理结构

数据文件和表空间有着密切的关系,Oracle 数据 库至少要包含一个数据文件,并且数据文件是表 空间的物理组成元素,一个表空间可以包含多个 数据文件,并且每个数据文件只能惟一地属于某 个表空间。 关于“表空间”在后面会给大家详细介绍。
但如果执行介质恢复(例如数据文件意外丢失) ,则必须要用到归档日志。归档日志是非活 动重做日志的备份,数据库只有处于 ARCHIVELOG 模式时才会生成归档日志,并且 每次日志切换都会生成归档日志。
如图所示:
假定数据库只包含两个日志组,并且处于 ARCHIVELOG 模式。初始阶段LGWR 会将事务 变化写入到日志组一,当日志组一写满之后 ,LGWR 会将事务变化写入到日志组二中, 并且会促使ARCn 进程将日志组一的内容保存 到归档日志中,依此类推。
2.6.1 连接和建立会话
当客户应用需要执行SQL 语句时,首先要建立用户进程 ,同时在服务器端会自动为该用户进程派生一个新的 服务进程。默认情况下,用户进程与服务器进程是一 一对应的关系。 当客户端运行SQL 语句时,用户进程会通过网络将该 SQL 语句发送到对应的服务进程,并且由服务进程执行 该SQL 语句,服务器进程在执行了SQL 语句之后,会将 SQL 语句的结果通过网络返回到用户进程。
2.5.3 区(Extents)
数据区间简称为区,区是为段分配空间的逻辑单位 ,Oracle 在分配空间时,并不是以块为单位进行的 ,而是将多个连续的块一次性的分配给数据库对象 。这些连续的块在回收存储
空间时,也一起回收。这些连续的数据块就是数据 区间。 当创建一个数据库对象时,Oracle为这些对象创建一 个段,并分配初始区。当段中的初始区的存储空间 使用完毕后,Oracle会为段自动分配新的区,每个区 的大小不要求相同
Oracle Storage

一、基本的Oracle存储结构:表空间与数据文件Oracle数据库中具有两种类型的存储:物理存储和逻辑存储。
上面的Oracle存储结构模型中,可以看出下列要素:∙每个数据库(Database)都必须由一个或多个表空间(Tablespace)组成。
每个表空间都必须属于并且只属于一个数据库。
∙每个表空间都必须由一个或多个数据文件(Datafile)组成。
每个数据文件都必须属于并且只属于一个表空间。
∙每个数据文件都必须由一个或多个操作系统块(Operation System Block)组成。
每个操作系统块都必须属于并且只属于一个数据文件。
∙每个表空间都可以包含一个或多个段(Segment)。
每个段都必须存在并且只能存在于一个表空间内。
∙每个段都必须由一个或多个区间(Extent)组成。
每个区间都必须属于并且只属于一个段。
∙每个区间都必须由一个或多个Oracle数据块(Oracle Block)组成。
每个Oracle 数据块都必须属于并且只属于一个区间。
∙每个区间都必须被定位并且只能定位在一个数据文件内。
数据文件中的空间可以被分配为一个或多个区间。
∙每个Oracle数据块都必须由一个或多个操作系统块组成。
每个操作系统块都可以是并且只能是一个Oracle数据块的部分。
1、物理存储结构物理结构是操作系统操作Oracle数据库时能够看见的结构。
1.1、Oracle数据文件数据文件由下列3部分组成:头部、区间(已分配的空间)以及空闲空间(未分配的空间)。
oracle16数据文件的头部(Header)将其标识为数据库的一部分,并且存储了该数据文件的细节,细节包括数据文件所属的表空间以及最后执行的检查点。
这样,Oracle就能够在启动时检查所有相关文件是否同步。
数据文件的剩余部分由区间和空闲空间组成,通过创建、删除和更改Oracle的段(Segment)逻辑存储组件就可以对这些剩余部分进行管理。
每个Oracle数据文件都只属于一个表空间。
oracle数据库体系架构详解

oracle数据库体系架构详解在学习oracle中,体系结构是重中之重,⼀开始从宏观上掌握它的物理组成、⽂件组成和各种⽂件组成。
掌握的越深⼊越好。
在实际⼯作遇到疑难问题,其实都可以归结到体系结构中来解释。
体系结构是对⼀个系统的框架描述。
是设计⼀个系统的宏观⼯作。
这好⽐建⼀栋⼤楼。
你⾸先应该以图纸的⽅式把整个⼤楼的体系架构描述出来。
然后⼀点点的往⾥⾯填充东西。
下⾯我们先以⼀个图解的⽅式对oracle体系结构有⼀个基本了解根据⽰图,便于我们记忆,⽰图分三部分组成,左侧User Process、Server Process、PGA可以看做成Clinet端,上⾯的实例(Instance)和下⾯的数据库(Database)及参数⽂件(parameter file)、密码⽂件(password file)和归档⽇志⽂件(archived logfiles)组成Oracle Server,所以整个⽰图可以理解成⼀个C/S架构。
Oracle Server由两个实体组成:实例(instance)与数据库(database)。
这两个实体是独⽴的,不过连接在⼀起。
在数据库创建过程中,实例⾸先被创建,然后才创建数据库。
在典型的单实例环境中,实例与数据库的关系是⼀对⼀的,⼀个实例连接⼀个数据库,实例与数据库也可以是多对⼀的关系,即不同计算机上的多个实例打开共享磁盘系统上的⼀个公⽤数据库。
这种多对⼀关系被称为实际应⽤群集(Real Application Clusters,RAC)RAC极⼤提⾼了数据库的性能、容错与可伸缩性(可能耗费更多的存储空间)并且是oracle⽹格(grid)概念的必备部分。
下⾯我们来详细看⼀下oracle数据库的体系架构Oracle体系架构主要有两⼤部分组成:数据库实例(Instance)和数据库⽂件(database)数据库实例指数据库服务器的内存及相关处理程序,它是Oracle的⼼脏。
与Oracle性能关系最⼤的是SGA(System Global Area,即系统全局区活共享内存区),SGA包含三个部分:1、数据缓冲区,可避免重复读取常⽤的数据;2、⽇志缓冲区,提升了数据增删改的速度,减少磁盘的读写⽽加快速度;3、共享池,使相同的SQL语句不再编译,提升了SQL的执⾏速度。
第二章Oracle体系结构

2.表空间的使用
在数据库中使用多个表空间具有如下优势: (1)能够将数据字典与用户数据分离开来,避免 由于字典对象和用户对象保存在同一个数据文件 中而产生的1/0冲突。 (2)能够将回退数据与用户数据分离开来,避免 由于硬盘损坏而导致永久性的数据丢失。 (3)能够将表空间的数据文件分散保存到不同硬 盘上,平均分布物理1/0操作。
(4)LGWR日志文件写进程 该进程是日志缓冲区的管理进程,负责把日志缓冲区中 的日志项写入磁盘上的日志文件中。 (5)ARCH归档进程(archiver process) 该进程把已经填满的在线日志文件拷贝到一个指定的存 储设备上。 (6)RECO恢复进程 该进程是在具有分布式选项时使用的一个进程,主要用 于解决引用分布式事务时所出现的故障。 (7)LCKN封锁进程
2.4.2 进程
进程又称任务,是操作系统中一个极为重要的 概念。一个进程执行一组操作,完成一个特定 的任务。对Oracle数据库管理系统来说,进程由 用户进程、服务器进程和后台进程所组成。 进程与程序的区别在于前者是一个动态概念, 后者是一个静态实体;程序仅仅是指令的有序 集合,而进程则强调执行过程。进程可以动态 地创建,完成任务后即会消亡。
2.2.4 数据库块
数据库块也称逻辑块或Oracle块,它对应 磁盘上一个或多个物理块,它的大小由初 始化参数db_block_size(在文件init.ora中) 决定,典型的大小是2k。
Pckfree和Pctused两个参数用来优化数据 块空间的使用。 PCTFREE : 块 中 保 留 用 于 UPDATE 操作的空间百分比,当数据占用的空间达 到此上限时,新的数据将不能再插入到此 块中; PCTUSED:指定块中数据使用空间 的最低百分比;
Oracle体系结构研究

Oracle体系结构研究摘要:阐述了Oracle数据库的基本架构和Oracle数据库理论中的主要概念。
Oracle体系结构由存储结构、内存结构和进程结构组成,其中,存储结构由物理存储结构及逻辑存储结构组成;内存结构由SGA和PGA组成;进程结构由用户进程和Oracle进程组成。
关键词:ORACLE体系结构;存储结构;内存结构;进程结构1 Oracle的存储结构Oracle的存储结构分为物理存储结构和逻辑存储结构。
1.1 物理存储结构主要由数据文件、控制文件、联机日志文件及数据库实例构成。
Oracle数据库中有许多初始化参数,这些参数用于对整个数据库进行设置或调整,如设置数据库名、数据库块大小、控制文件的名称和位置、数据库实例数等信息。
Oracle 把这些参数存放在一个文件中,这个文件就叫初始化参数文件。
启动数据库时,Oracle会读取参数文件中的值,并根据这些值对数据库实例(instance)进行设置。
具体说是Oracle先从初始化参数文件中获得控制文件的名称及位置,打开控制文件,然后再从控制文件中读取数据文件和联机日志文件的名称和位置,打开它们,因为表、索引等对象的数据就存放在数据文件中,从而就打开了数据库。
1.1.1 控制文件Oracle启动数据库时会访问控制文件,控制文件是在创建数据库的时候创建的,它是一个很小的二进制文件,记录了数据库的名称、创建数据库的时间、数据文件的名称和位置、联机日志文件的名称和位置及表空间等信息。
所以说一个数据库的控制文件是相当重要的,一旦被损坏,数据库将不能正常启动和运行。
所以DBA应该镜像控制文件,把每个镜像的控制文件分布到不同的物理磁盘上,发生灾难时既使其中一个控制文件被损坏,也不会使整个数据库限于瘫痪。
1.1.2 数据文件当用户在Oracle中创建数据库的时候,就创建了一个或多个数据文件,表和索引等对象的数据就物理地存放在数据文件中。
一个表的数据可能会存储在多个数据文件中,但一个数据文件只能属于一个数据库。
Oracle 逻辑存储结构

Oracle 逻辑存储结构逻辑存储结构是Oracle 数据库存储结构的核心内容,对Oracle 数据库的所有操作都会涉及到其逻辑存储结构。
数据库的逻辑结构是从逻辑的角度分析数据库的构成,即创建数据库后形成的逻辑概念之间的关系。
在逻辑上,Oracle 将保存的数据划分为一个个小单元来进行存储和维护,高一级的存储单元由一个或多个低一级的存储单元组成。
Oracle 的逻辑存储单元从小到大依次为:数据块(DA TA BLOCKS )、盘区(EXTENT )、段(SEGMENTS )和表空间(TABLE SPACES ),图2-2显示了各逻辑单位之间的关系。
数据库...表空间表空间段段盘区数据块盘区数据块段段数据库...表空间表空间段段盘区数据块盘区数据块段段图2-2 数据库的逻辑存储组成由图2-2可知,Oracle 数据库由多个表空间组成,而表空间又由许多段组成,段由多个盘区组成,盘区又由多个数据块组成。
1 数据块数据块是Oracle 用来管理存储空间的最小单元,也是执行数据库输入输出操作时的最小单位。
相对应地,操作系统执行输入输出操作的最小单位为一个操作系统块的大小。
在操作系统中,执行I/O 操作是以操作系统块为单位,而在Oracle 中,执行的I/O 操作以Oracle 数据块为单位。
Oracle 块的大小是操作系统块大小的整数倍。
以Windows NT 操作系统为例,NTFS 格式的磁盘分区一般为4KB 大小,因此Oracle 块的大小为8KB 等。
数据块的标准大小由初始化参数DB_BLOCK_SIZE 确定,具有标准大小的块被称为标准块。
Oracle 支持在同一个数据库中使用多种大小的块,与标准块大小不同的块称为非标准块。
可以通过查询V$PARAMETER 数据字典,可以获得参数DB_BLACK_SIZE 的值,该参数值同时也是数据块的尺寸大小。
例如:SQL> select name,value2 from v$parameter where name ='db_block_size';NAME V ALUE--------------------------- --------------------------db_block_size 8192在数据块中可以存储各种类型的数据,如表数据、索引数据、簇数据等。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
Oracle 存储结构分析
一逻辑结构的层次与种类
1,表(table):
2,分区表(table partition):一个有很大数据量的表;我们可以把表分区,每个分区可以放在不同的段上。
以实现对表的优化
3,簇(cluster):将多个表集合在一起,这些表拥有相同的列;这些相同列放在同一个物理的段里面。
4,索引(index):
5,index-organized table(对应sqlserver的群集索引): 这些表中的数据以索引的大小按升序或者降序排列
6,index partition(索引的分区): 关于索引的数据分别存于不同的物理段里面
7,undo segment: 有序循环的方式存储(存放old value;读一致性;rollback ;recovery)
8,temporary: 临时段用来排序
9,LOB segment: 存放大的数据,oracle里面将这些数据并不放在表内部,而
是有专门一个段来存储
10,nested table(嵌套表):一个表中的某个字段的值是另外一个整表!
11,bootstrap segment:初始化我们的实例用的。
这个段不需要维护和管理!
二oracle存储参数的设定及继承问题
【记忆】默认为 Oracle default ===》 Tablespace (创建表空间时定义的参数) ====》 Segment(优先级最高)
【理解】初始参数 oracle block 的5倍;意思是说你创建一个表,即使里面没存数据,它已经占用了8k×5=40kB的空间(这里假设oracle block size 为8kB)
三创建表时可以单独为表指定存储参数
SQL> conn hr/123456@kk
已连接。
SQL> create table hello(id int)
2 tablespace bkeep
3 storage(initial 100k
4 next 100k);
【点子】我们来创建一个表空间test11,不带任何存储参数,然后打开oem看看它的存储参数(这些参数就是从oracle default哪里继承过来的!)
四extent的分配和重新分配
-当创建段时就分配空间
-当扩展段时给它分配空间
-强制分配空间给段(段可以跨数据文件,但不可以跨表空间;但是强制的段是不能跨数据文件获取空间的)
创建表时,最初始的空间一定会分配给它!
五【实验】强制分配分区
1,我们想给hr.hello表在system01.dbf上划分1M的空间,
结果:ORA-03284: 数据文件d:/oracle/oradata/kk/system01.dbf不是表空间BKEEP的成员
2,现在我们给bkeep表空间增加一个数据文件bkeep03.dbf
3,再来给hr.hello表在bkeep03.dbf上强制划分1M空间
4,这里我们不指定数据文件,那么会不会是在建表的时候指定的那个数据文件上继续扩展呢?
【思考】强制分配空间的时候会指定一个数据文件,当给该表分配的空间使用完以后,它将会怎么办?继续从该数据文件上面获取空间?还是从由local manage随机分配空间给它?
答案:
【重点】drop table xxx 和 truncate table xxx 都会释放存储空间
回收 hr.hello表没有用掉的空间
【记忆】data file分区的使用情况记录在文件的头(file hearder)里面;主要有两种信息:Used extent和Free extent
六database block 的大小
I/O读写的最小单位:读整个块到内存去;同理,内存的使用也以块大小为单位
块的大小是在创建表空间时指定的
DB_BLOCK_SIZE这个参数指定了缺省的块大小
七【实践检验真理】非标准块的使用方法:验证db_16k_cache_size值的影响
oracle现在支持多种块大小的表空间,但是要使用这个功能,必须指定支持对应块大小的内存缓存区!
step1:查看内存区为16k块分配的cache大小;结果:0
step2:创建表空间bkeep2 并指定其blocksize 为16KB;结果:报错
step3:为16k的block在内存中设置缓存;结果:没有足够内存来增加高速缓存的大小
step4:收缩其它缓存来给16k block 来用;结果:标准块缓存12 4, 腾出了8m
step5:现在创建块大小为16kB的表空间bkeep2 ;结果:成功!
step6:现在又想db_16k_cache_size=0;结果:bkeep2表空间在用,所以不能设为0
step7:把bkeep2表空间连同内容和数据文件全部删除,再来设
db_16k_cache_size=0 ;结果:ok!
【思考】块大小为8k;设对应的cache有如下特点。
db_cache_size=9m 结果:12M
db_cache_size=5m 结果:8M
八块的研究
header: 有多少行!使用空间的方式是 "自上往下"
free space: 保留用于更新的空闲空间
Data: 数据的填充方式是 "自下往上 "
块一级控制对空间的使用
总共有四个参数:PCTFREE、PCTUSED、INITRANS、MAXTRANS
PCTFREE
PCTUSED
【优化有关】用上面两个参数来控制块中预留的空间大小。
为什么要预留空间呢? 为了将来更新时防止数据变大而导致行移植!
为什么要避免行移植呢?行移植的意思就是一行记录被放到两个块里面,之间做了指针链接;将来查询这个数据的时候会读取两个块中的全部内容(block是最小读写单位),这样的话I/O负担就翻了一倍!
【说明】PCTFREE=20 是20% 控制insert,为了给将来update用!!呵呵,偏心吧!
九查看表的存储参数,在OEM里面
"事务处理数量" ---- ‘初始值’对应‘INITRANS’‘最大值’对应‘MAXTRNS’意思是:初始值允许一个事务对这个块的操作,最大的事务数量是255
十data block 的管理
自动段空间管理
手工管理段空间
自动段管理 --推荐使用
1,借助位图来跟踪当前段的free和use空间
2,对并发数据的插入有更好的性能!
【疑问】如果表空间中包含LOBs对象,那么就不能使用自动段管理(难道我们的系统。
???天哪!)
【常识】只能在创建表空间的时候指定段管理;以后在这个表空间中创建的对象都将继承它的段管理特性
【点子】在kong3表空间中创建表test11
OEM中查看表test11的存储特性
“空闲列表”为灰色的,说明它是自动管理的
十一【重点】如何通过字典视图查看空间管理信息??
每个对象所占有的分区都记录在DBA_EXTENTS里面
表空间还有多少自由空间? DBA_FREE_SPACE
表空间从物理上有“数据文件”组成;从逻辑上由“段”组成
物理线路:DBA_TABLESPACES--→DBA_DATA_FILES--→ DBA_FREE_SPACE +
DBA_EXTENTS
逻辑线路:DBA_TABLESPACES--→DBA_SEGMENTS---→ DBA_FREE_SPACE +
DBA_EXTENTS
【重点】这五个视图监控了系统存储这块的非常有用的信息;必须高度重视,经常使用!
DBA_TABLESPACES
DBA_SEGMENTS
DBA_DATA_FILES
DBA_FREE_SPACE
DBA_EXTENTS
【技巧】如何判断表空间是local管理还是数据字典管理
SELECT * FROM DBA_TABLESPACE
可以看到“表空间名称”“block_size”“初始分区”“next 分区”如果“next 分区”为空,说明是local管理
【技巧】计算price表所占空间
每个对象所占用的分区都记录在DBA_EXTENTS视图里面
根据这个,我们可以计算authors表所占的空间
计算price表所占空间
【记忆】表空间的作用:
分离段,方便管理
控制用户空间的分配(普通表,分区表,cluster,LOBs 等等)。