当前位置: 首页 > news >正文

oracle体系架构

 

一、ORACLE实例

1ORACLE 实例

 System Global Area(SGA) Background Process 称为数据库的实例。

2ORACLE 数据库

  一系列物理文件的集合(数据文件,控制文件,联机日志,参数文件等)

3、系统全局共享区System Global Area(SGA)

System Global Area 是一块巨大的共享内存区域,他被看做是Oracle 数据库的一个大缓冲池,这里的数据可以被ORACLE的各个进程共用。其大小可以通过如下语句查看:

820@iquery@ALIDW> select * from v$sga;

 

NAME                      VALUE

-------------------- ----------

Fixed Size              2122368

Variable Size        8959036800

Database Buffers     1.2499E+10

Redo Buffers           14651392

 

Elapsed: 00:00:00.00  

更详细的信息可以参考V$sgastatV$buffer_pool

820@iquery@ALIDW>desc V$sgastat

 Name                    Null?    Type

 ----------------------- -------- ----------------

 POOL                              VARCHAR2(12)

 NAME                              VARCHAR2(26)

 BYTES                              NUMBER

 

820@iquery@ALIDW>desc V$buffer_pool

 Name                    Null?    Type

 ----------------------- -------- ----------------

 ID                               NUMBER

 NAME                             VARCHAR2(20)

 BLOCK_SIZE                       NUMBER

 RESIZE_STATE                     VARCHAR2(10)

 CURRENT_SIZE                     NUMBER

 BUFFERS                          NUMBER

 TARGET_SIZE                      NUMBER

 TARGET_BUFFERS                   NUMBER

 PREV_SIZE                        NUMBER

 PREV_BUFFERS                     NUMBER

 LO_BNUM                          NUMBER

 HI_BNUM                          NUMBER

 LO_SETID                         NUMBER

 HI_SETID                         NUMBER

 SET_COUNT                        NUMBER

主要包括以下几个部分:

a、   共享池(Shared pool)

共享池是SGA中最关键的内存片段,特别是在性能和可伸缩性上。一个太小的共享池会扼杀性能,使系统停止,太大的共享池也会有同样的效果,将会消耗大量的CPU来管理这个共享池。不正确的使用共享池只会带来灾难。共享池主要又可以分为以下两个部分:

SQL语句缓冲(Library Cache)

当一个用户提交一个SQL语句,Oracle会将这句SQL进行分析(parse),这个过程类似于编译,会耗费相对较多的时间。在分析完这个SQLOracle会把他的分析结果给保存在Shared poolLibrary Cache中,当数据库第二次执行该SQL时,Oracle自动跳过这个分析过程,从而减少了系统运行的时间。这也是为什么第一次运行的SQL 比第二次运行的SQL要慢一点的原因。

下面举例说明parse的时间:

SQL> select count(*) from scpass ;

COUNT(*)

----------

  243

Elapsed: 00:00:00.08

这是在Share_pool Data buffer 都没有数据缓冲区的情况下所用的时间
  SQL> alter system flush SHARED_POOL;

System altered.

清空Share_pool,保留Data buffer

SQL> select count(*) from scpass ;

COUNT(*)

--------

  243

Elapsed: 00:00:00.02

SQL> select count(*) from scpass ;

COUNT(*)

----------

243

Elapsed: 00:00:00.00

从两句SQL 的时间差上可以看出该SQL Parse 时间约为00:00:00.02
  对于保存在共享池中的SQL语句,可以从V$Sqltextv$Sqlarea中查询到,对于编程者来说,要尽量提高语句的重用率,减少语句的分析时间。一个设计的差的应用程序可以毁掉整个数据库的Share pool,提高SQL语句的重用率必须先养成良好的变成习惯,尽量使用Bind变量。

数据字典缓冲区(Data Dictionary Cache)

显而易见,数据字典缓冲区是ORACLE特地为数据字典准备的一块缓冲池,供ORACLE内部使用,没有什么可以说的。

b、  块缓冲区高速缓存(Database Buffer Cache)

这些缓冲是对应所有数据文件中的一些被使用到的数据块。让他们能够在内存中进行操作。在这个级别里没有系统文件,户数据文件,临时数据文件,回滚段文件之分。也就是任何文件的数据块都有可能被缓冲。数据库的任何修改都在该缓冲里完成,并由DBWR进程将修改后的数据写入磁盘。

这个缓冲区的块基本上在两个不同的列表中管理。一个是块的(Dirty List),需要用数据库块的

书写器(DBWR)来写入,另外一个是不脏的块的列表(Free List),一般的情况下,是使用最近最少使用 (Least Recently Used,LRU)算法来管理。块缓冲区高速缓存又可以细分为以下三个部分(Default pool,Keep pool,Recycle pool)。如果不是人为设置初始化参数(Init.ora)ORACLE将默认为Default pool。由于操作系统寻址能力的限制,不通过特殊设置,在32位的系统上,块缓冲区高速缓存最大可以达到1.7G,在64位系统上,块缓冲区高速缓存最大可以达到10G

c、   重做日志缓冲区(Redo log buffer)

重做日志文件的缓冲区,对数据库的任何修改都按顺序被记录在该缓冲,然后由LGWR进程将它写入磁盘。这些修改信息可能是DML语句,如(Insert, Update, Delete),或DDL语句,如(Create, Alter, Drop) 重做日志缓冲区的存在是因为内存到内存的操作比较内存到硬盘的速度快很多,所以重作日志缓冲区可以加快数据库的操作速度,但是考虑的数据库的一致性与可恢复性,数据在重做日志缓冲区中的滞留时间不会很长。所以重作日志缓冲区一般都很小,大于3M之后的重作日志缓冲区已经没有太大的实际意义。

d、  Java程序缓冲区(Java Pool)

Java 的程序区,Oracle 8I 以后,Oracle 在内核中加入了对Java的支持。该程序缓冲区就是为Java 程序保留的。如果不用Java程序没有必要改变该缓冲区的默认大小。

e、   大池(Large Pool)

大池的得名不是因为大,而是因为它用来分配大块的内存,处理比共享池更大的内存,在8.0开始引入。

下面对象使用大池:

MTS——SGALarge Pool中分配UGA

语句的并行查询(Parallel Executeion of Statements)——允许进程间消息缓冲区的分配,用来协调 并行查询服务器

备份(Backup)——用于RMAN磁盘I/O缓存

4、后台进程(Background process)

后台进程是Oracle的程序,用来管理数据库的读写,恢复和监视等工作。Server Process主要是通过他和user process进行联系和沟通,并由他和user process进行数据的交换。在Unix机器上,Oracle后台进程相对于操作系统进程,也就是说,一个Oracle后台进程将启动一个操作系统进程;在Windows机器上, Oracle后台进程相对于操作系统线程,打开任务管理器,我们只能看到一个ORACLE.EXE的进程,但是通过另外的工具,就可以看到包含在这里进程中的线程。

Unix上可以通过如下方法查看后台进程:

ps –ef | grep ora_

# ps -ef | grep ora_ | grep XCLUAT

oracle 29431 1 0 Sep 02 2:02 ora_dbwr_SID
  oracle 29444 1 0 Sep 02 
0:03 ora_ckpt_SID
  oracle 29448 1 0 Sep 02 
2:42 ora_smon_SID
  oracle 29442 1 0 Sep 02 
3:25 ora_lgwr_SID
  oracle 29427 1 0 Sep 02 
0:01 ora_pmon_SID
  

  aOracle系统有5 个基本进程他们是
  DBWR(数据文件写入进程)
  LGWR(日志文件写入进程
)
  SMON(系统监护进程
)
  PMON(用户进程监护进程
)
  CKPT(检查点进程,同步数据文件, 日志文件,控制文件
)
  

  bDBWR
  将修改过的数据缓冲区的数据写入对应数据文件

  维护系统内的空缓冲区
  这里指出几个容易错误的概念:
  当一个更新提交后,DBWR把数据写到磁盘并返回给用户提交完成
.
  DBWR会触发CKPT 后台进程

  DBWR不会触发LGWR 进程
  上面的概念都是错误的.
  DBWR是一个很底层的工作进程,他批量的把缓冲区的数据写入磁盘。和任何前台用户的进程几乎没有什么关系,也不受他们的控制。至于DBWR会不会触发LGWRCKPT进程,我们将在下面几节里讨论。

  DBWR工作的主要条件如下
  DBWR 超时
  系统中没有多的空缓冲区用来存放数据
  CKPT 进程触发DBWR
  
  cLGWR
  将重做日志缓冲区的数据写入重做日志文件,LGWR是一个必须和前台用户进程通信的进程。当数据被修改的时候,系统会产生一个重做日志并记录在重做日志缓冲区内。这个重做日志可以类似的认为是以下的一个结构
:
  
SCN=000000001000
  数据块
ID
  对象
ID=0801
  数据行
=02
  修改后的数据
=0011
  提交的时候,LGWR必须将被修改的数据的重做日志缓冲区内数据写入日志数据文件,然后再通知前台进程提交成功,并由前台进程通知用户。从这点可以看出LGWR承担了维护系统数据完整性的任务。

  LGWR 工作的主要条件如下
  用户提交
  有1/3 重做日志缓冲区未被写入磁盘
  有大于1M 重做日志缓冲区未被写入磁盘
  超时
  DBWR需要写入的数据的SCN号大于LGWR 记录的SCN号,DBWR 触发LGWR写入
  
  dSMON
  工作主要包含

  清除临时空间
  在系统启动时,完成系统实例恢复
  聚结空闲空间
  从不可用的文件中恢复事务的活动
  OPS中失败节点的实例恢复
  清除OBJ$
  缩减回滚段
  使回滚段脱机
  
  ePMON
  主要用于清除失效的用户进程,释放用户进程所用的资源。如PMON将回滚未提交的工作,释放锁,释放分配给失败进程的SGA资源。

  
  fCKPT
  同步数据文件,日志文件和控制文件,由于DBWR/LGWR的工作原理,造成了数据文件,日志文件,控制文件的不一至,这就需要CKPT进程来同步。CKPT会更新数据文件/控制文件的头信息。

  CKPT工作的主要条件如下
  在日志切换的时候
  数据库用immediate ,transaction , normal 选项shutdown 数据库的时候
  根据初始话文件LOG_CHECKPOINT_INTERVALLOG_CHECKPOINT_TIMEOUTFAST_START_IO_TARGET 的设置的数值来确定
  用户触发
  以下进程的启动需要手工配置
  
  gARCH
  当数据库以归档方式运行的时候,Oracle会启动ARCH进程,当重做日志文件被写满时,日志文件进行切换,旧的重做日志文件就被ARCH进程复制到一个/多个特定的目录/远程机器。这些被复制的重做日志文件被叫做归档日志文件。

  
  hRECO
  负责解决分布事物中的故障。Oracle可以连接远程的多个数据库,当由于网络问题,有些事物处于悬而未决的状态。RECO进程试图建立与远程
服务器的通信,当故障消除后,RECO进程自动解决所有悬而未决的会话。
  i、服务进程Server Process
  服务进程的分类

  专用服务进程(Dedicated Server Process)
  一个服务进程对应一个用户进程

  共享服务进程(MultiTreaded Server Process)
  一个服务进程对应多个用户进程,轮流为用户进程服务。

  PGA & UGA
  
PGA = Process Global Area
  
UGA = User Global Area
  他保存了用户的变量、权限、堆栈、排序空间等用户信息,对于专用服务器进程,UGAPGA中分配。对于多线程进程,UGALarge pool中分配。

  
  j、用户进程User Process
  在客户端,将用户的SQL 语句传递给服务进程

  
  5、一个贯穿数据库全局的概念----系统改变号SCN(System Change Number)
  系统改变号,一个由系统内部维护的序列号。当系统需要更新的时候自动增加,他是系统中维持数据的一致性和顺序恢复的重要标志。

  
  a. 查询语句不会使SCN增加,就算是同时发生的更新,数据库内部对应的SCN也是不同的。这样一来就保证了数据恢复时候的顺序。
  
  b. 维持数据的一致性,当一

二、ORACLE 数据库
  
  ORACLE数据库的组成——物理操作系统文件的集合。主要包括以下几种。
  
  1、控制文件(参数文件init.ora记录了控制文件的位置)
  控制文件包括如下主要信息
  数据库的名字,检查点信息,数据库创建的时间戳
  所有的数据文件,联机日志文件,归档日志文件信息
  备份信息等
  有了这些信息,Oracle就知道那些文件是数据文件,现在的重做日志文件是哪些,这些都是系统启动和运行的基本条件,所以他是Oracle运行的根本。如果没有控制文件系统是不可能启动的。控制文件是非常重要的,一般采用多个镜相复制来保护控制文件,或采用RAID来保护控制文件。控制文件的丢失,将使数据库的恢复变的很复杂。
  控制文件信息可以从V$Controlfile中查询获得
  
  2、数据文件(数据文件的详细信息记载在控制文件中)
  可以通过如下方式查看数据文件
  SQL> select name from v$datafile;
  NAME
  ---------------------------------------------
  /u05/dbf/PROD/system_01.dbf
  /u06/dbf/PROD/temp_01.dbf
  /u04/dbf/PROD/users_01.dbf
  /u09/dbf/PROD/rbs_01.dbf
  /u06/dbf/PROD/applsys_indx_01.dbf
  /u05/dbf/PROD/applsys_data_01.dbf
  从以上可以看出,数据文件大致可以分为以下几类:
  
  i. 系统数据文件(system_01.dbf)
  存放系统表和数据字典,一般不放用户的数据,但是用户脚本,如过程,函数,包等却是保存在数据字典中的。
  名词解释:数据字典 数据字典是一些系统表或视图,他存放系统的信息,他包括数据库版本,数据文件信息,表与索引等段信息,系统的运行状态等各种和系统有关的信息和用户脚本信息。数据库管理员可以通过对数据字典的查询,就可以了解到Oracle的运行状态。
  
  ii. 回滚段文件(rbs_01.dbf)
  如果数据库进行对数据的修改,那么就必须使用回滚段,回滚段是用来临时存放修改前的数据(Before Image)。回滚段通常都放在一个单独的表空间上(回滚表空间),避免表空间碎片化,这个表空间包含的数据文件就是回滚数据文件。
  
  iii. 临时数据文件(temp_01.dbf)
  主要存放用户的排序等临时数据,与回滚段相似,临时段也容易引起表空间碎片化,而且没有办法在一个永久表空间上开辟临时段,所以就必须有一个临时表空间,它所包含的数据文件就是临时数据文件,主要用于不能在内存上进行的排序操作。我们必须为用户指定一个临时表空间。
  
  iv. 用户数据文件(/applsys_data_01.dbf ,applsys_indx_01.dbf)
  存放用户数据,这里列举了两类常见的用户型数据,一般数据和索引数据,一般来说,如果条件许可的话,可以考虑放在不同的磁盘上。
  
  3、重做日志文件(联机重做日志)
  用户对数据库进行的任何操作都会记录在重做日志文件。在了解重做日志之前必须了解重做日志的两个概念,重做日志组和重做日志组成员(Member),一个数据库中至少要有两个日志组文件,一组写完后再写另一组,即轮流写。每个日志组中至少有一个日志成员,一个日志组中的多个日志成员是镜相关系,有利于日志文件的保护,因为日志文件的损坏,特别是当前联机日志的损坏,对数据库的影响是巨大的。
  联机日志组的交换过程叫做切换,需要特别注意的是,日志切换在一个优化效果不好的数据库中会引起临时的挂起。挂起大致有两种情况:
  在归档情况下,需要归档的日志来不及归档,而联机日志又需要被重新利用
  检查点事件还没有完成(日志切换引起检查点),而联机日志需要被重新利用
  解决这种问题的常用手段是:
  
  i.增加日志组
  
  ii.增大日志文件成员大小
  通过v$log可以查看日志组,v$logfile可以查看具体的成员文件。
  
  4、归档日志文件
  Oracle可以运行在两种模式之中,归档模式和不归档模式。如果不用归档模式,当然,你就不会有归档日志,但是,你的系统将不会是一个实用系统,特别是不能用于生产系统,因为你可能会丢失数据。但是在归档模式中,为了保存用户的所有修改,在重做日志文件切换后和被覆盖之间系统将他们另外保存成一组连续的文件系列,该文件系列就是归档日志文件。
  有人或许会说,归档日志文件占领我大量的硬盘空间,其实,具体想一想,你是愿意浪费一点磁盘空间来保护你的数据,还是愿意丢失你的数据呢?显而义见,我们需要保证我们的数据的安全性。其实,归档并不是一直占领你的磁盘空间,你可以把她备份到磁带上,或则删除上一次完整备份前的所有日志文件。
  
  5、初始化参数文件
  initSID.orainit.ora文件,因为版本的不一样,其位置也可能会不一样。在8i中,通常位于$ORACLE_HOME/admin//Pfile下,初始化文件记载了许多数据库的启动参数,如内存,控制文件,进程数等,在数据库启动的时候加载(Nomount时加载),初始化文件记录了很多重要参数,对数据库的性能影响很大,如果不是很了解,不要轻易乱改写,否则会引起数据库性能下降。

主要有遗留的init.rac参数文件和spfile

相关文章:

  • 富文本 文字图片点击,(TextView)
  • 好书分享 ——《深度工作》
  • Linux grep命令
  • oracle with
  • 图片选择器ImageEditContainer
  • ETL基本概念
  • python学习笔记5-python的函数
  • oracle物化视图(materialized view)
  • 绝世好题bzoj4300
  • 在存储过程中拥有role的权限(Authid Current_User)
  • 渐变维度(Slowly Changing Dimension)及其处理方法
  • 获取url值
  • 1.Angular框架-angular介绍与基本使用,MVC模式介绍
  • Oracle性能调优-优化排序操作
  • 鲜为人知的软件项目管理原则
  • @angular/forms 源码解析之双向绑定
  • “寒冬”下的金三银四跳槽季来了,帮你客观分析一下局面
  • 【108天】Java——《Head First Java》笔记(第1-4章)
  • Angular4 模板式表单用法以及验证
  • CSS进阶篇--用CSS开启硬件加速来提高网站性能
  • download使用浅析
  • ECMAScript6(0):ES6简明参考手册
  • IIS 10 PHP CGI 设置 PHP_INI_SCAN_DIR
  • Java 11 发布计划来了,已确定 3个 新特性!!
  • java8-模拟hadoop
  • jquery cookie
  • js对象的深浅拷贝
  • miaov-React 最佳入门
  • Sass Day-01
  • Solarized Scheme
  • vue的全局变量和全局拦截请求器
  • Vue小说阅读器(仿追书神器)
  • 得到一个数组中任意X个元素的所有组合 即C(n,m)
  • 开源地图数据可视化库——mapnik
  • 设计模式(12)迭代器模式(讲解+应用)
  • 算法系列——算法入门之递归分而治之思想的实现
  • 微信小程序开发问题汇总
  • 学习笔记TF060:图像语音结合,看图说话
  • 【运维趟坑回忆录】vpc迁移 - 吃螃蟹之路
  • 如何通过报表单元格右键控制报表跳转到不同链接地址 ...
  • 直播平台建设千万不要忘记流媒体服务器的存在 ...
  • $HTTP_POST_VARS['']和$_POST['']的区别
  • (1/2)敏捷实践指南 Agile Practice Guide ([美] Project Management institute 著)
  • (10)ATF MMU转换表
  • (ros//EnvironmentVariables)ros环境变量
  • (附源码)ssm基于jsp的在线点餐系统 毕业设计 111016
  • (三)c52学习之旅-点亮LED灯
  • (十五)Flask覆写wsgi_app函数实现自定义中间件
  • (微服务实战)预付卡平台支付交易系统卡充值业务流程设计
  • (最优化理论与方法)第二章最优化所需基础知识-第三节:重要凸集举例
  • .net 7 上传文件踩坑
  • .NET CF命令行调试器MDbg入门(一)
  • .Net 中Partitioner static与dynamic的性能对比
  • .Net多线程总结
  • .net利用SQLBulkCopy进行数据库之间的大批量数据传递