前言
这次,我们将在Linux下来动手完成Oracle数据库的安装与使用。
Oracle本身是可以免费下载的包括 它的企业版以及被它收购的Weblogic和Sun中的几乎任何东西你都可以拿来下载和使用,不像IBM和Tibco一些其它厂商,只有“试用版”给你下载,Oracle的东西没有时间限制,你拿来做练习,搭实验环境都是没有任何的问题的。
但是,如果你出了问题,需要用到Oracle的补丁或者是Oracle的技术支持,这就开始收费。
Oracle就是这种“卖Service”的模式。
还有就是你安装了Oracle后,你的应用是给另一家企业用的或者是带有商业用途,那对不起Oracle也会问你来收费。
在linux下安装oracle是一件令人生畏的事情,其复杂程度远远超过安装linux操作系统本身。如果能够进行成功的安装oracle,那么同时也就顺便掌握了linux一些技术。
三、Oracle安装后的一些设置
3.1 设置Oracle的服务开机自动启动
编辑 /etc/rc.local/文件
以下是dbstart.sh文件的内容
存盘后每次你重启Linux,Oracle就会随着你的Linux的开机而自动运行起来了(还有更专业的设置,将在以后的教程中传授,对于初学者想自己搭个环境的选用这个,嘿嘿)。
3.2 设置Oracle的processes, session, Maximum Open Cursor
其们在使用sys用户连上Oracle后可以使用这条命令来显示这三个兄弟
- show parameter processes;
一般安装好后,这个processes默认为150,网上有很多人说如果碰到用户的session不够就去用alter命令改这个session number,其实是不对的。
session与processes是绑定的,用下面的公式:
sessions=1.1*processes + 5
所以你只有改这个processes,session才会自动调整,我们可以使用下面这条命令去改变系统中的processes
- alter system set processes=500 scope = spfile;
这个processes不是乱设的,是要和你系统的内核设置去绑定的。
四、Oracle的性能调优
- Client Configuration
- User Role Privilege
- SGA
- Table Space
- Import
- Oracle And OS Kernel
- Oracle Under 32 bits OS
- SQL Plan
- Table Analyze
- Partition Table
- Performance Monitor
我们的Oracle性能调优主要用围绕上述几个章节来做介绍,我们不介绍太高深的莫明奇妙的理论,在这边我们对这几个方面做一个统用的解释和实际应用场景,如果是新手,你在看过这篇教程后应该知道一个oracle的性能主要从几个方面(Common)去着手,对一个熟手来说上述每个小节的具体内容都是可以在Oracle的DBA手册中找到更详细的内容。
4.1 客户端的配置:TNS(Client Configuration: TNS)
配置主机名:
Oracle的连接服务是基于主机名的,我们需要设置装Oracle这台主机的唯一主机名,这样客户端才能通过TNS来连上Oracle的服务
请更改Oracle所在服务器上的 /etc/hosts文件
- # Do not remove the following line, or various programs
- # that require network functionality will fail.
- 192.168.1.3 myoracleserver
- 127.0.0.1 localhost.localdomain localhost
这边的192.168.1.3就是我们的主机ip,后面的myoracleserver就是主机名。
配置客户端连接
![](https://img-my.csdn.net/uploads/201211/23/1353646291_7836.jpg)
![](https://img-my.csdn.net/uploads/201211/23/1353646346_8151.jpg)
更改客户端的字体使其可以支持中文的正常显示
编辑注册表
把这个NLS_LANG改成上图中所示,这样你的Oracle的客户端上可以直接通过客户端工具或者是第三方客户端工具进行中文的正常录入了而不是乱码了。
4.2 在Oracle中建立帐号与分配权限
使用system帐号登录
创建用户之前先要创建表空间
一般我们创建一个表空间和一个临时表空间
然后我们就可以开始创建用户了
分配角色
对于一个j2ee的应用连接Oracle来说,这个连接用户的角色只需要具有上述两个权限就够用了,有些人喜欢给这个用户DBA权限是太绝对了,当然这样给角色使用起来方便,什么权限都有了,不需要我在开发时再进行细化的设置了。
可是,你有没有想到过,一旦你的应用被人sql injection后,而你的应用上连接着oracle的用户是dba权限,那么你连整个数据库是不是都会被泄密啊?
分配系统角色
设置Oracle连接用户最大可登录次数
一个Oracle内的用户默认可以让你重复登录10次,10次的限制一到,这个用户就会被锁住。
可以用下列语句查看一个Oracle用户重复几次后会被锁住的设置参数
- SELECT * FROM dba_profiles s WHERE s.profile='DEFAULT' AND resource_name='FAILED_LOGIN_ATTEMPTS';
当然这样做是为了安全考虑。
可是,在我们的开发环境中,有时往往因为一个循环,一个登录器,一个线程写错而导致Oracle连接用户重复需要连接Oracle 数次,因此经常开发人员会向DBA抱怨说 “我的用户又被锁住了”。
因此,在开发环境我建议你把这个“重复连接次数”去掉,设成下面这样
- ALTER PROFILE DEFAULT LIMIT FAILED_LOGIN_ATTEMPTS UNLIMITED
4.3 Oracle SGA
- SGA:System Global Area是Oracle Instance的基本组成部分,在实例启动时分配;系统全局域SGA主要由三部分构成:共享池、数据缓冲区、日志缓冲区。
- 共享池:Shared Pool用于缓存最近被执行的SQL语句和最近被使用的数据定义,主要包括:Library cache(共享SQL区)和Data dictionary cache(数据字典缓冲区)。 共享SQL区是存放用户SQL命令的区域,数据字典缓冲区存放数据库运行的动态信息。
- 缓冲区高速缓存:Database Buffer Cache用于缓存从数据文件中检索出来的数据块,可以大大提高查询和更新数据的性能。
- 大型池:Large Pool是SGA中一个可选的内存区域,它只用于shared server环境。
- Java池:Java Pool为Java命令的语法分析提供服务。
- PGA:Process Global Area是为每个连接到Oracle database的用户进程保留的内存。
关于SGA这块的调整,网上有太多优秀的文章。
一般可以通过修改$ORACLE_HOME/dbs目录下的init.ora文件来自行调整,但是。。。。。。
如果你要调整一个init.ora文件,请使用下面的步骤可确保你的修改不会造成Oracle启动不了
第一步:修改前请先作一份init.ora文件的安全拷贝
在Linux下使用下面这条命令
- strings spfilektdb.ora > init.ora.bak
一个init*.ora对应一个spfile*.ora
第二步:对于这个init.ora.bak文件内的SGA值进行调整
第三步:让Oracle直接用这个被修改后的init.ora.bak来启动数据库实例,请使用sys用户以命令行的方式登录oracle
- sqlplus sys/password@databaseSID as sysdba
登录成功后运行下面两条命令
- shutdown immediate
- startup pfile='/opt/oracle/product/10/dbs/init.ora.bak‘
如果Oracle能够正常启动和支持客户端的连接说明我们的改动没有损坏到Oracle已安装的实例
第四步:让更改生效使得Oracle每次启动都使用我们修改过后的SGA的值
- create spfile from pfile='/opt/oracle/product/10/dbs/init.ora.bak';
- startup force
4.4 Oracle表空间管理
Oracle的表空间文件都放在$ORACLE_HOME/oradata如/opt/oracle/product/10/oradata这样的目录中的
Oracle的表空间支持”热插拨“
即在Oracle运行时发觉表空间不够时可以直接打开Oracle的管理界面来动态给它划一块硬盘空间,或者甚至你又装了一块硬盘进服务后,Oracle可以把表空间在运行时扩展到新插入的磁盘中。
表空间管理
ORACLE的表空间划分将影响ORACLE的数据访问速度。
对于表空间来说,最重要的是如何把要连续访问的段放在一起,但是由于oracle 不能提供基于段的统计信息,所以对数据的物理模型设计和访问模式的详细了解对表空间的规划有非常大的好处。然后基于这些原则,我们就可以制定我们的表空间划分原则了:
- 仅在表空间级指定INITIAL、NEXT参数,在创建数据段时不要指定这些参数;
- 对每个表空间上的段使用相同的区片尺寸;段参数INITIAL=NEXT,PCTINCREASE=0;可以通过使用Create Tablespace 的‘ MINIMUM EXTENT’ 子句来确保分配的区片是此参数的倍数;
- 区片的大小根据段大小来确定,原则是均衡顺序扫描的效率和空间的利用率,同时确保段的区片数目控制在1024之下;根据此原则,在进行相应测试之后,确定以下区片选取规则:
段大小 区片大小 128M 128K 128M-4G 4M 4G及以上 128M - Oracle9i引入了本地管理表空间,它在管理和性能上都优于传统的字典管理表空间,它已融合了规则1、2、3 ;要使用此特性,在CREATE TABLESPACE语句中指定EXTENT MANAGEMENT LOCAL子句;
- 段的区片数目上限应在4096之下,DML操作在此区片数目范围内不会有明显的性能差异;但某些DDL操作的速度则与区片的数目关系较大;因此合理的区片数目应保持在1024之下;对于持续不断扩展的段,应监控区片数目,在必要时移至其它表空间;
- 对于特别大的数据段应控制在4G-128G(Oracle7为5G-160G)之间,它们应存放到单独的表空间上,同时对于这些特大段应考虑使用分区拉提高性能;
- 用户的临时表空间应使用TEMPORARY类型;
- 当系统的事务规模比较均衡时可以对回滚段使用OPTIMAL参数,否则应避免制定OPTIMAL参数,而定期监控回滚段的大小,并在必要时重建;
- 临时段和回滚段绝对不要将用户数据存放到SYSTEM表空间,它是专为永远不会Drop和Truncate的系统数据对象而设计的;
- 创建表空间时指定数据文件的大小应=区片整数倍+1数据块,对于Local Managed Tablespace则为区片整数倍+64K;
- 当表空间使用统一的区片大小时,不要对其进行空间整理,重整的结果不仅耗费精力而且可能会使性能变差;对于未使用统一的区片尺寸的表空间应通过Export/Import重整;
- 提供了Alter Table …Move [Tablespace…]命令可用于快速重整表,Alter Index …Rebuild…[Tablespace…] 命令可用于快速重建索引;
4.5 Import (导入)
当传统的导入导出遇到了海量数据时~
我在以前一个工程碰到过一个真实的案例,48-50张左右的表,每张表最大数据量为1200万,最小的在280-300万左右的数据,占用硬盘空间在14-16GB左右的一个.dmp包。不定期会进行导入导出操作。
于是我们的数据库负责人员就使用传统的imp/exp命令了。
每一次imp都需要耗费达4-6个小时,有时一旦出错。。。完蛋了,这个效率太低,大家不要看1200万这个数量,大家会说:哟,都是几百万的数据,可是这点数据其实还不算是真正的大数据量,imp一次要4-6小时,这是绝对不合理的。
如何让你的imp飞起来
传统的imp命令在导入时,如果只是仅处理数据,千万条数据对Oracle的处理来说根本就是”毛毛雨“啦,关键是在它导入了数据后,而要对每个表重新做一次索引。
一边导一边索引,一边一条条commit,就好比你用一个循环来insert 1万条数据和你改用statemenet.addBatch(query);的效率的对比一样,一定是后者更快更高效。
因此,在碰到这种情况下我们建议对imp导入命令做下面的折分:
- 分段式提交
- 设置缓冲
- 先导数据再导索引
这样,我们原来的imp命令就变成下面这样的样子了:
- imp user2/pwd fromuser=user1 touser=user2 file=file commit=y feedback=10000 buffer=10240000 ignore=y rows=y indexes=n
- imp user2/pwd fromuser=user1 touser=user2 file=file commit=y feedback=10000 buffer=10240000 ignore=y rows=n indexes=y
看到没有,先导数据rows=y indexes=n,再导索引rows=n indexes=y
这两条命令是先后发起的,在只导数据时对于上述的14gb左右的一个.dmp包在同样软硬件环境中只用了15-20分钟,后一条建索引语句只用了25-27分钟。
这其中,提高了几倍?大家想想。
4.6 Oracle与Linux系统的几个主要内核参数关系
limits.conf文件
编辑这个 /etc/security/limits.conf
- * soft nofile 1024
- * hard nofile 1024
一般这个文件的默认值为1024
它代表Linux系统下最大打开文件数,如java里面的jdbc connection操作,new File操作都是一个文件打开操作,1024这个值是很少的。
所以我们把它改成
- * soft nofile 300000
- * hard nofile 300000
继续修改
- oracle soft memlock 1048576
- oracle hard memlock 1048576
这个值如果有的话直接改后面的数字,如果没有的话需要把这两行增加入limits.conf文件中,其中:
memlock’s value=Oracle share_pool_size (gb)*1024*1024
所以你的Oracle中的SGA里的share_pool_size的大小是受到这个值的限制的。
改完后重启Linux系统,然后我们可以使用下面的命令来看我们修改的效果。
- ulimit –a
这个命令可以查看Linux系统当前的最大打开文件数。
使用Oracle用户登录
- su – oracle
然后键入
- ulimit -l
就可以看到oracle soft memlock的相关修改效果了。
关于kernel.*的参数的配置
- kernel.shmall = 2097152
- kernel.shmmax = 2147483648
- kernel.shmmni = 4096
- kernel.sem = 250 32000 100 128
- #SEMMSL SEMMNS SEMOPM SEMMNI
其中最后一行带”#“是我加的,代表这几个数值的”含义“,那么光有含义,没有解释?下面给出解释
SEMMSL=max processes+10
SEMMNS=SEMMSL*SEMMNI
看到没有。。。。。。所以说Oracle中这个processes不是乱设的,是要和你系统的内核设置去绑定的。
4.7Oracle在32位操作系统下的瓶劲与如何突破
我去年写过篇博文,那篇博文是用于记录如何在实际的一个项目中在32位Linux操作系统下让Oracle的SGA突破2GB内存这个限制,详细可见:oracle在32位的Linux环境下SGA如何突破2GB内存限制的最终解决方案
在这边,我再做一下补充。
一些客户,这主要是客户关系,如果换成我我一定要买支持64位操作系统的服务器。
一些使用32位操作系统的客户安装Oracle,大家知道Oracle自从8.0后开始全面转成Java,因此它也受到JAVA虚拟机在32位操作系统下最多只能使用到2GB物理内存这个限制。
因此,当你的机器物理内存有32GB时,但因为你用了32位的操作系统,因此你的Oracle在创建Database时即customer(定义)这个数据库内存分匹时你的SGA是超不过2048MB的。
SGA中有一个很重要的指标即:shared_pool_size,这个值的大小会直接影响性能,关于shared_pool_size有很多更深入的理论性的探讨,这边告诉初学者或者新手,这个值相当于”游戏推荐配置“,不满足,游戏运行暴卡,超过这个值,游戏运行流畅。
但是,我现在有台服务器,物理内存32GB,用的是32位的Linux,我Oracle的SGA想要突破这个2GB大小的限制,又不能重装(客户环境不是你说要重装就要重装的)怎么办?只有想办法:
- 让操作系统支持PAE模式(目前只有Linux AS3及以上和win 2003 advance server+sp2补丁及windows 2008)可以支持真正的PAE模式
- 修改/etc/sysctl.conf文件中的值(前面提到过了)
- 让Linux操作系统中的打开文件数为最大(前面也提到过了)
- 更改你的Oracle的SGA
![](https://img-my.csdn.net/uploads/201211/23/1353654941_8015.jpg)
![](https://img-my.csdn.net/uploads/201211/23/1353655080_4126.jpg)
4.8 使用SQL执行计划帮助你定位瓶劲
![](https://img-my.csdn.net/uploads/201211/23/1353655260_7922.jpg)
在执行计划中使用hits来改变和调整SQL执行的性能
- 使用的优化器的类型
- 基于代价的优化器的优化目标,是all_rows还是first_rows
- 表的访问路径,是全表扫描,还是索引扫描,还是直接利用rowid
- 表之间的连接类型
- 表之间的连接顺序
- 语句的并行程度
如何使用Hints:
Hints只应用在它们所在sql语句块(statement block,由select、update、delete关键字标识)上,对其它SQL语句或语句的其它部分没有影响。如:对于使用union操作的2个 sql语句,如果只在一个sql语句上有Hints,则该Hints不会影响另一个sql语句。
我们可以使用注释(comment)来为一个语句添加Hints,一个语句块只能有一个注释,而且注释只能放在SELECT, UPDATE, or DELETE关键字的后面
使用Oracle Hints的语法:
- {DELETE|INSERT|SELECT|UPDATE} /*+ hint [text] [hint[text]]... */
- or
- {DELETE|INSERT|SELECT|UPDATE} --+ hint [text] [hint[text]]...
- DELETE、INSERT、SELECT和UPDATE是标识一个语句块开始的关键字,包含提示的注释只能出现在这些关键字的后面,否则提示无效。
- “+”号表示该注释是一个Hints,该加号必须立即跟在”/*”的后面,中间不能有空格。
- hint是下面介绍的具体提示之一,如果包含多个提示,则每个提示之间需要用一个或多个空格隔开。
- text 是其它说明hint的注释性文本
- /*+ALL_ROWS*/
- /*+FIRST_ROWS*/
- /*+CHOOSE*/
- /*+RULE*/
- /*+FULL(TABLE)*/
- /*+ROWID(TABLE)*/
- /*+USE_HASH(BSEMPMS,BSDPTMS)*/
4.9 Table Analyze-Oracle的表分析
![](https://img-my.csdn.net/uploads/201211/23/1353656040_3105.jpg)
- 基于规则的优化方式:Rule-Based Optimization(RBO)
- 基于成本或者统计信息的优化方式(Cost-Based Optimization:CBO)
RBO方式:优化器在分析SQL语句时,所遵循的是Oracle内部预定的一些规则。比如我们常见的,当一个where子句中的一列有索引时去走索引。
- ANALYZE TABLE ktdb.T_CD_CODE COMPUTE STATISTICS;
- ANALYZE TABLE ktdb.T_CD_CODE COMPUTE STATISTICS for all indexed columns;
比如说,你的数据库每天有几十万条数据进进出出,过了1周,数据库里原先一些查询已经不走Oracle默认的优化引擎了,本来是该走索引的,结果你用SQL分析器看出来它走的是full scan,这时就要做表分析了,一旦表分析做完后,你的数据库又会按照你原有的计划去走最优的路线了,这无疑中会提高你的数据库访问性能。
- spool 'd:\analyzetable.txt‘
- select * from user_tables;
- spool off
- spool 'd:\analyzeindex.txt‘
- select * from user_indexes ;
- spool off
- export ORACLE_BASE=/opt/oracle
- export ORACLE_HOME=$ORACLE_BASE/product/10
- export ORACLE_SID=ktdb
- $ORACLE_HOME/bin/sqlplus "sys/sys@ktdb as sysdba" <<eof
- @/home/oracle/analyzetable.txt;
- exit
- eof
4.10 Partition Table(分区表)
![](https://img-my.csdn.net/uploads/201211/23/1353657247_6149.jpg)
分区功能能够将表、索引或索引组织表进一步细分为段,这些数据库对象的段叫做分区。每个分区有自己的名称,还可以选择自己的存储特性。从数据库管理员的角度来看,一个分区后的对象具有多个段,这些段既可进行集体管理,也可单独管理,这就使数据库管理员在管理分区后的对象时有相当大的灵活性。但是,从应用程序的角度来看,分区后的表与非分区表完全相同,使用 SQL DML 命令访问分区后的表时,无需任何修改。
什么时候使用分区表:
- 表的大小超过2GB
- 表中包含历史数据,新的数据被增加都新的分区中。
- 改善查询性能:对分区对象的查询可以仅搜索自己关心的分区,提高检索速度。
- 增强可用性:如果表的某个分区出现故障,表在其他分区的数据仍然可用;
- 维护方便:如果表的某个分区出现故障,需要修复数据,只修复该分区即可;
- 均衡I/O:可以把不同的分区映射到磁盘以平衡I/O,改善整个系统性能。
分区表相关:已经存在的表没有方法可以直接转化为分区表。不过 Oracle 提供了在线重定义表的功能。
Range Partition(根据范围来分区)
- PARTITION BY RANGE (CUSTOMER_ID)
- (
- PARTITION CUS_PART1 VALUES LESS THAN (100000) TABLESPACE
- CUS_TS01, PARTITION CUS_PART2 VALUES LESS THAN (200000)
- TABLESPACE CUS_TS02
- )
Hash partition(HASH分区)这个最傻瓜了最好用了,不需要指定分区的条件的
- CREATE TABLE emp
- (
- empno NUMBER (4),ename VARCHAR2 (30),sal NUMBER
- )PARTITION BY HASH (empno) PARTITIONS 8
- STORE IN (emp1,emp2,emp3,emp4,emp5,emp6,emp7,emp8);
- create table dinya_test
- (
- transaction_id number primary key,item_id number(8) not null,transaction_date date
- ) partition by range(transaction_date)subpartition by hash(transaction_id) subpartitions
- 3 store in (dinya_space01,dinya_space02,dinya_space03)
- (
- partition part_01 values less than(to_date(‘2006-01-01’,’yyyy-mm-dd’)),
- partition part_02 values less than(to_date(‘2010-01-01’,’yyyy-mm-dd’)),
- partition part_03 values less than(maxvalue)
- );
在线重定义分区表
- 不动原表结结,建立和原表结构一样的表,并进行分区,此时新表是拥有分区结构的,且数据为空(空表)
- 利用在线重定义把原表的数据整个copy到新的分区表中去
- 删去原表
- EXEC DBMS_REDEFINITION.CAN_REDEF_TABLE('schema名', '你将要被切换的表名', DBMS_REDEFINITION.CONS_USE_PK);
- EXEC DBMS_REDEFINITION.START_REDEF_TABLE('schema名','你将要被切换的表名', '拥分区结构的新表');
- EXEC DBMS_REDEFINITION.sync_interim_table('schema名', '你将要被切换的表名', '拥分区结构的新表');
- EXEC DBMS_REDEFINITION.FINISH_REDEF_TABLE('schema名', '你将要被切换的表名', '拥分区结构的新表');
- exec DBMS_REDEFINITION.ABORT_REDEF_TABLE('schema名','你将要被切换的表名','拥分区结构的新表');
4.11 Oracle性能监控
![](https://img-my.csdn.net/uploads/201211/23/1353659120_8401.jpg)
![](https://img-my.csdn.net/uploads/201211/23/1353659323_6847.jpg)