标题:优化Oracle数据 获取角斗士般的性能
只看楼主
xupeng
Rank: 1
等 级:新手上路
帖 子:4049
专家分:0
注 册:2006-2-12
 问题点数:0 回复次数:8 
优化Oracle数据 获取角斗士般的性能

"Damn the torpedoes! Full speed ahead." - Admiral David Farragut
Linux Journal 发表了一篇优化 Oracle 数据库的文章,感觉十分的有用。简要介绍其摘要和大家共同分享 Linux 在企业级数据库上应用。

原作者:Bert Scalzo

目前,HP、Compaq、Dell、IBM 以及 Oracle 都在加快速度拥抱Linux这个开放源码的操作系统。根据 eWeek 的统计,2001年Linux服务器的销售量大约占据了Compaq的30%,Dell 的 13.7%,IBM的13.5%。而且IBM2001年度在Linux上的投入有10个亿。Intel最新的 64 位的Itanium CPU只支持4种操作系统:Windows、 Linux、 AIX 和 HP-UX。我们也不要忘记Oracle的9i数据库Linux版本要比Windows版本早1个月。

尽管 Linux 能跑在从 IBM S/390 到 Sun SPARC 结构的服务器,但是对于大多数人来说,Intel 还是 Linux 跑得最多的平台。本文就是要讲述通过简单的性能调正,使 Oracle 的性能提升 1000% 的办法。

本文采用的测试环境是一台 Compaq 4 CPU,512 MB ,8 部 7200 rpm SCSI 磁盘的服务器,然后在几乎同样的单 CPU Athlon 系统上作了测试,内存一样,但是只有一部 7200 rpm 的 Ultra 100 IDE 磁盘。尽管最后的结果和得到的百分比不一样,但是观测得到的性能提升是一致的。

为了简单起见,我们的测试环境采用 TPC 基准测试,它广泛地用于 OLTP 的负荷测试。Quest 公司有一个叫做 Benchmark Factory 的工具,使测试工作变得就像发送电子邮件一样简单。

下面我们将分别通过 DB 的调整和 OS 的调整来看测试的结果。

DB1 的初始化参数一般不常见,为了说明问题,我们使用这些参数并作为基准。

DB1: Initial Database

Database Block Size 2K

SGA Buffer Cache 64M

SGA Shared Pool 64M

SGA Redo Cache 4M

Redo Log Files 4M

Tablespaces Dictionary

TPC Results Load Time (Seconds) 49.41

Transactions / Second 8.152

显然需要加大 SGA 大小,我们来看 DB2 的结果:

DB2: Cache & Pool

Database Block Size 2K

SGA Buffer Cache 128M

SGA Shared Pool 128M

SGA Redo Cache 4M

Redo Log Files 4M

Tablespaces Dictionary

TPC Results Load Time (Seconds) 48.57

Transactions / Second 9.147

增大 SGA 已经缓冲看来对于性能的提升并不显著,加载时间只提升了 1.73%。下面我们增加 SGA 重做日志的大小:

DB3: Log Buffer

Database Block Size 2K

SGA Buffer Cache 128M

SGA Shared Pool 128M

SGA Redo Cache 16M

Redo Log Files 16M

Tablespaces Dictionary

TPC Results Load Time (Seconds) 41.39

Transactions / Second 10.088

我们可以看到加载时间提升了 17.35%,TPS 也提升了 9.33%。因为加载和同时插入,更新,删除需要比 8M 大的空间,但是看起来增加内存性能并没有显著提升,我们加大块大小:

DB4: 4K Block

Database Block Size 4K

SGA Buffer Cache 128M

SGA Shared Pool 128M

SGA Redo Cache 16M

Redo Log Files 16M

Tablespaces Dictionary

TPC Results Load Time (Seconds) 17.35

Transactions / Second 10.179

我们看到加载时间提升了 138%!而对 TPS 值没有很大的影响。下面一个简单的念头是表空间的管理从目录切换为本地:

DB5: Local Tablespaces

Database Block Size 4K

SGA Buffer Cache 128M

SGA Shared Pool 128M

SGA Redo Cache 16M

Redo Log Files 16M

Tablespaces Local

TPC Results Load Time (Seconds) 15.07

Transactions / Second 10.425

下面我们把数据库块加大到 8K 来看结果:

DB6: 8K Block

Database Block Size 8K

SGA Buffer Cache 128M

SGA Shared Pool 128M

SGA Redo Cache 16M

Redo Log Files 16M

Tablespaces Local

TPC Results Load Time (Seconds) 11.42

Transactions / Second 10.683

看来结果并不坏,我们没有理由继续增加块大小了,我们还没有根据 CPU 个数调整相应的参数,这次我们设置 I/O 的进程数来继续调整:

DB7: I/O Slaves

  Database Block Size 8K

  SGA Buffer Cache 128M

  SGA Shared Pool 128M

  SGA Redo Cache 16M

  Redo Log Files 16M

  Tablespaces Local

  dbwr_io_slaves 4

  lgwr_io_slaves (derived) 4

  TPC Results

  Load Time (Seconds) 10.48

  Transactions / Second 10.717

我们的测试是基于 Red Hat 6.2 进行的,内核版本为 2.2.14-5smp。对于 Linux 的内核而言,有将近几百个参数可以调整,包括对 CPU 类型,SMP 支持,APIC 支持,DMA 支持,IDE DMA 缺省参数的使用以磁盘限额支持。根据 Oracle 的文档,我们要做的主要调整是共享内存和信号量的大小,SHMMAX 最少配置 0x13000000,SEMMNI, SEMMSL 和 SEMOPN 分别至少设置 100, 512, 100。这些参数的设置可以通过下面的命令实现:

 # echo 0x13000000 >/proc/sys/kernel/shmmax

  # echo 512 32000 100 100 >/proc/sys/kernel/sem

  OS1: 单内核和 IPC

  TPC Results

  Load Time (Seconds) 9.54

  Transactions / Second 11.511

我们有理由相信采用新的内核版本(2.2.16-3smp)也应该有性能的提升:

OS2: Newer minor version kernel TPC Results

  Load Time (Seconds) 9.40

  Transactions / Second 11.522

  目前已经有 2.4 版本的内核,和 2.2 相比,性能上有了很大的提升,我们采用 2.4.1smp:

  OS3: Newer major version kernel TPC Results

  Load Time (Seconds) 8.32

  Transactions / Second 12.815

Linux 缺省读操作时更新最后一次读的时间,但是这个对我们来说并不重要,因此我们关闭这个选项,通过设置 noatime 的文件属性来实现。(对于 Win NT 和 2000 有相似的设置)

如果只是相对 Oracle 的数据文件设置,我们的命令是

chattr +A file_name

对整个目录的实施办法:chattr -R +A directory_name

最好的办法是修改 /etc/fstab ,针对每个文件系统入口,添加 noatime 关键字。

 OS4: noatime file attribute

  TPC Results

  Load Time (Seconds) 5.58

  Transactions / Second 13.884

另外一个调整 Linux I/O 的办法是虚拟内存子系统的调整,修改 /ect/sysctl.cong 文件,增加下面一行:

vm.bdflush = 100 1200 128 512 15 5000 500 1884 2

根据 /usr/src/Linux/Documentation/sysctl/vm.txt 的说法:

第一个参数100 %:控制缓冲区中最大的脏缓冲数据,增加这个值意味着 Linux 可以延迟磁盘写。

第二个参数 1200 ndirty:给出 bdflush 一次能够写入磁盘的最大脏缓冲。

第三个参数 128 nrefill:当调用 refill_freelist() 时,bdflush 添加到自由缓冲区中的最大缓冲数目。

refill_freelist() 512:当这个数目超过 nref_dirt 脏缓冲时,将唤醒 bdflush。

第五个 15 和最后两个参数 1884 和 2,系统未使用,我们不做修改。

age_buffer 50*HZ, age_super 参数 5*HZ:控制 Linux 把脏缓冲写到磁盘的最多等待时间。数值用时钟滴答数(jiffies)表示,每秒为 100 个 jiffies 。

OS5: bdflush settings TPC Results

Load Time (Seconds) 4.43

Transactions / Second 14.988

经过以上一系列调整后,我们得到的最终加载时间减少了 1015.35%,TPS 增加了 45.61%。。

搜索更多相关主题的帖子: 角斗士 Oracle 性能 数据 获取 
2006-10-01 17:19
燃燒
Rank: 9Rank: 9Rank: 9
来 自:磁盘驱动器
等 级:贵宾
威 望:56
帖 子:9878
专家分:2
注 册:2006-4-20
得分:0 
Oracle

不会


呵呵 这好像和软件工程联系不大了哈 ..



Thinking in life, thinking in love, thinking in dream,thinking in you !
月光倾泻,岁月沉沦
[url=http://58189.]http://58189.[/url]
2006-10-06 03:39
xupeng
Rank: 1
等 级:新手上路
帖 子:4049
专家分:0
注 册:2006-2-12
得分:0 
[QUOTE]这好像和软件工程联系不大了哈 ..[/QUOTE]
连Oracle的优化都不会,还当个P项目经理啊

反清复明 http://xupeng.
2006-10-06 07:34
燃燒
Rank: 9Rank: 9Rank: 9
来 自:磁盘驱动器
等 级:贵宾
威 望:56
帖 子:9878
专家分:2
注 册:2006-4-20
得分:0 
以下是引用xupeng在2006-10-6 7:34:53的发言:
这好像和软件工程联系不大了哈 ..

连Oracle的优化都不会,还当个P项目经理啊

咯咯

项目经理咱现在还不敢高攀 ..


就毕业能有口饭吃就行了 .咱可不像你...

另外请教: 所有的项目经理必须会Oracle优化么?谁告诉你的 ?


Thinking in life, thinking in love, thinking in dream,thinking in you !
月光倾泻,岁月沉沦
[url=http://58189.]http://58189.[/url]
2006-10-09 07:12
islet
Rank: 12Rank: 12Rank: 12
等 级:贵宾
威 望:89
帖 子:6548
专家分:0
注 册:2005-1-28
得分:0 
我认识几个一级项目经理 连上网打字都不会。。。
2006-10-10 15:56
燃燒
Rank: 9Rank: 9Rank: 9
来 自:磁盘驱动器
等 级:贵宾
威 望:56
帖 子:9878
专家分:2
注 册:2006-4-20
得分:0 
呵呵

是啊

项目经理不一定非要很了解技术的

他们针对的是用户,还有系统整体的规划.

这个if,for没有多大关系 ..

但我也有个很不明白的问题

为什么国内的很多项目经理都是干了几年程序员然后转型的?


Thinking in life, thinking in love, thinking in dream,thinking in you !
月光倾泻,岁月沉沦
[url=http://58189.]http://58189.[/url]
2006-10-11 08:00
燃烧个P
Rank: 1
等 级:新手上路
帖 子:7
专家分:0
注 册:2006-10-11
得分:0 
以下是引用燃燒在2006-10-9 7:12:59的发言:

咯咯

项目经理咱现在还不敢高攀 ..


就毕业能有口饭吃就行了 .咱可不像你...

另外请教: 所有的项目经理必须会Oracle优化么?谁告诉你的 ?

你爱学不学

2006-10-11 08:59
燃烧个P
Rank: 1
等 级:新手上路
帖 子:7
专家分:0
注 册:2006-10-11
得分:0 
[QUOTE]我认识几个一级项目经理 连上网打字都不会。。。[/QUOTE]
[QUOTE]为什么国内的很多项目经理都是干了几年程序员然后转型的?[/QUOTE]
干了几年程序员连上网打字都不会
2006-10-11 09:01
舞雪
Rank: 1
等 级:新手上路
威 望:1
帖 子:1786
专家分:0
注 册:2006-10-11
得分:0 
楼主看来适合在大型的外企当项目经理哦!
不过提醒楼主:这是在中国!

呵呵,不愧是BC论坛
2006-10-11 19:56



参与讨论请移步原网站贴子:https://bbs.bccn.net/thread-93879-1-1.html




关于我们 | 广告合作 | 编程中国 | 清除Cookies | TOP | 手机版

编程中国 版权所有,并保留所有权利。
Powered by Discuz, Processed in 0.352298 second(s), 7 queries.
Copyright©2004-2024, BCCN.NET, All Rights Reserved