首页

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 (Page 8 of 23)



August 15, 2007

oracle11g_logo.gif

这是我的 Oracle 11g 系列的文章之一.

在 Oracle 11g 以前的版本,在一个产品环境评估一个有待添加的索引是个麻烦事情。稍有不慎影响该表 SQL 执行计划走错,就可能带来灾难性的影响。这个问题可能也是 Oracle 比较重视的,在 11g 上新推出了 INVISIBLE 索引。这个索引创建后,默认对于 CBO 是不可见的。也就是说不会影响(抛开 DDL 时候的 SQL 重新解析)现有的 SQL 执行计划。如果要在 Session 级别激活这个索引,需要设置初始化参数: OPTIMIZER_USE_INVISIBLE_INDEXES .

创建 INVISIBLE 索引

注意新的关键字
SQL> CREATE INDEX emp_ename ON emp(ename)
2 TABLESPACE users
3 INVISIBLE;
Index created

USER_INDEXES 视图的新列 VISIBILITY

SQL> select INDEX_NAME ,VISIBILITY from user_indexes;
INDEX_NAME VISIBILITY
------------------------------------------------------------ ------------------
PK_DEPT VISIBLE
PK_EMP VISIBLE
EMP_ENAME INVISIBLE

观察执行计划的影响

SQL> select count(*) from emp where ename='ADAMS';
COUNT(*)
----------
1
Execution Plan
----------------------------------------------------------
Plan hash value: 2083865914
---------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time |
---------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 1 | 7 | 3 (0)| 00:00:01 |
| 1 | SORT AGGREGATE | | 1 | 7 | | |
|* 2 | TABLE ACCESS FULL| EMP | 1 | 7 | 3 (0)| 00:00:01 |
---------------------------------------------------------------------------

告诉优化器使用 INVISIBLE 索引

SQL> alter session set OPTIMIZER_USE_INVISIBLE_INDEXES=true;
Session altered.
SQL> select count(*) from emp where ename='ADAMS';
COUNT(*)
----------
1
Execution Plan
----------------------------------------------------------
Plan hash value: 1569421590
-------------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time |
-------------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 1 | 7 | 1 (0)| 00:00:01 |
| 1 | SORT AGGREGATE | | 1 | 7 | | |
|* 2 | INDEX RANGE SCAN| EMP_ENAME | 1 | 7 | 1 (0)| 00:00:01 |
-------------------------------------------------------------------------------

值得注意的是 VISIBILITY 索引在 Rebuild 后会变成可见索引:

SQL> select INDEX_NAME ,VISIBILITY from user_indexes;
INDEX_NAME VISIBILITY
------------------------------------------------------------ ------------------
PK_DEPT VISIBLE
PK_EMP VISIBLE
EMP_ENAME INVISIBLE
SQL> alter index EMP_ENAME rebuild;
=Index altered.
SQL> select INDEX_NAME ,VISIBILITY from user_indexes;
INDEX_NAME VISIBILITY
------------------------------------------------------------ ------------------
PK_DEPT VISIBLE PK_EMP VISIBLE
EMP_ENAME VISIBLE SQL>

这算是个 Bug 么? 还是本身的特性 ?

对于 INVISIBLE 索引,可以修改属性为 VISIBLE。正常的索引也可以修改为 INVISIBLE 状态。如果修改后仍然要使用这个索引,在语句中使用 HINT 即可。我就不一一演示了。

很多人都知道 Oracle 在 OEM 中早就实现了一个类似的功能:Virtual index(虚拟索引)。但是差别也是比较明显的。虚拟索引,真的是虚拟的,并不占用实际的磁盘空间。而 Invisible 索引需要占用磁盘空间。虚拟索引不可以 Alter ,而 Invisible 可以象正常索引那样进行一些维护工作。Invisible 索引的实现思路有些类似 Quest 以前的优化建议,也是直接会在数据库里面创建建议的索引,但是却不能屏蔽对 CBO 的影响。另外一个需要考虑的是 Virtual index 是 OEM 优化包 的功能,需要额外的 License (当然也可以用命令行创建)。

Invisible 对 DBA 来说,对 DBA 调优的时候多了一个更好的可选方法。

--EOF--

| | Comments (6)


August 14, 2007

oracle11g_logo.gif

这是我的 Oracle 11g 系列的文章之一.

Oracle 的 9i/10g 中已经对内存管理逐步做了很大的简化,11g 则更进一步,引入了一个新的概念自动化内存管理(Automatic Memory Management,AMM) . 如果 DBA 真的想偷懒的话,只需要设定两个参数就可以把烦心的事情都交给 Oracle 折腾了(只要 DBA 足够心宽)。PGA 与 SGA 一起搞定。这两个参数分别是:

MEMORY_TARGET--操作系统的角度上 Oracle 所能使用的最大内存值。动态参数
MEMORY_MAX_TARGET--MEMORY_TARGET所能设定的最大值。非动态可调。

Tip: 如果使用的是 pfile,设定了 MEMORY_TARGET 而没有指定 MEMORY_MAX_TARGET 的值,则实例启动后 MEMORY_MAX_TARGET 的值与 MEMORY_TARGET 相等。如果 pfile 中指定了 MEMORY_MAX_TARGET 而没有指定 MEMORY_TARGET ,实例启动后 MEMORY_TARGET 为 0 。

AMM 在后台会启动一个内存管理(Memory Manager, mman)进程。

因为 AMM 的引入,Oracle 内存管理更加灵活多样。 组合出来有 5 种内存管理形式.

  • 自动内存管理
  • 自动共享内存管理
  • 手工共享内存管理
  • 自动 PGA 管理
  • 手动 PGA 管理

1) 自动内存管理

默认安装的实例即是 AMM 方式。如下
SQL> show parameters target 
NAME TYPE VALUE
------------------------------------ ---------------------- ------------------------------
archive_lag_target integer 0
db_flashback_retention_target integer 1440
fast_start_io_target integer 0
fast_start_mttr_target integer 0
memory_max_target big integer 1216M
memory_target big integer 1216M
pga_aggregate_target big integer 0
sga_target big integer 0
要注意到 SGA_TARGET 和 都为 0 。

2.自动共享内存管理(Automatic Shared Memory Management, ASMM)

这是 10g 引入的管理方式,要使用这种方式,需要设置初始化参数 MEMORY_TARGET=0 ,然后显式的指定 SGA_TARGET 的值。
SQL> alter system set sga_target=1024m scope=both;
alter system set sga_target=1024m scope=both
*
ERROR at line 1:
ORA-02097: parameter cannot be modified because specified value is invalid
ORA-00839: SGA_TARGET cannot be modified to the specified value
SQL> alter system set memory_target=0 scope=both;
System altered.
SQL> alter system set sga_target=1024m scope=both;
System altered.
SQL>

这两个参数的修改是有严格顺序的,如果不遵守倒也没问题--Oracle 会报告错误。

3.手工共享内存管理

这个又更加原始了一些。因为原始,所以新的初始化参数 SGA_TARGET 与 MEMORY_TARGET 都要设置为 0. 然后手工设定 share_pool_size 、db_cache_size 等 sga 参数。要注意 RESULT_CACHE_SIZE 参数是 11g 新引入的,用来缓存 SQL 结果。

4.自动 PGA 内存管理

如果使用 AMM , 则对 PGA 不用操心。如果要做到精细控制而切换到自动 PGA 内存管理模式,需要设定WORKAREA_SIZE_POLICY = AUTO(默认即为 AUTO),然后需要指定 PGA_AGGREGATE_TARGET 的值。如需要精确控制PGA,则 WORKAREA_SIZE_POLICY = MANUAL .(Thanks vongates)

5.手动 PGA 管理

前提是 WORKAREA_SIZE_POLICY = manual ,然后分别指定 SORT_AREA_SIZE 等 PGA 相关的参数。估计现在没有人干这个吃力不讨好的事情了。这个模式大可以忽略。

AMM 的限制

如果初始化参数 LOCK_SGA = true ,则 AMM 是不可用的。

相关动态视图

V$MEMORY_DYNAMIC_COMPONENTS
V$MEMORY_RESIZE_OPS

11g 在简化 DBA 基本工作上还是下了很大功夫。可是这样也掩盖了一些技术细节,Oracle 正在逐步把内存的管理变成一个黑盒子,当然这也也是相关算法更加稳定作为基础的。总体来说,利大于弊。11g DBA, 准备好了没有?

--EOF--

| | Comments (6)


August 13, 2007

oracle11g_logo.gif

上一篇 在 RHEL 5 上安装 Oracle 11g 还是比较粗糙的。对照官方手册 Oracle Database Installation Guide 11g Release 1 for Linux 还是遗漏了一些内容的。

关于 Oracle Inventory 用户组

图形界面起来后,先是判断 Oracle Inventory group 这个玩意儿(通过 oraInst.loc). 如果默认目录权限有问题,会有如下提示:

11g_installer_2.png

这个提示信息其实没什么,点击 OK 即可。然后会提示手工输入可替代 Inventory 地址。

OSASM 用户组

如果使用 ASM,则最好创建一个 OSASM 组:

# /usr/sbin/groupadd asadmin

创建实例前修改 Shell 限制

修改 /etc/security/limits.conf 文件. 添加内容如下:
oracle              soft    nproc   2047
oracle              hard    nproc   16384
oracle              soft    nofile  1024
oracle              hard    nofile  65536

修改(或创建) /etc/pam.d/login ,内容如下:

session    required     /lib/security/pam_limits.so
session required pam_limits.so

还差一步,修改 /etc/profile , 内容如下:

if [ $USER = "oracle" ]; then
if [ $SHELL = "/bin/ksh" ]; then
ulimit -p 16384
ulimit -n 65536
else
ulimit -u 16384 -n 65536
fi
fi

在 NFS 上跑 11g

mount nfs 文件系统上有几个参数是强制性的 : hard , rsize, wsize, actime=0(或者 noac). hard 方式是 10g 遗留下来的后遗症。

想到其他的再继续补充...

--EOF--

| | Comments (2)


August 12, 2007

Oracle OTN 上提供的 11g 文档库有在线版本和可下载介质两种形式。建议 DBA 都下载一份到本地硬盘上,这也是我一向的习惯。现在硬盘空间这么大,没人会斤斤计较几百兆的文档占地方。而一旦不能访问网络又想看文档的时候,便利性就体现出来了。

11g 文档这次变成了左右栏显示,查找内容也更加方便了许多。字体也做了调整,在 Firefox 下看起来很舒服。值得注意的是新增了一个Oracle Database Storage Administration 手册,文档内容其实是继承了以前 ASM 的内容,这次独立开来也是体现了 ASM 在以后产品线中的重要性。

现在恐怕下载了文档库的人,90% 都在看 New Features Guide 吧?

--EOF--

| | Comments (1)


August 10, 2007

期待已久的 Oracle 11g 终于发布正式可以提供下载了。第一个发布的平台果然是 Linux 版本。几年前都是 Solaris 第一个。可见操作系统领域市场的变迁。

11g 的软件介质不小,单个文件,1.7G,这个文件是个大杂烩,包含了一大堆的组件。在 RHEL 5 上安装相对还是比较顺利。先需要看看我以前写的 10g 安装攻略。有时间的话,也不仿移步访问一下这篇:RHEL 上安装 Oracle 的注意事项

环境变量的变化

ORA_NLSxx 环境变量必须(?) 用 ORA_NLS10 ,以前在 10g 上还兼容的 ORA_NLS33 不能继续用的。

export ORA_NLS10=$ORACLE_HOME/nls/data

否则建库的时候会报告 ORA-12075 错误。

核心变量的设置

修改 /etc/sysctl.conf,追加如下内容:
# First line:SEMMSL SEMMNS SEMOPM SEMMNI
kernel.sem=1055 32000 100 128
kernel.shmmax=2147483648
kernel.shmall = 2097152
net.ipv4.tcp_sack = 0
net.ipv4.tcp_timestamps = 0
net.ipv4.conf.default.rp_filter = 0
net.core.optmem_max = 65535
net.core.rmem_default = 4194304
net.core.wmem_default = 262144
net.core.rmem_max = 4194304
net.core.wmem_max = 262144
fs.file-max = 6553600
net.ipv4.ip_local_port_range = 1024 65000

RHEL 5 默认安装几乎不用作额外配置,当然,要关闭 seLinux 和防火墙。./runInstaller 后图形界面起来,检查的时候也会报告 warning 信息,比如 libaio-devel 没有安装什么的。如果只是测试目的,倒是不用非那么多心思。

关于一些界面的变化,可以看我的 Yupoo 相册. 个人评价是 Oracle 对安装流程还是做了不少改进,有的地方相比 Oracle 10g 交代的更清楚一点。

--EOF--

| | Comments (7)


August 8, 2007

Oracle 似乎越来越想直接填补 OS 与 RDBMS 之间的技术缝隙。之前的 ASM 已经向存储层跨了一大步,可以说是 Oracle 自己的 LVM 软件,而且,应该说也占据了一定的市场。然后是 OCFS (Oracle Cluster File System)更进一步--用于集群的文件系统,OCFS 的表现似乎还需要观察(主要是还不够稳定)。现在,Oracle 又准备开发新的文件系统了。这个项目名字叫做 Btrfs

这个 Btrfs 的特性中列表:

  • Extent based file storage (2的64次方 max file size)
  • Space efficient packing of small files 【 vs ZFS: Built in compression】
  • Space efficient indexed directories
  • Dynamic inode allocation
  • Writable snapshots
  • Subvolumes (separate internal filesystem roots)
  • Object level mirroring and striping 【对象级别的镜像与条带】
  • Checksums on data and metadata (multiple algorithms available)
  • Strong integration with device mapper for multiple device support 【似乎 Oracle 对当前 Linux 系统的 LVM 软件并不满意】
  • Online filesystem check 【 vs ZFS: Always consistent on disk】
  • Very fast offline filesystem check 【对于大文件系统十分有效】
  • Efficient incremental backup and FS mirroring 【 vs ZFS: Fast native backup and restore】

【】内是我的注释或猜测。看得出来,Btrfs 应该参考了 Sun ZFS 的很多设计思想,而 Btrfs 的设计目的是面向数据库的,所以有很多独特的面向数据库的特性在里面。Btrfs 目前还在设计中,所有关键特性都实现并且成熟稳定恐怕还真是有待时日,Oracle 软件代码的质量那可真是叫人没话说--可不是好的让人没话说。

或许很多人已经忘记了 Oracle 多年以前失败的 Raw Iron 项目,但现在,Oracle 似乎在用搭机木的方式重新实现这个目标。

--EOF--

Updated: Btrfs 0.16 版本在扩展性与稳定性上都有很大的提升。

Btrfs 读音为:"Better FS"

| | Comments (13)


August 4, 2007

周三上午听了 Oracle Database Vault 的专题演讲。在数据库厂商中,只有 Oracle 有这样的工具。远景是非常好的,产品看起来还不是很成熟,而且对性能的影响还不得而知。

午餐是 Oracle 免费提供,灯影牛肉丝味道不错。下午还是要参加 OTN 的互动。另外一个会议室有个关于 JDBC 高可用的讲座,非常想听,可惜时间冲突。OTN 活动结束后在宾馆里接受了 IT168 熊建国老师的采访。采访进行了大约 20 分钟,开始我还有点局促,后来慢慢放开了。负责摄像的几个小伙子这几天估计也很辛苦。视频内容现在还看不到,等发布了我再通知各位。

这次的 OOW 也算是比较奇怪的一次了。因为软件还没有正式发布,整个会场上见到 Oracle 11g Beta 版的人还是寥寥可数。连 Oracle 公司的员工很多也不知道到底什么时候能拿到 11g 介质。这个版本绝对算不上象 Oracle 宣传的那样什么 "11g是甲骨文公司30年来发布的最重要的数据库版本", 只不过能证明 Oracle 依然是关系数据库市场上的领导者罢了。

待续...

--EOF--

| | Comments (1)


August 2, 2007

周二早晨起来,直奔国际会议中心。刚好赶上 Oracle 服务器技术执行副总裁 Chuck Rozwat 的主题演讲。Chunk 远远看上去很帅啊。所有会议的 Keynote 都是很无聊的,当然,技术追星族除外(还好 Larry 这次没来)。接下来是神州数码的郭为演讲,如果非要评价演讲水平的话,"比较差",很多口语,每句话一个"这(zhei四声)个", 他的那个 PPT 内容质量也不是一般的差,如果是秘书写的,干脆开掉算了--还是 90 年代初的视野。我没有在现场听过杨元庆的演讲,不知到水平如何。

本来我还想去听一个技术讲座的,不过 Oracle 为我们公司几位 DBA 安排了一个交流会,与来自美国的三位专家进行一些技术讨论。交谈的主题分别是优化、安全、数据仓库。大家的英语口语都不怎么过关,听力还都凑合,只能求助于翻译。所以花的时间就多了不少。最后是与来自雅虎的 Mason Ng 进行了一些交流,Mason Ng 是香港人,在Chuck Rozwat 演讲的时候上台进行了聊天互动,给 Yahoo! 着实做了不少宣传 :) .我们的探讨也是集中在数据库这个角度,我也问了几个比较感兴趣的其他方面的话题,包括最近的巴拿马计划。

匆忙吃了一个午饭,赶紧回到香格里拉参加那边的 Oracle 开发者大会,这边有个与 Oracle 专家面对面交流的活动需要我们几个 ACE 参加。赶到的时候,刚好盖国强上一个讲座完毕,已经开始面对面讨论了。活动现场很热闹,网友注册领取T-shirt 的也都挺多,也有追着问问题的。Oracle 的 Jack Han 是我们几位 ACE 的推荐者,终于在网下见到了,前一段时间 Oracle 大学有个活动,我都答应参加的,结果还是放了鸽子,赔罪 :) 楼方鑫坐在角落里,差点没认出来, Kamus 也在, 这家伙的耳钉很引人注意。另一位 ACE 万正勇这回也是第一次见面,在 Oracle 中间件方面很有研究。前两天在 ITpub 上对他的个别行为有点分歧,希望他别对我有意见 :) 何致亿(《Oracle9i实务管理讲座--系统核心篇》的作者)则是晚上饭桌上结识的,而另外活动主持人孙晓东则是周三下午才认识。

交流结束后和楼方鑫一起到我的房间里休息,我还给香格里拉打了一个投诉电话--因为昨天晚上他们给了我错误的信息,最后的处理结果是给我换一个更大的房间。原来的房间是江景房,可以看到东方明珠的,角度很好。新房间果然很大,正好对着号称"万国建筑博览"的外滩建筑群,"万国"? 总感觉有些半殖民地的味道。不管怎么说,房间总体上还是不错的,我比较满意。总算没有遇到店大欺客的事情。

在新房间休息了一会儿,楼方鑫领着我去饭局的地点,先去冲印店取他用胶片相机拍的照片。给我灌输了不少拍照的知识,感觉他真是个很热爱生活的家伙。天很热,一路走,一路聊,倒也没什么。

IT168/ITpub 做东,来参加饭局的都是常在论坛上泡着的人,好多人我只是熟悉 ID,没看过真人,也不知道真名字。四五十位齐聚一堂,吃吃喝喝,不亦快哉!

--EOF--

另: 在 CNOUG.net 聚合了不少参会 DBA 写的文章。透过不同角度看 OOW.


2e3587f6

| | Comments (1)


August 1, 2007

星期一搭同事的车到的上海,借助他的 GPS 一路相对顺利的抵达浦东香格里拉。我的房间位置还是不错的。面对黄浦江,还能看到东方明珠。

休息了一下,就乘坐 Oracle 的大会班车去上海国际会议中心。会场门口的大牌子很醒目,Oracle 毕竟是财大气粗,每次会议的场地真是只挑贵的租。注册领取入场牌很简单,领取了几件礼品,上楼听开幕式主题演讲。陆续的看到了来参会的同事。算了算,好像阿里巴巴集团的几个公司一共来了 16 个人。

下午媒体见面会上 Biti_rainy(冯春培) 获得了 the 100th Oracle ACE award,这个奖有偶然因素,也有必然因素。一方面是肯定冯春培在 Oracle 技术社区内作出的贡献,另一方面也能体现出来 Oracle 对中国用户的重视(这里有个对他的采访)。

晚上 ITpub 对 几位 ACE 进行了采访,大家针对 11g 的几个话题讨论很热烈,采访持续了两个多小时。回到宾馆都 23 点半了。

会上我拍了几张照片,可以到 我的 Yupoo 相册观看

--EOF--

| | Comments (4)


July 29, 2007

最近会议比较多,下周一到周四要跑到上海参加甲骨文全球大会(Oracle Open World)

对于一个 DBA 来说,每次 OOW 的技术讲座肯定比那些到处派发的小奖品更加吸引人。刚才总算有空仔细看了一下本次 OOW 的技术讲座列表。我对如下几个主题比较感兴趣:

  • Rich Niemiec 讲座序号 720: Oracle数据库11g的最佳新功能(一)
  • Rich Niemiec 讲座序号 721: Oracle数据库11g的最佳新功能(二)

Oracle 11g 最早也要到 8 月份才可以发布,不过现了解一点新功能过把瘾还是不错的。

顺便说一下,Rich Niemiec 接受了 Alibaba DBA 团队的邀请,将于 OOW 之后在杭州举办一场 Tuning at Block Level 的技术演讲。如果有杭州的朋友感兴趣,可以联系我。给你预留座位。技术方面国外过来的人物,Rich Niemiec 算是这次 OOW 比较大的腕儿了。如果你不知道他是谁,可以忽略这一段。

其他感兴趣的主题有:

  • 讲座序号 276: SQL Server向Oracle数据库迁移案例研究
  • 讲座序号 221: Oracle数据卫士----开创数据可用性和数据保护的新纪元 (数据卫士, 就是 Data Guard,翻译的挺好......)
  • 讲座序号 228: 如何利用 Oracle TimesTen 内存数据库大幅提高数据库管理软件的响应速度
  • 讲座序号 222: 超大型数据库备份和恢复策略
  • 讲座序号 238: Linux用户当然之选(Oracle Linux配置管理)
  • 讲座序号 215: 利用Oracle Database Vault选件保护数据

Oracle OTN 中文网还有个 OTN Lounge,我需要参加的。主要是个陪衬 :) 基本上国内这几个 ACE 凑齐了。对于这次活动,可以参见 eygle 的介绍

30 号晚上 ITpub 有个采访。主题是 《ITPub 5大 ACE 点评 Oracle 11g 数据库》. 其他的时间我还没有安排呢。或许去看看同学。对了,如果有朋友准备加入我们团队,可以直接和我联系 :)

周四我可能就必需要回到杭州了。

--EOF--

| | Comments (6)


1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 (Page 8 of 23)