-
编辑 删除
ORA-17500 ODM err的问题排查
今天在一套环境中做系统检查的时候，发现alert日志中有一段ODM的错误。日志内容大体如下，可以看到是在半夜4点多报的错误。Clearing Resource Manager plan via parameterFri Aug 22 02:00:52 2014ALTER SYSTEM ARCHIVE LOGFri Aug 22 02:00:52 2014Thread 1 advanced to log sequence 6934 (LGWR switch) Cur...
-
编辑 删除
海量数据迁移之使用分区并行切分导入
在之前的章节中讨论过怎么把一个很大的分区表切分为若干的dump文件，在数据加载的时候能够同时做基于每个分区的数据导入，如果有些分区比较大，有几十个dump文件，那么这个分区做数据导入的时候是不能再进行并行切分了。现在在准生产环境中先查找了如下的表，charge,memo,charge_rel数量级都过亿，而且memo表中还含有lob...
-
编辑 删除
使用shell测试历史数据样本
使用shell分析了一些数据有一些时间了，而且分析的数据情况也是基于历史数据，今天写了个脚本对历史的数据进行一个简单的分析，看看准确率到底有多高。这里有一个借助一个脚本12c.sh 对一些数据的排列百分比进行分析，比如今天有两个球队，主队让球一个，胜平负的概率为35%，40%，25%表data里存放着一些样本数据，记录了...
-
编辑 删除
海量数据迁移之使用shell启用多个动态并行
在数据迁移中，可能有成百上千个表，有些表很大，有些表又很小。如果启用了多个并行的进程，可能会有资源分配上的问题。比如下面有10个表，100代表预计的时间为100分钟。table1 100table2 90table3 90table4 80table5 80table6 70table7 60table8 60table9&nbs...
-
编辑 删除
一条运行了3天的"简单"的sql
早上刚到公司，查看系统的负载，就马上看到一个进程的执行时间已经有3天了。而且cpu的消耗极高。Tasks: 2374 total, 19 running, 2354 sleeping, 0 stopped, 1 zombieCpu(s): 21.7%us, 2.7%sy, 0.0%ni, 74.5%id, 0.0%wa, 0.1%hi, 0.9%si, 0.0%stMem: 37...
-
编辑 删除
linux乱码和数据库乱码的问题简单排查
在本地的虚拟机环境一直凑合着用英文，今天想看看中文的东西都显示乱码，下定决心要把问题解决了。如果直接打印文本内容，通过putty也会显示乱码。[ora11g@rac1 ~]$ cat aa.shδ? ε??ο?θ?ζ―δ?δ??ζ?θ―[ora11g@rac1 ~]$这个时候很可能是putty的编码转换的问题，通过查看putty的设置，如上，可...
-
编辑 删除
通过分区键值发现性能问题
在很多应用中如果数据量少有规模，都会有大量的分区表存在，使用比较多的是range partition.一般的range partition都一时间为键值，或者根据业务绑定的关键id值。虽然已经做了一些大数据量的数据迁移，但是不管是按照分区抽取，还是根据数据条数抽取，发现有一个表比较奇怪，一个100G左右的分区表，80%以上的数据都分布在...
-
编辑 删除
通过shell脚本查看procedure的信息
在一个schema中，可能含有大量的procedure, 有时候想查看具体的信息，一般得通过toad,plsql dev等工具来查看，有时候在尽可能摆脱图形工具的前提下，想能够尽快的查找一些信息，还是使用shell脚本更快，更准，更直接。可以使用如下的shell脚本来查找procedure的信息。以下的脚本可以查找是否有需要的prcedure信息。PR...
-
编辑 删除
通过shell脚本查看package的信息
有时候想查看一个package的信息，但是对于package的名字不是很确定，比如只知道一个大概，知道一些关键字，这个时候通过图形工具是查找不到package的信息的，而且对于package的信息，我只关心package里面有哪些存储过程，哪些函数等，看看简单的参数情况就可以了，类似sqlplus的desc的形式。shell脚本的实现如下，以下...
-
编辑 删除
通过shell检查分区表中是否含有默认分区
在大数据量的系统中,分区表是很常见的,分区有多种类型,可以根据业务来选择自己需要的分区，不过为了数据的兼容性，需要考虑对于分区表设定一个默认的表分区，如果数据在插入表分区的时候，没有符合条件的分区，就会插入默认的表分区中。这个可以根据自己的需要来设定，如果确实对数据有严格的要求，甚至可以要求不加入默认...
-
编辑 删除
通过shell脚本来查看Undo中资源消耗高的sql
在查看undo的使用率的时候,在Undo_management为auto的时候，经常会看到undo自己在不断的伸缩扩展，自我调节。有时候看到Undo收缩的很紧,就想知道哪些sql语句在运行，可能有哪些潜在的问题。对于在线业务系统而言，如果某一条sql语句运行时间较长,而且消耗的undo资源极高的情况下,sql语句很可能是有问题的。可以通过如下...
-
编辑 删除
简单分析oracle的数据存储
在数据库的存储结构中，我们知道一般来说一个表都存储在对应的数据文件里,数据文件可以分为多个段，一般来说一个表会对应一个数据段,单纯考虑数据段的时候，数据段又可以分为多个区，每个区都可以分为若干个数据块，在操作系统层面，有对于的数据块映射和数据库层面的数据块有一个映射，可以打个比方来说，一栋大楼里面可以...
-
编辑 删除
关于分区表的move操作
关于分区表的move操作还是很值得深究的一个问题。如果分区表中含有lob字段，难度还会加大。对于普通的表而言，做move操作室理所当然，oracle提供的方式很直接快捷。当然了这个命令也不是高可用的范畴。但是对于数据重组还是很方便快捷的。一般来说，如果尝试对分区表进行move操作，会得到如下的错误警告。SQL> alter...
-
编辑 删除
生产环境sql语句调优实战第六篇
生产环境中有大量的sql语句在运行，尽管有awr,ash做数据的收集统计，但是dba的调优工作大多数情况都是在问题已经发生后做排查的，有些sql语句可能执行的时间有1,2分钟左右，但是sql语句本身有潜在的性能问题，通过awr是定位不到的，ash尽管能够查到，但是我们在未知的情况下怎么知道问题发生的精确时间点，通过sql monito...
-
编辑 删除
批量转换分区表为普通表
今天数据迁移的小组找到我，希望我能够重新构建一些测试环境，其中测试环境中的一些分区表都需要去掉分区，转换成普通表的形式，因为他们在做一些工作的时候碰到了问题，而且希望必要的约束等都保留，这个需求听起来倒不复杂，很清晰，我看了下需要转换的表，一看有将近100多个，而且重构好几套环境，想想都头疼。这个需求...
-
编辑 删除
海量数据迁移之通过shell估算数据量
在数据迁移的时候，需要根据用户量来评估需要在表空间理添加的空间大小。比如迁移5百万的用户和迁移200万，两者需要添加的数据量差别很大，在资源有限的情况下，需要一些比较合理的估算，毕竟在生产环境中做数据加载的时候报了空间不足的问题就是准备太不充分了，稍后的数据修复任务就难上加难。比如我们现在客户提供了如...
-
编辑 删除
使用Linux命令发送邮件
在平时的工作中，可能很多环境都有自己的内网环境，如果发生一些问题的时候，可以通过内网环境发送邮件到指定的邮箱中。这种略显智能的方式可能在很多工作场景中使用，一般都需要设置对应的网络配置，邮件设置等等，本文仅通过简单的Linux命令来发送一些比较简单的邮件。环境目前经过测试，仅适用用redhat,centos环境。...
-
编辑 删除
使用utl_file做选择性数据导出
在平时的数据导出中使用exp/expdp能够满足绝大部分的数据导出任务。如果有一些表的数据不多，但是查询条件要复杂一些，使用exp/expdp就很吃力了。或者在和外部系统的交互中，使用xml或者文本文件是一个很兼容的选择，这个时候使用exp/expdp也满足不了要求。这个时候可以考虑使用utl_file的提供的一些功能来做选择性的数据...
-
编辑 删除
关于oracle session的简单测试
平时查看v$session的时候要定位一个session,需要sid,serial#这个两个值，其实更多时候我们关注更多的是sid,对于serial#却不太了解。 至少从v$mystat中，可以看到，是只能定位到sid的，对于serial#的值还需要借助v$session来查找。 SQL> desc v$mystat Name ...
-
编辑 删除
使用dbms_metadata生成建表语句
有时候在工作中，可以使用exp/imp得到表的创建语句。如果想得到关于table,index,constraint的语句，可以考虑使用dbms_metadata来实现。我们可以使用如下的脚本来得到建表语句，对应的索引语句，和ref_constraint语句。建表语句就不多说了,关于索引的部分，过滤了主键和唯一性索引的部分，这些语句会和建表语句中的cons...
