-
编辑 删除
循序渐进调优ddl的案例
在平时的工作中，可能需要导入一些数据，有些表可能比较大，对于constraint的操作可能会耗费大量的时间，今天简单做了一些相关的测试，也提出了一些相关的优化方案，对结果进行比较，看看哪种才是比较合理的方法。 首先监控redo,undo的生成量也是衡量的一个标准。本次测试就简单从redo,undo,执行时间这三个方面进行总结。...
-
编辑 删除
归档问题导致的数据库无法启动
本地有一个小的环境，今天照例登上sqlplus，突然发现报了如下的错误。一看原来归档满了。我记得前几天做一个批量操作临时把temp文件resize了很大，限于本地空间有限。准备改回去。把多余的归档删除了。 sqlplus n1/n1 .... ERROR: ORA-00257: archiver error. Connect internal only, until freed. 这个时候sysd...
-
编辑 删除
关于exp statistics的问题和简单测试
在数据导出的时候，可能会碰到EXP-00091: Exporting questionable statistics.的问题，有时候会让人有点摸不到头脑，不知道该调整什么。 这个时候NLS_LANG就发挥作用了。 [ora11g@rac1 ~]$ exp n1/n1 tables=t file=t.dmp rows=n Export: Release 11.2.0.3.0 - Production on Fri May 23 19:26:35 2014 Copyright (...
-
编辑 删除
生产系统pl/sql调优案例
昨天基本休息了一天，想着生产系统升级也会多多少少碰到些问题，肯定有一些心得或者是值得学习的东西，结果昨晚到现在生产系统升级一直为一个pl/sql的问题所困扰。在测试环境中只用了十多分钟， 在生产系统上跑了快5个小时。这个经历太痛苦了，大半夜还在考虑怎么优化真是痛苦。这个也算是一个很深刻的学习经验，和大家...
-
编辑 删除
生产sql调优之统计信息分析
今天凌晨，又被电话叫醒了，说是有1个sql，现在跑的很慢。问题已经挺严重了，想让我看看，能不能做点什么。首先就是和他们确认最近有什么改动，他们说这个是用了很久的sql语句了，没有任何的改动，再听他们说，之前也没有任何的问题。然后就和他们确认之前这个jobl处理大概多长时间，那个哥们说他也是最近才进的这个项目...
-
编辑 删除
生产系统调优之_敢于质疑
接着昨天的那个问题来说。有个sql语句在做了统计信息收集之后，速度有了一定的提升，从5秒的响应降低到了2秒。但是和预期还是有一定的差距，按照80条查询请求在短时间内响应。2秒*80000次/60/60=44.4小时，本来感觉可以接受的一下子就成了大问题。 Elapsed Tim...
-
编辑 删除
生产系统调优之_毫秒级的改进
生产中有一个sql语句，做了union-all操作，对于时间的要求是极其严格的，目前已经从2秒的改进调整到了1秒以内，在此基础上还想做进一步的调整，因为极其频繁的查询，如果一丁点的改进都会在时间上的飞跃，以下的sql语句目前时间控制在不到半秒的样子。因为表SMALL_OFFER_PARAM 是一个数据字典表，查询的字段上没有相关的索...
-
编辑 删除
创建index 使用Online导致的问题
在本地的测试库中，本来空间就不足，结果创建了一个表有600多万条记录，想创建一个index. 物理段有340多M. 临时段大小有100M,结果想创建一个索引，总是报临时表空间不足的错误。 [ora11g@rac1 test]$ ksh test.sh "create unique index t_pk on t(object_id) tablespace pool_data nologging online;" create unique in...
-
编辑 删除
关于创建索引的ora问题
创建index的时候，报了如下的错误。让人有些摸不着头脑。 create unique index t_pk on t(object_id，object_name) nologging * ERROR at li...
-
编辑 删除
insert的不同场景性能比较
关于Insert的问题，可能在一些场景中会有完全不同的期望和结果，在日常工作使用的库中，需要表在Logging模式，必要时需要一些索引 但在数据迁移中，可能为了提高速度，索引就需要考虑重建了。 我做了一些场景的测试，并且做了详细的数据比对。 第一种场景：table在nologging模式下。并且表中没有索引， 在插入不同数据...
-
编辑 删除
记一次数据库重启后归档急剧增加的问题
在本地的环境中测试外部表的性能，由于空间有限，不一会儿归档的空间就爆了。然后文件貌似出现了系统级的问题，刚刚rm掉的归档日志文件。隔了几秒钟再ls，就出现了。怎么删都删不掉。尝试了多次之后，无奈尝试shutdown immediate结果等了好半天还是没反应，然后采用shutdown abort后重启，库直接起不来了。报了ora错误，然...
-
编辑 删除
海量数据迁移之外部表并行抽取
在10g开始的新特性中，外部表是一个不容忽视的好工具。对于大型项目中海量数据使用sqlloader是一种全新的方式，不过很明显,sqlloader的可扩展性更强，但是基于oracle平台的数据迁移来说，外部表的性能也不错。对于数据迁移来说也是一个很好的方案。使用外部表来做数据迁移，可以“动态”加载数据，能够很方便的从数据库中...
-
编辑 删除
海量数据迁移之外部表加载
在并行生成了大量的dump文件后，可以在目标环境上对数据进行加载，这个加载的过程时间极短，都基本可以在毫秒级完成。由于在外部表的加载过程中需要知道表结构的定义，所以可以通过如下的脚本得到表定义的基本语句，输出和desc类似。因为目标环境中的表结构可能会和源dump文件中的表结构有一定的出入。所以可以在目标环境...
-
编辑 删除
海量数据迁移之冲突数据筛查
对于数据迁移来说，无论准备工作准备的多么充分，在测试和正式生产环境中，心里还是会对冲突的数据有一些疑虑，心里感觉没底，因为生产的数据也是在不断变化的，要迁移的数据也在做相应的改动，在这样的环境中，其实数据抽取的工作还是顾虑比较少的，只要侧重考虑性能的提升，而在于数据加载的过程中，如果出现主键冲突的字...
-
编辑 删除
sqlldr加载性能问题的排查
最近根据业务需要加载一批数据，在生产环境中不到半个小时就完了，可是到了测试环境，竟然跑了6个多小时，另外测试环境和生产环境的数据情况都基本差不多，主机配置也基本类似。大家的注意力都集中到了sqlldr的加载性能上。等到他们找到我时，已经讨论了不少关于direct,convention加载的各种情况了，看似工作也做了不少了...
-
编辑 删除
数据迁移部分问题总结
按照计划在周二开始了数据迁移,本来之前也做了不少的准备工作。但是还是在迁移的过程中出现了一些问题。简单做一个总结。1.constraint导致的数据reject在数据加载的时候，报了如下的错误。有一些数据记录被reject了，查看后发现是源库和目标库中表的not null constraint导致的，在源库中没有not null constraint，但是...
-
编辑 删除
sqlldr性能调优测试
接着续上次提到的sqlldr的性能问题，加载一个表数据400多万条记录，竟然用了6个多小时。最后大家争论不休的时候，我发现应该是网络的问题。http://blog.itpub.net/23718752/viewspace-1182534/今天客户IT的同事把网络做了调整，他们就想看看到底改进有多大。下面是测试的一些记录。 àoriginal logs for issue ...
-
编辑 删除
impdp ORA-39002,ORA-39166,ORA-39164的问题及解决
今天在做imp和impdp的性能测试时，发现如果表中存在lob字段，加载真是慢的厉害，每秒钟大概1000条的样子，按照这种速度，基本上不用干活了。比如5千万条记录，50000000/1000/60/60=13.89小时，时间是无法接受的。所以尝试使用impdp来看看性能的提升。导出的表里面有9千万条记录，而且做了分区，分区大概有300个。如果使...
-
编辑 删除
sql语句的简化
今天碰到一个sql语句简化的问题，虽然也不复杂，但是也值得从中学习一些东西SELECT MOD(((SELECT TO_NUMBER(TO_CHAR(LOGICAL_DATE, 'YYYY')) FROM SMALL_TAB WHERE LOGICAL_DATE_TYPE = 'R' &nb...
-
编辑 删除
impdp异常中断导致的问题
今天查看数据库的负载，发现cpu消耗异常的高。里面有不少dw的进程.但是查看impdp的进程却不存在。查看datapump的进程情况，发现大量的job，但是状态都是not running.select * from dba_datapump_jobs where owner_name='MIG_TEST';SYS_IMPORT_TABLE_01 SYS_IMPORT_TABLE_02 SYS_IMPORT_TABLE_03 SYS...
