ITPub博客

首页 > Linux操作系统 > Linux操作系统 > 提高对大批量数据时MV的刷新效率

提高对大批量数据时MV的刷新效率

原创 Linux操作系统 作者:space6212 时间:2019-04-15 09:00:06 0 删除 编辑

最近接到一个需求:把某一个表的字段设一个默认值,并把该字段当前所有数据都更新为这个默认值。


这个需求做起来不是很难,难在数据的同步上。

我这里的数据库环境是这样的:

外网数据库:WAI
内网数据库:NEI

为了开发测试方便、准确,每天会把外网的数据用MV的方式单向同步到内网上。MV的可更新主键MV,MV刷新方式是FAST。

我们知道,可更新MV在数据刷新后会将数据恢复至上次刷新的状态,也就是说丢失所有非刷新造成的数据变化,为了恢复,可更新MV同时会生成一个USLOG$_XXX表来记录对MV数据的改动;同时在源库上会生成一个MLOG$_XXX表来记录源表记录的变化,以便MV能使用FAST的方式刷新数据。

同时,我们还知道,当主表非lob类型数据发生变化时,无论变化的是一个字段还是多个字段,在MV刷新的时候都是把整个记录都刷新过来。

回头看需求,不难得出这样一个结论:在主表更新数据可能不会很慢,但在刷新数据时会非常慢,它消耗的资源会比MV做一次全刷新还要大。(刷新数据,删除两边对应的LOG)。

其实如果知道原理的话,要提高完成这个工作的效率还是很简单的。我采取的方法是:先刷新一下MV,然后分别手工更新主表和MV的字段,然后删除由更新产生的MLOG$_XXX和USLOG$_XXX的记录。

当然这种手段应该尽量少用了,只有在非常情况下采用,否则MV就失去其意义了。

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/231499/viewspace-63734/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2005-01-25

  • 博文量
    245
  • 访问量
    211331