栈桥-断桥
今天其实想了很多,生活中其实遇到了很多的困难和挫折,这些都是无可避免。 今天在栈桥上其实也很有感触,看到里面的人来人往,我似乎也读到了一些生活的意义,而我也挺喜欢坐着看着来来往往的人,有些是一家人在合照,有的是情侣,还有些是朋友,有些是一个人。而这些也...
增量数据丢失的原因分析(三)
今天开发的同事找到我说,他们发现一个应用今天应该会同步过来一部分数据,但是今天却没有,所以想让我帮忙看看到底是怎么回事。对于这类需求也算是轻门熟路,不光维护管理数据,补数据也在行。看来今天又不可避免要修复数据了,不过还是得明白原因是什么。首先查看了近几天的数据同步情况,时间范围是5月1日~5月6日,但...
一个简单的sql审核案例
今天开发的同学发来一封邮件,希望我帮忙对一个sql语句做一个评估。他们也着急要用,但是为了稳妥起见,还是希望我来审核一下,这是一个好的习惯。打开邮件,看到的语句是下面这样的形式。select a.cout1+b.cout2 from (select count(*) as cout1 from TEST_ONLINE where CN='' and to_char(LOGIN_TIME,'yyyymmdd') = to_...
生活中的小感慨20160504
今天身体不适,还是简单写点东西。不知道昨天是因为饮食的问题,还是劳累的问题,昨天睡觉以后就开始肚子痛,结果挨了2个小时,期间去了几次卫生间,最后还是上吐下泻,这样也好,肚子空了就没有什么值得翻腾的了。期间也着实让家人担心不已,其实还好了,睡了一觉,白天就感觉好多了。 但是为了让自己宽心...
大学里面的几个失败项目
今天想起大学时参与的一个项目,让我突然想起了一些事情,多年之后再来看原来的我,发现其实还是有不少的建议。那时候是暑假的时间,课程里面专门安排了一个项目实践,因为也没有实际的项目可做,所以也就是根据老师提供的素材来自己选择一个项目,给了三个项目,每个小组是10多个人,当时学软件工程也有些日子了,论逼格...
一个MySQL优化案例的初步思路
今天想起这件同事处理的一个性能优化案例,当时虽然解决了,但是还是留下了几个未解的问题,和大家一起讨论一下。首先,这个问题是根据反馈sql响应很慢,已经开始影响前端应用的登录了。稍后DBA介入,发现是由于CPU使用率过高导致,为了能够延缓问题和进一步分析,因为数据库中的数据量不大,直接就迁移到了另外一台配置不...
Percona-toolkit的安装和配置
pt工具是非常实用有效的一个工具集,对于诊断常规问题还是非常有效的,相比于Oracle的工具,MySQL中没有那么多复杂的数据字典,在实现方式上相对更加轻巧,主要都是针对日志的挖掘。在庞大复杂的日志中能够找出一些非常有效的信息,确实难能可贵。在官网上查看Percona的系列产品,可以看到Percona Toolkit的一个Logo好像是...
每一次退缩之后的努力,都是极大的进步
每一次退缩之后的努力,都是极大的进步。有句话说的好,努力不一定成功,但不努力一定很轻松。这句话应该是很多人对待事物的态度写真吧。我就举几个例子来说说我的一些感悟,当然还是不可避免要和Oracle扯上关系,这也算退缩,我以后也要多和其它数据库扯上关系。 首先让我印象非常深刻的就是在...
今天的几点感悟_20160429
今天快下班的时候,突然发现今天我计划是要请假的,汗颜。可能是最近这几天太忙了的缘故,主要都在抽空忙书的事情,为此一直以来也没少熬夜,希望一切流程都顺利,新书能够早日出版。快放假了,就聊点轻松的话题。长辈玩微信最近的几个长辈真是迷上了微信,从他们对于微信的热情可以看到我们曾经热情的影子,其实这些曾...
最近的几个技术问题总结和答疑(三)
突然发现最近忙里偷闲也回答了一些微信好友的问题。有的在公众号提问,有的私信给我。简单整理了一下。问题1:之前使用expdp和impdp导出导入数据库statistics时遇到一个bug,无法impdp导入,后来只能不导入statistics,待导入数据后自己收集对象统计信息,但问题是收集的统计信息和原来有些差异,特别是直方图信息有差异...
PCIE的简单配置
最近测试了一下PCIE-SSD在数据库环境的迁移和加压情况,IOPS无可置疑,比起机械硬盘确实是高了很多个量级,在数据环境中的IO方面确实有很稳定的提升,目前使用闪存产品系列,看官网最新的发布已经支持6T了,这个着实让我想起曾经的U盘,几十M,几百兆都曾经风光一时。基本的软件要求如下,摘自用户文档中,各个厂商应该都...
datapump跨平台升级迁移的对比测试和优化
目前计划对跨平台的数据库环境进行迁移,一来降低运维成本,二来更加可控。其实对于很多机器来说,如果机器跑了很多年,一直没有重启过,那么时间长了,一个直观的感受就是稳定,这也是小机口碑远远好于PC的一个重要原因吧,但是如果机器有一天出了问题,那么可能就会让大家坐立不安。其实这也能够折射...
远程协助解决重建索引的危机问题
最近在工作忙碌之余也帮几位网友查看了几个问题,有一个问题让我印象挺深,其实也可以分享出来作为一些参考,问题之外还是有一些值得借鉴的地方。首先是在周末的一个晚上,白天已经比较累了,大概在晚上11点左右,就准备收拾收拾睡觉了,但是突然qq闪动起来,有一个网友发消息给我,在反复问我,在不在不?看...
我们身边的get,post型的人
今天突然想起了几句话,由此联想到了Java Servlet中的get和post方法。对于Servlet其实自己也算是清门熟路了,get和post这是http协议的两种方法,而在servlet开发中,以doGet()和doPost()分别处理get和post方法.这两个方法有什么区别呢。get方式会通过url传送表单数据,这是一种显式的数据传输,而对于post而言,表单数据会...
两位数相乘的速算法靠谱吗?
我们有了常规的知识体系,更多时候会感觉繁琐,或者感觉力不从心,所以我们就会有投机的心理,一旦发现存在一些相关的攻略,看起来可能会颠覆原本的认知,我们就会更加欣喜。比如前几天我无意中看到了下面的速算攻略。我直接拿来原文。在美国有人研究了一个乘法法则,让他们的算术功力大为长进。任何两位数运算,都可以...
datapump跨平台升级迁移的总结
最近测试了使用datapump来迁移百G数据的场景,因为实际需要,需要把Unix下10gR2的库迁移到Linux下11gR2,所以这个过程相对来说牵制也较多。考虑了多种方案,最后权衡后决定使用datapump来迁移。其实整个迁移的过程还算顺利,完整模拟了整个生产环境的迁移情况,datapump的全库导入还是比较方便省心,只要导出得当,导入基...
增量数据丢失的原因分析(二)
今天处理的一个问题比较绕,花费了我不少的时间来分析,当然最后发现是拜拜忙碌一场空,还是有一些历史原因。大体的环境情况如下,有一台线上库OLTP,其中也有会自己的存储过程,job,结合起来处理一些数据,当然作为统计系统而言,目前有两套统计系统STATDB1,STATDB2,都哟裇相关业务的划分,两者会有一些交集。开发的同学...
orion的简单测试
orion是一个做IO测试的小巧工具,可以测试随机读写,模拟混合负载等。在oracle 11g已经自带包含了这一工具,无须额外的安装了,为IO方面的测试带来了不少的便利。当然如此简单的小工具我在使用时还是碰到了些小问题。简单总结一下。首先是使用orion,直接提示依赖链接库的问题[oracle@db117 bin]$ orionorion: error wh...
今天琢磨的几件事情
今天在琢磨几件事情,也是和工作相关。数据灾难切换的几点认识:在unix中可能会碰到在处理网络问题时,超时时间会远远高于linux的情况,这个时候如果尝试做failover是非常消耗时间的,而且日志没有任何输出,看不到进展,相比于linux的处理,我感觉要更简洁一些。鉴于unix中的处理方式,我还是建议直接使用命令行来做fai...
和开发同学讨论的一个技术问题
今天下午的时候,有一位开发同事找我,说有一个技术问题想请教一下。 当然正如他所说,这个问题比较奇怪,而且已经影响了他的测试流程,他说有一个表查看对应的表空间但是显示为空,所以插入不了数据。我们之前做过一次数据迁移,他想让我帮忙看看,能不能修改一下表空间的设置。 ...