测试OceanBase集群性能的方法有很多,如
sysbench、
benchmarksql。不过如果想对比OceanBase数据库跟传统数据库、其他友商分布式数据库产品的性能差异,还需要找到一个能适用彼此的测试方案。
sysbench的功能太弱,且只有0.4 支持ORACLE,不同版本的sql还不完全一样。
benchmarksql倒是很合适,有一定业务模型,且标准简单容易统一比较。不过如果客户还想测试一点点业务sql,那就只能自己写程序了。如果嫌写程序麻烦,还有个简单的办法就是使用
JMeter。
使用JMeter测试OceanBase性能的时候也需要加载OceanBase的Java驱动。文件可以从官网的下载文件中获取,或者从这个途径:
下载的
oceanbase-client-1.0.9.jar需要放到
Jmeter的
lib文件夹夹中。
请在OB-ORACLE租户下业务账户执行下面SQL 。
示例中的触发器和序列不是必须的。这只是一种常用的用法。ORACLE租户的序列能保证值递增(序列属性是
NOCYCLE),但不一定保证连续(事务回滚时会浪费序列值)。这里的测试案例期望产生的测试数据是连续的。
造连续自增的测试数据的方法就不说了。
此次测试模拟一个分布式事务,SQL类似如下:
JMeter能在命令行下运行,也可以以图形界面运行。这里我简单点直接用图形界面这种方式。
新建测试计划
新建
Thread-Group
这里有很多跟多线程运行有关的JMeter参数,具体说明可以查看JMeter官网文档。
注意这里的
Number of Threads是指压测的客户端线程数。
这里面属性很多,都是一个连接池常具备的参数。有兴趣的可以看看网上关于Java连接池配置的经验。
这里面也有几个参数强调一下:
Max Number of Connections:这个指连接池里最多多少个连接。如果压测线程数远高于这个值,那么压测线程可能会需要等待这个连接池创建或返还数据库连接(即到OceanBase的连接)给它。如果等不到可能会报错。在这个环节,客户端压测线程拿不到连接,不一定跟OceanBase数据库有直接关系。在Java应用里面也同理。Transaction Isolation:这个是数据库连接使用的事务隔离级别,OceanBase支持两种事务隔离级别:读已提交(
Read-Committed)和序列化(
Serializable)。前者很常见容易理解,后者是ORACLE特有隔离级别,OceanBase也兼容了。有兴趣的可以看看《OceanBase事务引擎特性和应用实践分享》。理解序列化隔离级别的特点和场景可以加深自己对数据库事务的理解。Test While Idle:这个是连接探活(
keepalive)设置。这个设置对应用却很优必要。有时候应用会说数据库连接报错说在一个关闭的连接上执行SQL报错,这个就是因为连接池中的数据库连接因为其他原因已断开了。所以,数据库连接池通常都需要探活机制。这里由于是压测场景基本无闲置连接,所以可以设置为
False。Database URL:数据库连接URL格式,直接类似填写
jdbc:oceanbase://11.***.***.5:2883/tpcc 。JDBC Driver Class:数据库驱动中的Main类名,这个要按OceanBase格式填写,
com.alipay.oceanbase.obproxy.mysql.jdbc.Driver。Username:用户格式,OceanBase的用户名格式比较特别,是
租户里用户名@租户名#集群名或
集群名:租户名:租户里用户名。如
tpcc@obbmsql#obdemo在这个测试里,有三个变量:账户A,账户B,转账金额,所以需要设置参数
账户参数和金额采取随机数,随机数的值不要超出测试数据实际范围。
这里面是维护每个事务的逻辑。事务由一组
JDBC请求组成。
选择
Autocommit(false),开启显式事务。
这里查询账户A的记录会同时锁住这笔记录,即常用的悲观锁技术。 这一步看测试需要,不是必需的。
注意所有参数都使用
Prepared Statement,以下同。
这一步后面按业务设计应该检查一下返回值是否大于要转账的值,如果不满足就是“转账余额不足”。这里我没有去研究JMeter如果根据查询返回值进行逻辑判断。有兴趣的朋友可以自己研究。
SQL很简单。
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Mm5Q9slr-1584840402750)(media/15764843389279/15847853936218.jpg)]
多个绑定参数使用逗号(,)分隔。
然后要新增一个Post处理逻辑,获取更新返回值
SQL很简单。
同样,需要增加一个Post处理器
如果上面两笔账户的更新成功,则提交事务。
新增判断控制
IF
新增动作
如果上面两笔账户的更新有一笔失败,则回滚事务。
新增判断控制
IF
新增动作
可以查看成功、失败的结果
在业务租户下的
sys用户下,利用OceanBase的SQL审计功能可以查看JMeter发出的测试SQL细节。在这个里面可以看到SQL的执行细节(错误码、耗时、等待事件之类),对分析性能结果非常有帮助。
这个测试场景和方法虽然简单,但实际测试中可能会遇到一些问题。分析这些问题也可以了解OceanBase的特点。
如果测试数据记录数很少时,使用一定的并发压测,很容易就出现锁等待和阻塞现象。这个时候看报告会发现
update的延时会增加,甚至
rollback的事件会增加。如果默认的锁等待时间和事务超时时间很长,可能发现
update都堵在那里,会有很多死锁事件。
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/26851225/viewspace-2888931/ ,如需转载,请注明出处,否则将追究法律责任。