ITPub博客

首页 > 数据库 > 数据库开发技术 > 【巨杉数据库Sequoiadb】sdbexprt工具导出数据性能如何

【巨杉数据库Sequoiadb】sdbexprt工具导出数据性能如何

原创 数据库开发技术 作者:CherylRAnthony 时间:2019-07-23 10:34:21 0 删除 编辑

【问题描述】 
sdbexprt工具导出数据性能如何,能否提供性能测试报告? 
广东省农信运维人员比较关心以下情况: 
如:导出的集合是多维分区表,范围切分以时间作为切分字段,一年一个子表,hash切分则以"_id"切分,该集合中有3年1000w条记录,每条记录约100kb,现需要将1000W的数据从集合中导出,需要多长的时间?

【问题回复】 
1. 导出工具只能从一个coord节点上导出数据。理论上,当这个coord节点所在的机器的带宽被打满(如千兆网为128M/s)时,性能就到达最高点。 
2. 实际上,决定导出工具性能的关键点在于数据存放在集群的多少个分区上。如果说数据存放在10个分区上,那么同一时间,就有10个节点在给 
    coord节点传输数据,这样coord节点所在机器的带宽将极大地被利用。这样导出速度也更快。


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69935160/viewspace-2651426/ ,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2019-06-25

  • 博文量
    71
  • 访问量
    55600