TDSQL 内核的序列功能介绍
Mysql一直以来都是使用innodb的自增列功能产生表级别的唯一id序列,innodb把自增列值存储在该列所在的索引中(必然是其第一列),每次mysqld启动后首次打开这个表时候,把这个索引的最大值取出来作为自增列的起始值并且存储在内存中,然后mysqld运行期间即可维护和使用这个自增列值。这个功
扛起数据库国产化大旗,腾讯云TDSQL 金融政企用户突破600家
5月14日,腾讯云对外透露TDSQL数据库的金融政企用户数突破600家。作为一款腾讯自主研发的金融级数据库,TDSQL正在成为众多金融机构数字化升级过程中的“使命担当”。随着国家新基建战略的推进,企业在将大量业务迁移到数字基础设施过程中,海量的、异构的数据处理带来的挑战早已超出传统数据库产品的维度。
记一次数据库迁移的过程采坑过程
业务场景最近的一个项目最开始由于资源问题,mysql数据库是部署在一台云服务器上的,这两天客户提供了云数据库,所以原来在部署在ECS服务器上的数据库,需要迁移到云数据库。在云数据库上的优势很多,它自动是分配了一主二从,自动备份等。所以这两天的任务就是要将原来的数据库迁移。mysql版本mysql5.
TDSQL特有的MySQL内核功能介绍
本文是我最初于2017年底发表在我的个人微信公众号里面,现发布在这里。所以本文所列的tdsql的mysql/mariadb内核的功能和修复的bug,并没有包括我这2018年所完成的功能和修复的bug。我近期会写一篇文章总结一下我在2018年所完成的主要的tdsql数据库内核的功能和修复的bug。在T
直播回顾 | 数据库运维不再难,数据库“自动驾驶”技术已到来
腾讯云数据库国产数据库专题线上技术沙龙正在火热进行中,3月26日郝志刚的分享已经结束,没来得及参与的小伙伴不用担心,以下就是直播的视频和文字回顾。关注“腾讯云数据库”公众号,回复“0326郝志刚”,即可下载直播分享PPT。瞬间从亿条SQL中找到问题所在:TDSQL自动化运营体系_腾讯视频前言“赤兔”
腾讯TDSQL分布式金融级数据库前沿技术
欢迎大家前往腾讯云+社区,获取更多腾讯海量技术实践干货哦~简介:李海翔,网名“那海蓝蓝”,腾讯金融云数据库技术专家。中国人民大学信息学院工程硕士企业导师。著有《数据库事务处理的艺术:事务管理和并发访问控制》、《数据库查询优化器的艺术:原理解析与SQL性能优化》,广受好评。2018年5月11日,腾讯T
深度揭秘腾讯云数据库技术7年变迁史
早在上个世纪50、60年代,“数据”二字就已不再是简单的数字信息而已。随着信息技术的不断发展,在计算机应用领域,计算机存储和处理的对象逐渐广泛,表示这些对象的数据也随之变得越来越复杂,数据库这一门新兴学科的应用也越来越广泛。纵观国内几大云服务商过去几年在云数据库领域的发展,腾讯云基于自身的业务场景以
腾讯分布式数据库TDSQL金融级能力的架构原理解读
为帮助开发者更好地了解和学习分布式数据库技术,2020年3月,腾讯云数据库、云加社区联合腾讯TEG数据库工作组特推出为期3个月的国产数据库专题线上技术沙龙《你想了解的国产数据库秘密,都在这!》,邀请数十位鹅厂资深数据库专家每周二和周四晚上在线深入解读TDSQL、TBase、CynosDB三款鹅厂自研
VLDB'19 | TDSQL 时态数据库实现
TDSQL(TencentDistributedSQL)是腾讯基于MySQL研发的分布式数据库。TDSQL的总体设计不在本文讨论范围之内,本文说的是如何在TDSQL基础上实现一个时态数据库(TemporalDatabase)。什么是TemporalDatabase?Temporal是SQL:2011
超多干货!支撑起腾讯公司计费业务的TDSQL(附PPT)
2018-01-1800:00:00腾讯技术工程阅读数911bluesea,腾讯金融云专家工程师,从事分布式数据库TDSQL研发工作。出版著作:《数据库查询优化器的艺术原理解析与SQL性能优化》、《数据库事务处理的艺术事务管理与并发控制》,广受好评。同时,bluesea还是中国人民大学信息学院工程硕
TDSQL-XA简介
本文是我最初于2017年4月发表在我的个人微信公众号里面,现发布在这里。今天从我的公众号里面贴进来了好多篇mysqlxa相关的文章,都是我在2016年下半年到2017年底之设计和实现TDSQL的分布式事务处理功能期间发现和解决的问题。事实上之本文发表之后,我们的测试团队又找到了几个tdsqlxa方面
图说TDSQL | 下一个十年的金融业务场景,腾讯怎么做?
随着互联网的不断发展和逐渐普及,各行各业也纷纷选择了上云之路,腾讯云数据库致力于运用领先技术,助力企业上云,腾讯云自研的金融级分布式数据库TDSQL是一款具备强一致高可用、全球部署架构、分布式水平扩展、高性能、企业级安全等特性的数据库产品,《图说TDSQL》栏目将以图文结合的形式,带大家了解TDSQ
阿里云HBase推出普惠性高可用服务,独家支持用户的自建、混合云环境集群
HBase可以支持百TB数据规模、数百万QPS压力下的毫秒响应,适用于大数据背景下的风控和推荐等在线场景。阿里云HBase服务了多家金融、广告、媒体类业务中的风控和推荐,持续的在高可用、低延迟、低成本方向上进行优化。目前单集群承诺可用性99.9%,SSD机型上可以做到请求毛刺99.5%<50m
HBase在Linux下安装和配置详解
1.下载安装包从Hbase官网下载页面下载安装包,然后:tarxfzhbase-0.94.2.tar.gzcdhbase-0.94.2chmodugo+x./bin/*.sh注意,要修改bin/目录下的脚本的的权限,不然启动出错。2.配置hbase-env.sh和hbase-default.xml两
基于HBase构建千亿级文本数据相似度计算与快速去重系统
前言:随着大数据时代的到来,数据信息在给我们生活带来便利的同时,同样也给我们带来了一系列的考验与挑战。本文主要介绍了基于ApacheHBase与GoogleSimHash等多种算法共同实现的一套支持千亿级文本数据相似度计算与快速去重系统的设计与实现。该方案在公司业务层面彻底解决了多主题海量文本数据所
因为主机时间不同步导致的hbase zookeeper 节点宕机奔溃 一例
前几天,升级hadoop/hbase集群,新添加了几十台机器,硬件部门,安装好主机os后就交付给我们了,安装好软件环境,配置好,就启动接入集群了,运行了一个礼拜,系统运行正常。昨天的时候淘汰一台旧机器,上面跑了zookeeper,需要准备一个新的zookeeper节点来代替,如实就找了一台hbase
如何降低90%Java垃圾回收时间?以阿里HBase的GC优化实践为例
GC一直是Java应用中讨论的一个热门话题,尤其在像HBase这样的大型在线存储系统中,大堆下(百GB)的GC停顿延迟产生的在线实时影响,成为内核和应用开发者的一大痛点。过去的一年里,我们准备在Ali-HBase上突破这个被普遍认知的痛点,为此进行了深度分析及全面创新的工作,获得了一些比较好的效果。
赋能云HBase备份恢复 百T级别数据量备份恢复支持
云HBase发布备份恢复功能,为用户数据保驾护航。对大多数公司来说数据的安全性以及可靠性是非常重要的,如何保障数据的安全以及数据的可靠是大多数数据库必须考虑的。2016IDC的报告表示数据的备份(>为什么需要云HBase备份恢复? 我们希望云HBase支持备份和恢复功能,主要原因:用户直接访
Hbase迎接电信TB级大数据洗礼之热点网站功能实践
在今年年初的时候联通王志军院长就Hadoop在电信行业的大数据应用谈了自己的经验,随着3G网络的发展中国联通目前运营着世界上最大的CDMA网络,流量运营是中国联通一个重要特点。中国联通3G套餐当中流量占比非常非常大,中国联通3G用户流量使用情况也是非常可观的。那么在3G网络功能中上网冲浪占了很大的比
好程序员大数据学习路线分享Hbase指令学习
好程序员大数据学习路线分享Hbase指令学习启动:1、启动zkzkServer.shstart2、启动hdfsstart-dfs.sh3、启动hbase服务start-hbase.sh(启动报错的话要killQuorumPeerMain的进程,在重新启动)4启动客户端:hbaseshell时间必须同