DB诊断日 | 99%的DBA都想深入了解的MySQL故障
为更好的帮助DBA运维数据库,腾讯云将在每月12日开展DBbrain诊断日,腾讯云高级产品经理迪B哥直播解析经典数据库运维难题,结合腾讯云数据库智能管家DBbrain的能力,为大家提供问题优化思路和方法,玩转数据库!工作中遇到棘手故障不知道怎么办?欢迎投稿到诊断日,被选中的案例将由腾讯云资深专家“会诊”,并在DB诊断日在线分析教学,帮您提供解决方案。投稿即有机会获得企鹅公仔,问题被选中即得腾讯云数
说真的,这个主从延迟你还真处理不了
本文作者:张松坡,腾讯云数据库架构师,主要负责腾讯云数据库MySQL、Redis等数据库架构设计、数据库运维、运营开发等工作。曾就职于腾讯新闻、腾讯视频。写在前面,感谢腾讯云数据库架构师团队祝海强、杜川、刘志祥在排障思路、源码分析上面提供的帮助,让我学习到了很多,不敢居功,特此鸣谢!本文将以数据库实际使用中的某典型案例来分析造成主从延迟的原因。主从延迟的原因1、某用户在使用数据库过程中,出现主从延
腾讯会议空中加油级的扩容,只需按一个按钮
受疫情影响,多数企业员工目前无法回到写字楼办公,学生推迟开学,稳定高效的进行远程办公和直播授课成为2020年的开年刚需。2月,腾讯宣布疫情期间免费开放可支持300人在线会议的腾讯会议,央视新闻联播对此也给予了报道。点击查看视频出生不久的腾讯会议瞬间成为了一款国民会议软件,海量用户呈几何级爆发涌入,1月29日开始到2月6日,腾讯会议每天都在进行资源扩容,日均扩容云主机接近1.5万台,8天总共扩容超过
首届腾讯云数据库王者挑战赛落幕,决赛选手无一超越AI
关注腾讯云数据库官方微信,回复“赛题复现”,即可进行比赛场景复现。11月6日,由腾讯云主办的首届“DB王者—数据库诊断大赛”决赛在腾讯Techo开发者大会活动现场圆满落幕,此前800多名选手经过初赛的激烈角逐后,共有30位进入本次决赛。经过腾讯云智能数据库管家DBbrain的智能打分,最终雷孝龙以78分的成绩摘得本次冠军奖杯,亚军和季军则分别由赵文新和王加雷获得。腾讯云数据库负责人林晓斌(丁奇)为
800人参赛只有1人全部答对,题目却是现实中发生过的故障?
喜大普奔,腾讯云首届数据库诊断赛初赛圆满结束啦~经过一个月紧锣密鼓的比赛,腾讯云智能数据库管家DBbrain对每个参赛用户的实例进行了健康巡检和打分,恭喜以下30名选手进入决赛!有朋友问了:虽然我没有进入决赛,但是重在参与,对于初赛的题目我还有很多疑惑,到底应该怎么调优呢?那么今天除了公布成绩,数据君也为大家带来了初赛的赛题解析和优秀选手的解题思路分享。一、赛题设置首先我们来回顾一下比赛规则:腾讯
MySQL内核大牛解密腾讯数据库关键技术点
本文嘉宾:赖铮,腾讯TEG基础架构部数据库团队专家工程师,负责腾讯TXSQL数据库内核的研发,数据库系统开发老将,专注数据库内核开发十余年,先后就职于达梦、Teradata、北大方正以及MySQL InnoDB存储引擎团队,是达梦数据库内核、方正XML数据库以及InnoDB的GIS支持,加密功能的主要开发者,并获得多项数据库领域的专利。本文是腾讯TEG基础架构部数据库团队专家工程师赖铮在腾讯云与3
3个DBA和1个不可能完成的任务
一、一个时代的崛起1. 腾讯新闻:资讯行业擎旗者的突破超越2012年9月,腾讯新闻客户端安卓版正式发布。彼时,几大传统门户衍生的移动端资讯类APP早已上线推广,新闻客户端领域的用户争夺战,一触即发。2014年底,腾讯新闻在移动端的日活跃用户已达2.5亿,仅在第三方应用商店,腾讯新闻的下载量就达5亿次,是第二名的两倍。不久后,腾讯新闻客户端日活跃用户量已超过行业第二名的两倍,牢固确立领军者地位。通过
深度 | 如何玩转PG查询处理与执行器算法
作者介绍孙旭,腾讯云高级工程师。10年数据库内核研发经验,熟悉PostgreSQL、Teradata数据库内核,熟悉数据库的查询优化、执行、事务并发以及存储等子系统;对分布式数据库有深入的研究和研发经验。目前在腾讯云从事CynosDB数据库研发工作。一、导语数据库查询处理(Query Processing)是数据库比较核心的技术,也是距离用户最近的子系统。数据库系统在除了实现事务的隔离界别外,还需
解码Redis最易被忽视的CPU和内存占用高问题
作者介绍张鹏义,腾讯云数据库高级工程师,曾参与华为Taurus分布式数据研发及腾讯CynosDB for PG研发工作,现从事腾讯云Redis数据库研发工作。我们在使用Redis时,总会碰到一些redis-server端CPU及内存占用比较高的问题。下面以几个实际案例为例,来讨论一下在使用Redis时容易忽视的几种情形。一、短连接导致CPU高某用户反映QPS不高,从监控看CPU确实偏高。既然QPS
深度 | 解析InnoDB引擎
一、综述innodb的物理文件包括系统表空间文件ibdata,用户表空间文件ibd,日志文件ib_logfile,临时表空间文件ibtmp,undo独立表空间等。系统表空间是innodb最重要的文件,它记录包括元数据信息,事务系统信息,ibuf信息,double write等关键信息。用户表空间文件通常分为两类,一类是当innodb_file_per_table打开时,一个用户表空间对应一个文件,
腾讯黑科技:删大表不抖动,自动补充虚拟隐藏主键
2019年9月,腾讯云数据库正式按地域发布TXSQL 5.7-201908版本,该版本主要实现写性能提升,新增功能特性和内核参数,为MySQL提供更稳定、高效的性能和服务能力。其中,新增特性包括DROP大表操作异步化、GTID复制功能扩展、隐藏主键功能、非 Super 权限用户 Kill 链接的功能等。另外,在最新的TXSQL内核版本中,可以通过内核参数来指定事务调度算法。下面将为大家详细解读。T
你和年薪百万的DBA差距在哪?
你半夜被电话叫醒起来救火时,小Q从来朝九晚五一夜好眠;你排查故障至少十五分钟起步,小Q总在故障发生那一刻就拿出了解决方案;你因为黑客攻击心力交瘁,小Q已经提前向老板汇报了风险预警和处理办法;……终于,小Q获得老板青睐年薪百万,你顶着残存的几根头发去了离职大厅。其实你和小Q只差了一个大宝宝——DBbrain。DBbrain究竟有何神奇之处?请看本期年度巨制《鹅说数据库》。最为酷炫的是,除了常规的PC
揭秘腾讯全时态数据库系统,又一论文被数据库顶会VLDB收录
2019年8月26日-30日,数据库领域顶尖学术会议 VLDB 2019在美国加利福尼亚召开,腾讯TDSQL数据库团队与中国人民大学最新联合研究成果被VLDB 2019接收并将通过长文形式发表。该论文提出了一种拓展的全时态数据模型,并提供了内建的全时态数据库解决方案,通过引入异步数据迁移、增量历史数据管理、原生全时态查询执行器等策略,使得该解决方案可实现轻量且高效的全时态数据管理计算,在保持全局一
最佳实践 | 腾讯HTAP数据库TBase助力某省核心IT架构升级
数据存储和处理是一个古老而重要的技术,从远古时期的结绳记事到古人的文本记事,再到计算机诞生后的各种系统,直到E.F.Codd提出关系模型,人类终于有了一种相对高效而统一的数据处理系统——关系数据库。在传统的关系数据处理系统中,习惯把系统按照业务特点分为在线事务处理系统(OLTP)和在线分析处理(OLAP),一般意义上OLTP关注实时在线业务,要求低延时,高吞吐量,总体数据量一般不会特别大;而OLA
亿级客户和PB级数据规模的金融级数据库实战历程
导语:微众银行在2014年成立之时,就非常有前瞻性的确立了分布式架构的基础架构。当时,腾讯有一款金融级的分布式数据库产品TDSQL,其业务场景和对数据库的可靠性要求,和银行场景非常类似。微众银行和腾讯TDSQL团队合作,共同将TDSQL打造为适合银行核心场景使用的金融级分布式数据库产品,并将TDSQL用于微众银行的核心系统数据库。本文是对整个实践历程的总结。一、背景介绍微众银行在2014年成立之时
AI调参新纪元,腾讯数据库论文被SIGMOD收录
腾讯数据库与华中科技大学合作发布了最新研究论文 《An End-to-End Automatic Cloud Database Tuning System Using Deep Reinforcement Learning》,该论文首次提出了云数据库自动性能优化系统 CDBTune,该系统可以在缺少相关经验数据训练的情况下建立优化模型,为用户提供在线自动优化数据库性能的服务,性能调优结果首次全面超
【迪B课堂】这些错误清理Binlog的方式你中招了吗?
【迪B课堂】为腾讯云数据库产品经理迪B哥开设的面向数据库开发者、数据库运维人员、云端运维人员的系列培训课程,旨在帮助大家从入门到精通学习和使用数据库。《我说》为迪B课堂的答疑系列,3分钟帮您解决数据库日常运维过程中的小难题。搜索关注腾讯云数据库官方微信,立得10元云代金券,可移动端一键管理数据库。本期主题是:MySQL中清理Binlog的正确方式点击查看视频视频核心信息:在使用MySQL数据库的过
支撑微信支付的数据库如何提供超300万TPCC事务处理能力?
腾讯TBase是一款腾讯自研高性能HTAP数据库,提供高性能的OLTP和OLAP能力,同时保证可扩展全局一致性分布式事务(ACID),为用户提供高一致性的分布式数据库服务和高性能的数据仓库服务。一方面解决了传统数据库扩展不足、数据sharding之后数据库事务的严格一致性难题、数据安全、跨地域容灾等问题,同时具备了高性能事务处理、数据治理、混合负载支持等能力。在OLTP方面,TBase采用MVCC
腾讯云SQL Server 性能逆天,252万TPM国内无对手!
腾讯云数据库持续发力,产品发布和功能更新进入爆发期。继重磅推出最高50万QPS的Redis 4.0标准版(点击可跳转阅读)后,云数据库SQL Server 2017版也已全面商用。亮点抢先看:综合性能指标最高 TPM 突破252万,全面超越市场其它同类产品价格低于市场同类产品30%在高性能、高并发场景下,具有完美的支持能力内置前沿黑科技,图数据查询和机器学习一应俱全,有效助力用户商业成功最高252
腾讯黑科技:删大表不抖动,自动补充虚拟隐藏主键
2019年9月,腾讯云数据库正式按地域发布TXSQL5.7-201908版本,该版本主要实现写性能提升,新增功能特性和内核参数,为MySQL提供更稳定、高效的性能和服务能力。其中,新增特性包括DROP大表操作异步化、GTID复制功能扩展、隐藏主键功能、非Super权限用户Kill链接的功能等。另外,